Особенности
- Работа по адаптации БД проводилась в режиме реального времени, параллельно бизнес-процессам компании заказчика
- В процессе проверки итогов миграции происходило непрерывное наполнение исходной БД новыми данными, что осложняло переход и требовало дополнительного внимательного сравнения исходных данных.
Решение
По итогу проведенного предпроектного обследования, внимательного изучения требований и оценки технологических и производственных рисков клиенту был предложен
- План перехода на PostgreSQL с помощью Apache Airflow
- И адаптация базы данных и сервера взаиморасчетов корпоративной информационной системы
Результат
- Произведена адаптация баз данных и ETL пакетов с MS SQL и MS SSIS на PostgreSQL с помощью Apache Airflow
- Перенесено и адаптировано 6 Тб исходных данных
- Сохранены принципы информационного обмена и порядка запуска всех процедур, сохранены временные интервалы выполнения ETL пакетов заказчика
- Достигнут допустимый уровень производительности адаптируемой базы данных
- Обеспечена устойчивость и информационная безопасность решения за счет использования ПО систем хранения данных с верифицированным открытым исходным кодом.
- Совместно с заказчиком разработаны критерии и скрипты для проведения проектной приемки, по результатам которых были предоставлены протоколы сравнения данных