Интеграция данных объединяет данные из разных источников в единое представление. У компании есть данные о клиентах в CRM, данные о транзакциях в ERP и заявки в службу поддержки в системе технической поддержки. Каждая система знает лишь часть информации. Интеграция объединяет эти части, чтобы сформировать полную картину. Без нее аналитики вынуждены запрашивать данные из каждой системы отдельно и сверять их вручную.

Подходы различаются. ETL извлекает данные из источников, преобразует их в общий формат и загружает в целевую систему. ELT меняет порядок, сначала загружая необработанные данные, а затем преобразуя их. Выбор зависит от возможностей целевой системы и предпочтений команды. Облачные хранилища данных сделали ELT популярным, поскольку они могут обрабатывать преобразования в больших масштабах. Интеграция на основе API соединяет системы в режиме реального времени. Очереди сообщений отделяют производителей от потребителей. Управление основными данными гарантирует, что основные сущности, такие как клиенты и продукты, имеют единое авторитетное определение. Сложность заключается не в технологии, а в семантике. Две системы могут использовать разные коды для одного и того же клиента. Одна система регистрирует продажу при размещении заказа, другая — при отгрузке продукта. Согласование этих различий требует бизнес-правил, а не только технических коннекторов. Интеграционные проекты терпят неудачу, когда данные имеют разное значение в разных местах.

Интеграционные подходы

• ETL — извлечение, преобразование, загрузка
• ELT — извлечение, загрузка, преобразование
• Интеграция API — соединения между системами в режиме реального времени.
• Очереди сообщений — асинхронный обмен данными.
• Управление основными данными — единый источник достоверной информации для ключевых объектов.

Интеграция – это в равной степени вопрос согласия и технологий. Системы могут взаимодействовать. Определения должны совпадать.