Дублирующиеся записи — наиболее распространенная ошибка в проектах интеграции данных. Синхронизация проходит без ошибок, журналы остаются чистыми, а данные по-прежнему становятся непригодными для использования в течение нескольких недель. В этом руководстве объясняется, почему возникают дубликаты, как оценивается достоверность...
Дублирующиеся записи — наиболее распространенная ошибка в проектах интеграции данных. Синхронизация проходит без ошибок, журналы остаются чистыми, а данные по-прежнему становятся непригодными для использования в течение нескольких недель.
В этом руководстве объясняется, почему возникают дубликаты, как оценка достоверности предотвращает их появление и как разработать процесс проверки, который на самом деле используют команды.
Почему при синхронизации данных возникают повторяющиеся записи
Большинство интеграций построены с помощью одной инструкции: создать запись в целевой системе.
Эта инструкция каждый раз выполняется правильно. Он также выполняется, когда тот же клиент возвращается, создавая вторую запись, а затем третью.
Данные испытаний скрывают проблему
Тестовые среды содержат чистые уникальные записи. Данных о производстве нет.
Тот же человек появляется как:
Джейн Смит и Дж. Смит
Разные адреса электронной почты в разные годы
Смена фамилии после замужества
Общий домашний номер телефона
Ни один из этих вариантов не вызывает ошибку. Каждый из них создает новую запись в соответствии с написанными правилами.
Влияние на бизнес
Дублирующиеся записи вызывают четыре измеримые проблемы:
Разделить историю. Пять лет клиентской активности, разделенные на три записи
Дублирование сообщений. Один и тот же человек получает одно и то же сообщение