Дедупликация карточек исполнителя: сопоставление личности (Identity Resolution)

Дедупликация карточек исполнителя — связывание повторных записей одного человека в единую учётную запись. В России обработку персональных данных при этом регулирует Федеральный закон № 152-ФЗ, использование изображения лица для идентификации — статьи 15 и 16 Федерального закона № 572-ФЗ, а проверку партнёра цифровой платформы до начала сотрудничества — статья 5 Федерального закона № 289-ФЗ. Механизм применяют цифровые платформы, HR-системы и сервисы подключения исполнителей.

Кратко:

• Что это: сопоставление личности (identity resolution) связывает дублирующие карточки и сохраняет историю исходных записей.
• Кто применяет: цифровые платформы, таксопарки, логистические операторы и сервисы подбора персонала.
• Когда применять: с 1 октября 2026 года оператор платформы обязан проверить партнёра до начала сотрудничества.
• Как работает: паспорт и СНИЛС служат сильными признаками сопоставления после валидации данных.
• Какие ограничения: часть 3 статьи 5 152-ФЗ запрещает объединять базы данных с несовместимыми целями обработки.

Почему появляются дубли карточек исполнителя?

Для одного курьера, водителя или подрядчика в учётных реестрах заказчика может существовать несколько карточек. Записи создают агентство-подрядчик, сама платформа и внутренний HR-модуль. Независимый ввод данных приводит к расхождениям в ФИО, телефоне и адресе.

Дубли искажают статистику по привлечённому персоналу, усложняют биллинг и повышают риск двойной выплаты одному исполнителю. При жалобе или расследовании несвязанные карточки мешают восстановить историю работы исполнителя.

Сопоставление личности (identity resolution) включает приём и нормализацию данных, поиск совпадений, присвоение устойчивого идентификатора и обновление записи. Оператор настраивает правила так, чтобы алгоритм сначала оценивал сильные признаки, а затем анализировал неполные совпадения. Задача дедупликации — связать повторные записи одного человека и сохранить историю исходных карточек. Далее термином «сопоставление личности» будем описывать процесс целиком, а связывание отдельных записей называть сопоставлением карточек.

Какие требования 289-ФЗ учитывать с 1 октября 2026 года?

С 1 октября 2026 года оператор цифровой платформы обязан проверять лиц, намеревающихся стать партнёрами платформы, до начала сотрудничества. Проверка проводится с использованием государственных информационных систем и реестров: ЕГРЮЛ, ЕГРИП или ЕСИА. Перечень проверяемых сведений и дополнительные способы проверки определяет Правительство РФ ( ч. 2 и 3 ст. 5 Федерального закона № 289-ФЗ).

Партнёр платформы обязан поддерживать актуальность регистрационных и идентификационных данных и подтверждать налоговый статус. Обязанность поддерживать сведения в актуальном состоянии делает устойчивый профиль практической необходимостью: без него платформа не докажет, что проверила конкретного исполнителя и вела его данные в актуальном состоянии.

Сроки проверки различаются по способу: в общем случае до 5 рабочих дней, для отдельных цифровых способов 1 календарный день, для иностранной организации без представительства в России до 15 рабочих дней (постановление Правительства РФ № 768). Точные сроки и состав сведений сверяют с актуальными редакциями 289-ФЗ и подзаконных актов.

Как дедупликация карточек отличается от их удаления?

Дедупликация карточек исполнителя связывает повторные записи одного человека в единую учётную запись и сохраняет их без физического удаления. Связывание записей сохраняет историю каждой карточки: кто и когда внёс расходящиеся сведения, какие проверки прошёл исполнитель и какие договоры на него оформлены.

Механическое удаление повторной карточки уничтожает цепочку изменений и лишает оператора оснований для последующего аудита. Вместо удаления дублей оператор платформы формирует золотую запись (golden record): профиль с атрибутами исполнителя и ссылками на исходные карточки. В журнале фиксируют основание автоматической связи или решение оператора, рассмотревшего спорный случай.

Сохранение истории не отменяет требований ст. 5 и 21 152-ФЗ. Данные хранят не дольше, чем этого требует цель обработки, и уничтожают при достижении цели, отзыве согласия или по требованию субъекта, если нет иного законного основания. Сроки хранения атрибутов и журналов оператор определяет во внутренних документах.

Какие данные помогают сопоставить карточки исполнителя?

Паспорт и СНИЛС могут быть сильными признаками сопоставления после проверки качества данных. Правило автоматической связи карточек заказчик определяет с учётом качества источника, риска операции и внутренних процедур контроля.

Телефон служит дополнительным признаком. Номер может быть переоформлен на родственника или зарегистрирован на организацию, поэтому одного совпадения телефона недостаточно для вывода о связи карточек.

Оператор настраивает нормализацию полей по утверждённым правилам: алгоритм удаляет лишние пробелы, приводит регистр и проверяет формат введённых данных. Затем процедура сопоставления ищет записи с совпадающими или близкими признаками. Сервис IDX для проверки физического лица получает сведения о действительности паспорта и подтверждает соответствие СНИЛС и ФИО по данным СФР. Такие проверки проводятся с согласия субъекта персональных данных; заказчик учитывает результаты как дополнительные признаки при сопоставлении.

Объединяя источники, заказчик проверяет совместимость целей обработки. Часть 3 ст. 5 152-ФЗ запрещает объединение баз персональных данных, обработка которых ведётся в несовместимых между собой целях: данные для выплат вознаграждения и данные маркетингового профилирования нельзя сводить в один профиль без самостоятельного правового основания для каждой цели.

Как нечёткое сопоставление (fuzzy matching) обрабатывает неполные совпадения?

Опечатка в серии паспорта, другое написание имени в загранпаспорте или устаревший телефон исключают точное сопоставление. В таких ситуациях алгоритм применяет нечёткое сопоставление имён (fuzzy matching): рассчитывает степень сходства записей и сравнивает результат с порогами, утверждёнными во внутренних правилах платформы.

Пороговые значения настраивают индивидуально для каждого поля. Для фамилии и имени допускают небольшое расстояние Левенштейна, а для номера документа нечёткое сопоставление применяют с осторожностью из-за риска объединить карточки разных людей.

При спорном результате сходства запись направляют на ручную проверку оператору. Специалист изучает несовпадающие атрибуты, проверяет историю изменений и принимает решение о связывании или разделении карточек. Решение оператора фиксируют в журнале аудита.

Когда допустимо использовать биометрию и face match?

Изображение лица относится к персональным данным, а при использовании для установления личности регулируется Федеральным законом № 572-ФЗ. Коммерческие платформы не вправе самостоятельно обрабатывать биометрические персональные данные для идентификации вне Единой биометрической системы, если не имеют специальной аккредитации (ст. 15 и 16 572-ФЗ).

При онбординге заказчик может применять технологии определения живости (liveness detection) и сравнения лиц на фото (face match) для проверки подлинности селфи и сверки с фото в документе — в пределах, допускаемых законодательством о персональных данных и условиями письменного согласия субъекта. При дедупликации фотосверка может служить дополнительным фактором при ручном рассмотрении спорных карточек, если это предусмотрено согласием.

Результаты фотосверки не заменяют проверку юридически значимых атрибутов: паспорта, ИНН и СНИЛС. Их используют совместно с документарными проверками для снижения риска регистрации по чужим или поддельным документам.

Как формируется единый профиль и «золотая запись» (golden record)?

После связывания записей реестр присваивает исполнителю устойчивый идентификатор. Последующие карточки, которые процедура проверки относит к этому человеку по правилам сопоставления, ссылаются на тот же ключ.

Золотая запись хранит наиболее полные и проверенные атрибуты: подтверждённые ФИО, актуальные контакты, статус самозанятого и признак прохождения проверок. Исходные карточки остаются в базе со своими идентификаторами, что позволяет проследить историю каждого источника данных.

После замены паспорта, изменения контактов или получения новых результатов проверок оператор обновляет атрибуты и фиксирует дату актуализации. Для спорных данных полезно хранить прежнее значение и основание изменения в пределах сроков хранения, установленных оператором.

Как выстроить процесс сопоставления карточек исполнителя: 7 шагов?

Шаг 1. Инвентаризация источников данных. Определите, из каких систем поступают карточки исполнителей: агентские базы, формы саморегистрации, кадровые модули и внешние сервисы. Зафиксируйте состав полей и форматы каждого источника.

Шаг 2. Проверка правовых оснований. Убедитесь, что цели сбора данных в каждом источнике совместимы (ч. 3 ст. 5 152-ФЗ). Проверьте наличие согласий на обработку персональных данных и передачу сведений третьему лицу, если используется внешний сервис проверки.

Шаг 3. Нормализация и валидация данных. Приведите телефоны к международному формату E.164, очистите ФИО от опечаток и лишних пробелов, проверьте корректность форматов паспорта, ИНН и СНИЛС. Невалидные значения отсекайте до сопоставления.

Шаг 4. Подключение внешних проверок. Настройте проверку действительности паспорта и соответствия СНИЛС по данным СФР. Для водителей добавьте проверку водительского удостоверения и полиса ОСАГО. Включите результаты проверок в скоринг сопоставления.

Шаг 5. Настройка правил сопоставления. Задайте детерминированные правила для точных совпадений (паспорт + СНИЛС) и вероятностные пороги для нечёткого поиска (fuzzy matching) по ФИО, дате рождения и контактам. Определите пограничную зону для ручной проверки.

Шаг 6. Формирование золотой записи. Создайте механизм объединения карточек в мастер-профиль с присвоением устойчивого идентификатора. Сохраняйте ссылки на исходные записи, дату связывания и основание решения. Не удаляйте исходные карточки.

Шаг 7. Мониторинг и актуализация. Регулярно проверяйте актуальность данных: обновляйте статус самозанятого перед каждой выплатой, отслеживайте замену паспортов и истечение сроков действия водительских удостоверений. Логируйте все изменения.

С чего начать дедупликацию карточек исполнителей?

• Проведите аудит: определите, сколько карточек дублируется в учётных базах и какие поля заполнены с наибольшим количеством ошибок.
• Сверьте правовые основания: проверьте тексты согласий на обработку данных и убедитесь в совместимости целей по ст. 5 152-ФЗ.
• Настройте нормализацию: внедрите единый формат хранения ФИО, телефонов, адресов и реквизитов документов.
• Подключите проверку документов: интегрируйте проверку паспорта и СНИЛС для подтверждения сильных признаков сопоставления.
• Опишите правила связывания: зафиксируйте в регламенте, какие комбинации признаков дают автоматическую связь, а какие требуют ручной проверки.
• Внедрите золотую запись: настройте хранение мастер-профиля с сохранением исходных карточек и журнала изменений.
• Подготовьтесь к 289-ФЗ: выстройте процесс проверки партнёров до допуска к заказам с соблюдением нормативных сроков.

Как проверить исполнителя до активации на платформе?