PORTcore
+7 900 228-04-13

Когда автоматизация переносит ошибки быстрее людей

Аудит качества данных и справочников

Находим, где возникают дубли, неоднозначные значения и потерянные связи, и готовим план приведения данных в рабочее состояние.

Аудит качества данных и справочников: поиск неоднозначных записей и проверка структуры данных. PORTcore — portcore.ru.
Иллюстрация к услуге «Аудит качества данных и справочников».

Один контрагент записан под несколькими названиями, единицы товара смешаны, а часть обязательных свойств заполнена произвольным текстом. На таком основании неудобно строить отчётность, обмен или ИИ-помощника: каждая новая автоматизация воспроизводит накопленную неопределённость. Аудит помогает понять происхождение проблемы и выбрать исправления, которые сохранят смысл данных.

Сначала выясняем, что означает запись

Одинаковое название ещё не доказывает дубль. У компании могут быть разные договоры, плательщики и адреса; похожие товары могут отличаться исполнением. Вместе с владельцем процесса определяем сущность, устойчивые идентификаторы и допустимые варианты. Фиксируем, какая система управляет полем, кто вправе его менять и как изменение доходит до остальных участников.

Выборку строим по реальным операциям: поиск клиента, сборка заказа, выгрузка каталога или подготовка управленческой сводки. В проверку включаем исключения и старые записи. Если доступна только выгрузка, отмечаем ограничения: по ней нельзя достоверно установить все причины появления ошибки или поведение текущего обмена.

Что именно исследуем

Полнота
Отличаем отсутствующие сведения от корректного пустого значения и проверяем поля, без которых ломается выбранная операция.
Согласованность
Сверяем справочники, единицы, форматы и связи между объектами. Ищем значения, которые по-разному понимают разные системы.
Происхождение
Прослеживаем источник и ручные правки: иначе очищенный справочник может снова испортиться при следующей загрузке.

Для спорных совпадений готовим правила ручного разбора. Автоматическое объединение выбираем только там, где есть достаточные основания и понятны последствия для документов, заказов и истории. Доля совпадающих строк сама по себе не является доказательством безопасного слияния.

Аудит качества данных и справочников: Дефект данных связан с источником и рабочей операцией. PORTcore — portcore.ru.
Дефект данных связан с источником и рабочей операцией. Полноту, согласованность и происхождение рассматриваем совместно. Массовое изменение базы является отдельной работой.

От реестра дефектов к устойчивому порядку

Результат включает карту проблем с примерами, затронутые процессы, предлагаемые правила нормализации и порядок исправления. Для каждого заметного дефекта указываем, как его обнаруживать повторно. Важен не только разовый список: нужны проверки на входе, ответственный за справочник и способ обработки неоднозначного случая.

Приоритет определяем вместе с бизнесом. Ошибка реквизитов, мешающая заказу, и необязательное описание в архивной карточке требуют разной срочности. Оценку объёма очистки даём с допущениями: часть трудозатрат становится известна после разбора контрольных примеров, особенно если исходные значения нужно подтверждать у сотрудников или поставщика.

Для начала полезны описание проблемной операции, состав источников и обезличенная выборка. Полный доступ ко всей клиентской базе не требуется по умолчанию. Если сведения чувствительные, заранее выбираем минимальный состав данных и подходящую среду работы; внешняя ИИ-обработка не включается в аудит автоматически.