ИИ помогает находить возможные дубли товаров в каталоге: например, когда одна и та же чашка заведена под двумя названиями. Сначала соберите названия и проверенные характеристики, затем попросите модель предложить пары для сравнения. Каждую пару нужно проверить до объединения записей, чтобы вместе с дублем случайно не убрать отдельный вариант товара.
Проблема часто начинается вполне буднично. Один сотрудник написал объём в миллилитрах, другой использовал литры, а поставщик прислал своё название. В результате поиск показывает три почти одинаковые карточки, и менеджер тоже начинает выбирать между ними с некоторой задумчивостью.
Определите, что в вашем каталоге считается одним товаром
Для учебного примера возьмём магазин посуды. Две записи могут описывать одинаковую синюю чашку объёмом 300 мл. Но чашка той же серии объёмом 450 мл уже отличается по характеристике, важной для покупателя. Похожее название здесь не даёт основания объединять записи.
Запишите признаки, которые определяют отдельный вариант: размер, объём, цвет, комплектность, материал или совместимость. Состав зависит от товара. Для комплекта из двух предметов и одного предмета должны сохраняться понятные различия, даже если фотография похожа.
У каждой исходной записи оставьте её внутренний идентификатор. Так результат проверки можно будет связать с нужной строкой, не полагаясь на изменяемое название. Если есть код поставщика, уточните область его действия: одинаковое значение в двух разных источниках ещё нужно проверить.
Приведите сведения к сопоставимому виду
Сделайте отдельную копию выгрузки. Разнесите название и характеристики по понятным столбцам. Сохраните исходные значения рядом с подготовленными, чтобы можно было проверить преобразование.
| Запись | Сведения для сравнения |
|---|---|
| A17 | Чашка "Север", синяя, 300 мл |
| B42 | Север, чашка синего цвета, 0,3 л |
| C08 | Чашка "Север", синяя, 450 мл |
Все записи в таблице вымышлены. A17 и B42 выглядят как кандидаты на проверку: объём записан в разных единицах, а остальные приведённые признаки совпадают. Для окончательного решения всё равно нужны сведения о модели и комплектности. У C08 уже указан другой объём.
Неизвестное значение отмечайте явно. Пустое поле материала не означает совпадение с материалом соседней строки. Если данные получены из скана, сначала проверьте распознавание чисел и обозначений.
Попросите ИИ объяснить каждую предложенную пару
В ответе нужны идентификаторы записей, совпадающие признаки, различия и вопросы для проверки. Разрешите модели оставить вывод неопределённым. Произвольная оценка "похожесть 98%" не объяснит сотруднику, почему можно объединять складские записи.
Заполненный учебный запрос
Найди кандидатов на дубли в учебном каталоге.
A17: чашка "Север", синяя, 300 мл.
B42: Север, чашка синего цвета, 0,3 л.
C08: чашка "Север", синяя, 450 мл.
Сравни название, цвет и объём. Для каждой предложенной пары укажи совпадения, различия и недостающие сведения. Не объединяй записи и не придумывай материал, код модели или комплектность.
Замените пример разрешёнными данными своего каталога и перечислите признаки, значимые для ваших товаров. Запрос здесь не запускался. Ожидаемый результат представляет собой список кандидатов с основаниями, который сотрудник затем проверяет.
При большом каталоге сначала ограничьте сравнение разумными группами, например одной категорией. Сохраните состав каждой переданной части. Иначе трудно понять, какие записи действительно сравнивались, а какие ещё не попали в обработку.
Подтвердите совпадение по источникам
Сверьте предложенные пары с данными поставщика и рабочей системой. Особенно внимательно проверьте размер, комплектность и ограничения применения. В рекомендациях OWASP описаны риски правдоподобных ошибок ИИ, поэтому уверенный ответ модели требует той же проверки, что и осторожный.
Сохраните решение сотрудника: совпадение подтверждено, это разные варианты или сведений пока недостаточно. Для последнего состояния нужен список уточнений. Не стоит заставлять человека выбирать между двумя окончательными ответами, когда исходных данных нет.
Сначала подготовьте план объединения
- Выберите основную запись по согласованному правилу.
- Проверьте связанные остатки, цены, документы и историю заказов.
- Опишите перенос связей и возможность восстановления.
- Испытайте изменение на отдельной копии данных.
- После выполнения сверьте каталог и поиск со стороны покупателя.
Если у обеих записей уже есть страницы сайта, отдельно подготовьте решение об их адресах. Google Search Central описывает перенаправления и указание предпочтительного адреса (canonical) для похожих страниц, но это не заменяет исправление товарных данных. Назначать один адрес всем похожим изделиям по догадке модели не стоит.
После очистки проверьте импорт, который создал повтор. Возможно, приложение не узнаёт уже существующую запись при следующей загрузке. Пока причина сохраняется, каталог будет исправно пополняться прежними дублями.
Если на разбор каталога и настройку обмена данными не хватает времени, можно обсудить эту задачу со мной. Посмотрите мой опыт и проекты, затем расскажите о каталоге и нужной автоматизации. Загляните также в мой блог.
Из какого источника в вашем каталоге чаще всего появляются повторные товары?