«Хочу собрать каталог» звучит понятно, пока не открываешь настройки. Какие поля нужны? Сколько товаров выбрать? Сразу включать расписание или сначала сделать пробный запуск? Первый сбор данных проще начать с вопроса, на который вы действительно собираетесь ответить.
Например: «Какие цены сейчас указаны у двадцати товаров из моего списка?» Для первого сбора этого достаточно. Чтобы увидеть изменения, позже понадобится повторная проверка той же выборки.
Сначала определите результат
Запишите, что должно оказаться в таблице. Для проверки цен достаточно идентификатора товара, названия, цены и ссылки. Если сравниваете регионы, добавьте регион отдельным полем.
Сразу определите, что считать одной записью. Один товар в одном городе и тот же товар в другом городе могут иметь разные условия. Если объединить их без признака региона, сравнение станет неоднозначным.
Небольшая выборка удобнее большого каталога. Возьмите знакомые карточки, включая товар без цены или с несколькими вариантами. На таких примерах легче заметить проблему, чем среди тысяч похожих строк.
Проверьте данные до автоматизации
В Akmelo источник объединяет сценарии, запуски и записи. Для полей можно указать типы и проверки. Но описание поля само по себе не настраивает получение значения с сайта: это задача сценария сбора.
Запустите проверку на небольшой выборке. Если используете пробный режим, изучите его предпросмотр, прежде чем переходить к рабочему сбору. Сверьте несколько строк с источником: не попала ли в цену зачёркнутая сумма, сохранилась ли ссылка, совпадает ли вариант товара.
Обратите внимание на пустые значения. Отсутствующая цена не равна нулю, а недоступная карточка не доказывает, что товар окончательно исчез. Сохраните это различие в правилах обработки.
Когда состав полей понятен, расширьте список товаров и снова проверьте результат. Посмотрите, как меняются длительность запуска и расход ресурсов. По этим наблюдениям выбирайте частоту следующих сборов.
Для первого рабочего запуска полезно заранее определить критерий готовности: какие поля обязательны, какие пропуски допустимы и какие строки требуют ручной проверки. Тогда успешный статус не подменит проверку качества.
Если пока непонятно, что включать в результат, начните с набора полей для мониторинга каталога. Настройки источника и запусков описаны в документации. Сверьте настройки со своим списком полей перед следующим запуском.
