Для одного из наших клиентов было необходимо собрать базу товаров с сайта поставщика. К сожалению, у поставщика не было выгрузки для простой загрузки товаров на сайт клиента, поэтому приходилось организовывать систему сбора товаров с согласия самого поставщика.
Количество товаров большое, их более 220 тысяч, вручную их перенести нереально. Для автоматизированного сбора информации по ним были разработаны специальные алгоритмы, которые аккуратно и без создания большой нагрузки на сайт поставщика собирали все необходимые параметры по товарам.
Также была реализована проверка на дубли товаров, т.к. на сайте поставщика один и тот же товар мог показываться в разных категориях. Структура каталога (разделы) тоже была сохранена.
В результате работы алгоритмов сбора мы получили файлы, которые были сформированы в нужный формат для загрузки на сайт и в 1С клиента. После того, как товары были импортированы на сайт, дело было за малым: скорректировать цены и наличие по данным клиента.
Таким образом удалось быстро наполнить каталог товаров клиента большим количеством товаров без привлечения контент-менеджеров и по максимуму исключая ошибки при ручном заполнении.
