
14 апреля 2024
Парсинг описания товаров и его обработка
Полное описание товара в большинстве случаев нужно парсить с html.
Полное описание товара в большинстве случаев нужно парсить с html.
Относительно простой пример парсинга интернет-магазина.
1. При адекватных настройках сервера, строки мы дробим по 50тыс. Тогда у нас с загрузкой проблем не возникает. По 100тыс загрузка может быть медленней или зависать, чем по 50 тыс. 2....
Повезло если у сайта есть актуальный sitemap.xml, тогда берем все урлы оттуда и парсим. Если не уверены в полноте и корректности карты, то обходим весь сайт парсером, складываем свои...