Страница 1 из 1

Повторный парсинг

Добавлено: 04 июл 2017 18:11
muzoff
При автоматическом парсинге с хотлайн некоторые позиции не парсятся по причине блокировки со стороны хотлайн. После включения прокси позиции все равно не парсятся, как будто уже где-то в базе стоит метка что на хотлайн для данного товара нет описания. Если создать новую базу то все ок и можно парсить но вопрос в том как быть с позициями которые не спарсились из за блокировки. Помогите

Re: Повторный парсинг

Добавлено: 05 июл 2017 09:19
support
Эту проблему решить можно только путем обхода блокировки то есть используя разные прокси, которых нет в черном списке Хотлайн.

Re: Повторный парсинг

Добавлено: 13 июл 2017 11:05
muzoff
Купил пакет (10 IP) личных прокси для парсинга на internetspace.com.ua
При смене прокси через proxyswitcher все работает, а вот прописывая прокси в самом СС они как будто игнорируются.

Re: Повторный парсинг

Добавлено: 13 июл 2017 11:44
support
Откуда такая уверенность, что они игнорируются?
Смените поиск по наименованию для сайта хотлайн.

Re: Повторный парсинг

Добавлено: 15 июл 2017 16:43
muzoff
А как сделать чтоб в СС не отображались товары деактивированные в PLI?

Re: Повторный парсинг

Добавлено: 17 июл 2017 12:26
support
muzoff писал(а):А как сделать чтоб в СС не отображались товары деактивированные в PLI?
Этот вопрос никак не связан с темой, в которой Вы его задали.
Такой возможности нет.