Парсер Яндекс Маркета

[setevoi]

Вопрос по парсеру
Написал я тут парсер Яндекс Маркета и проработало это чудо всего 4 дня
после чего получило бан от Яндекса

модуль был написан для ИМ.
При добавление товара. закидывалась ссылка на товар на Яндекс маркет
после чего парсились характеристики товара.
отпарсить удалось только 60 товаров.

Вот как его парсить )?

 

[setevoi]

p.s.

парсер на php & curl

 

[Evil_Master]

proxy использовались?

 

[setevoi]

proxy использовались?

ну как бы нет

Я так понимаю как то так

 curl_setopt($ch, CURLOPT_PROXY, "111.111.111.111");

 

[komyak]

Писал парсеры под Яндекс каталог, маркет, вордстат.
Яндекс можно парсить только с проксями+очистка кукисов:
1) Парсим прокси и проверяем на анонимность
2) Парсим с прокси , например, 5 товаров.
3) Чистим кукисы и меняем прокси.
И так по кругу...

 

[esche]

отпарсить удалось только 60 товаров.

и проработало это чудо всего 4 дня

Эм.. за 4 дня 60 товаров и бан поймать? Он их пачкой что ли обновлял? Паузы между запросами сколько делал?

 

[setevoi]

Эм.. за 4 дня 60 товаров и бан поймать? Он их пачкой что ли обновлял? Паузы между запросами сколько делал?

Порядка 4 минут. пока добавлялась цена, пока описание, фотки подгрузить