Дмитрий Ч.
218 сообщений
#10 лет назад
Коллеги, кто сталкивался с сабжем? Предстоит пропарсить порядка 50 тыс. запросов по картинкам, но даже с большими (~5 сек.) задержками гугл выдаёт каптчу, причем после третьего антигейта получил каптчу на каптчу (может и антигейт ошибся - не знаю, но всё равно не весело). В итоге за часа 2-3 пропарсилось около 300 запросов, что, естественно, несерьёзно. Поделитесь опытом, плиз, кто сталкивался.
Артем Л.
11416 сообщений
#10 лет назад
Я думаю нет лучше способа антигейта и подобных, разбить на несколько потоков и IP.
Андрей А.
798 сообщений
#10 лет назад
TigerDesign,ну или попробовать использовать сервисы типа 
Артем Л.
11416 сообщений
#10 лет назад
Какая разница какой сервис использовать, суть от этого не меняется!
Дмитрий Ч.
218 сообщений
#10 лет назад
Друзья, дело не в том, какую ломалку капчи использовать - опыта в этом хватает)) Вопрос больше тем, кто реально занимался масштабными парсами гугла, насколько это вообще реально. Потому что у меня при "первом подходе" складывается впечатление, что "не особо", если не задействовать сотни проксей или что-то в том же духе.
Андрей А.
798 сообщений
#10 лет назад
Hungry_Hunter,прошу прощения, невнимательно прочел ваше сообщение.
Артем Л.
11416 сообщений
#10 лет назад
Есть сервисы, которые предоставляют функционал парсинга гугла за деньги (1 копейка за запрос), если интересно, могу поделиться в личку.
Андрей Халецкий
3562 сообщения
#10 лет назад
Прокси+антикапча+таймауты+кукисы+таймауты
Дмитрий Ч.
218 сообщений
#10 лет назад