Парсер гугля

[erigins]

Парсер выдачи с гугла:
# # # # # # # # # # #
Сохраняет ссылки на странице по нужному "запросу"
# # # # # # # # # # #

----------Page №1----------
1: http://www.asd-europe.org/
2: http://www.asd-electro.ru/
3: http://www.asd-electro.ru/products/
4: http://www.asd-electro.ru/company/about/
5: https://ru.wikipedia.org/wiki/ASD
6: https://en.wikipedia.org/wiki/ASD
7: http://www.asd.com/
8: http://www.asd.ru/
9: https://www.facebook.com/AfrobSamyDeluxe

----------Page №1----------
1: http://autosvit.auto.ria.ua/last/today/
2: https://auto.ria.ua/car/bmw/
3: http://auto.ria.ua/catalog/maz/159
4: http://auto.ria.ua/auto_mazda_6_12085249.html
5: http://auto.ria.ua/car/honda/Jazz
6: http://auto.ria.ua/car/bmw/550/
7: http://auto.ria.ua/auto_skoda_rapid_12040237.html
8: http://auto.ria.ua/auto_dodge_ram_12234751.html
9: http://auto.ria.ua/auto_pts_6_9945050.html
10: http://kasko.auto.ria.ua/auto_audi_q7_15356353.html

 

[KillDead]

Юрзал? Как дела обстоят с баном? Так как кучи капч гугл кидает на попытки его парсить

 

[erigins]

Юрзал? Как дела обстоят с баном? Так как кучи капч гугл кидает на попытки его парсить

Жестко банит!... думаю как придумать велосипед.

 

[andriyevski]

Только с прокси реально решить проблему!

 

[SocMaster]

Только с прокси реально решить проблему!

Почему же, можно использовать зенку, лично за минуту - две, спарсил ~50 страниц (титлы парсил)
юзал js в проекте

--
с одного айпишника, после получил каптчу, думаю если задержку чуть увеличить, можно больше вытянуть

 

[andriyevski]

Почему же, можно использовать зенку, лично за минуту - две, спарсил ~50 страниц (титлы парсил)
юзал js в проекте

--
с одного айпишника, после получил каптчу, думаю если задержку чуть увеличить, можно больше вытянуть

Каждый выбирает то что ему проще...
Обожаю прокси