Непонятная ситуация с гуглом. Возможен ли бан диапазона ип?

opa100pe

Создатель
Регистрация
13 Сен 2010
Сообщения
32
Реакции
0
Сегодня целый день дергал гугл без таймаута, просто менял айпишник на адсле, когда банили. Сейчас какая-то фигня началась - все нормально открывается в браузере, а скрипты отваливаются с 403, 404 ошибками при запросах к google.com. Пробовал реконектиться, ловил ипаки в 4 совершенно разных диапазонах - одна хрень. Никогда не сталкивался с таким- не знаю что думать... Может он палит какие то стандартные заголовки http клиента и запрещает запросы?..

Вот щас спецом глянул:
urllib2.urlopen('http://google.com') - выдет 404 ошибку,
urllib2.urlopen('http://google.ru') - открывает
urllib2.urlopen('http://google.ru/search?q=site') - выдает 403 ошибку.
Колдовство какое-то

edit: поробовал сейчас юзнуть урлиб с проксей - все работает, так что это походу такой хитрый бан. доигрался =)
можно удалять впринципе.
 
Заголовок User-agent используешь? попробуй его сменить
 
Проверено! Палит именно по http заголовкам.
Плюс к тому, если дергаете google просто через браузер, то еще и через куки.
А если еще и мозиллой с установленным тулбаром гугл, то вообще нет никаких проблем определить вас на любом ip:)
 
дергайте по разным датацентам
 
Назад
Сверху