Граббер и nginx в итоге 504

Статус
В этой теме нельзя размещать новые ответы.

Juri

Мой дом здесь!
Заблокирован
Регистрация
5 Окт 2007
Сообщения
1.064
Реакции
200
  • Автор темы
  • Заблокирован
  • #1
Здравствуйте, возникла такая проблема, есть впс с apache и nginx на нем крутится большой сайт, на котором иногда нужно запускать грабер, причем запускать нужно именно через вебморуд. Все бы хорошо но грабинг идет 2-3 минуты, а nginx выдает 504 уже через полторы.
Можно ли это как то обойти? допустим для конкретного файла можно прописать set_time_limit больший чем в php.ini и апач не будет его обрубать, есть ли такой параметр для ngin?

Заранее спасибо
 
если время всегда одинаковое, то похоже на

keepalive_timeout 90; #сделать 200

хотя я очень в этом неуверен

**

или же нужно сказать скрипту, грабить с порта индейца 8080
 
Для начала ликбез: Для просмотра ссылки Войди или Зарегистрируйся

Скорее всего поможет уменьшение количества и частоты запросов.
 
  • Автор темы
  • Заблокирован
  • #4
Для начала ликбез: Для просмотра ссылки Войди или Зарегистрируйся
Скорее всего поможет уменьшение количества и частоты запросов.
Спасибо конечно, но совсем не в тему. Причем тут количество и частота запросов?

если время всегда одинаковое, то похоже на

keepalive_timeout 90; #сделать 200

хотя я очень в этом неуверен

**

или же нужно сказать скрипту, грабить с порта индейца 8080
30.10.2010 00:08

спасибо, попробую
 
Спасибо конечно, но совсем не в тему. Причем тут количество и частота запросов?
спасибо, попробую
энжи обычно ругается 504 когда апач перестает отдавать ему контент по таймауту, можно, конечно, попробовать сделать proxy_connect_timeout 75
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху