как парсить форумы на определённом движке

[Copat]

скажите как напарсить форум сделанный на определённом движке, например на основе PHPbb

 

[[btr]]

скажите как напарсить форум сделанный на определённом движке, например на основе PHPbb

Кхм, имеется предчувствие что тему снесут, но всетаки отвечу.
возьми форум на нужном тебе движке(штуки 3) найди как можно больше признаков этого движка(признак-это отличие от других движков)
вбивай в парсер признаки что нашел и парсь сколько душе угодно.
Незабывай комбинировать запросы чтобы выжать максимум.

 

[swed]

А еще признаки можно выдернуть с помощью инструмента в хрумере, так и называется - "анализатор признаков ссылок".

 

[SergeiSP]

Дабы не открывать новую тему спрошу здесь, а каким парсером можно парсить форумы? Т.е. именно парсить ссылки из топиков нужного форума?

 

[Copat]

Дабы не открывать новую тему спрошу здесь, а каким парсером можно парсить форумы? Т.е. именно парсить ссылки из топиков нужного форума?

насколько мне известно можно AGGRESS Parser заточить под эту задачу тока это надо рыться в его конфигах, в крайнем случае спросить у его разрабов.

 

[SkyFox]

Дабы не открывать новую тему спрошу здесь, а каким парсером можно парсить форумы? Т.е. именно парсить ссылки из топиков нужного форума?

полное название не помню, в названии было "краулер", Ру сео прога для анализа своего сайта, но при быстрой настройке отлично парсила из форумов все линки и шла вглубь на заданное кол-во страниц, попробуй погуглить "краулер" и т.п

 

[Rastafan]

Дабы не открывать новую тему спрошу здесь, а каким парсером можно парсить форумы? Т.е. именно парсить ссылки из топиков нужного форума?

ИМХО под такие нужды пишется приватный софт для конкретных ресов, что обеспечивает хорошую скорость парсинга, из готовых вариантов, можно заюзать A1 Sitemap Generator, она вроде фришная, если есть базовые знания инглиша то разобраться в ней просто, но парсит очень медленоо, гдет за сутки обрабатывает 60-80к, зачастую сервера на которых находится распашиваемый рес банят айпишник.

ЗЫ по запросу краулер мона оч много че найти ))

 

[[btr]]

Дабы не открывать новую тему спрошу здесь, а каким парсером можно парсить форумы? Т.е. именно парсить ссылки из топиков нужного форума?

сам делаю доры на форумах(сервисы форумов) если тебе именно для сайтмапа своих форумов могу поделится софтинкой(самому друг делал) которая не парсит а генерирует, если нужна обращайся

 

[venetu]

Есть еще десктопная прога Web Forum Reader, отсюда: Для просмотра ссылки Войди или Зарегистрируйся

Сам не ставил, но судя по описанию именно то, что тебе надо. Попробуй.

 

[Pftriot]

Дабы не открывать новую тему спрошу здесь, а каким парсером можно парсить форумы? Т.е. именно парсить ссылки из топиков нужного форума?

SergeiSP! Есть специальный краулер. Точного название к сожалению не помню. Толи Web crauler, толи Forum crauler.
Примерно полгода назад продавалась на форуме Ботмастера, за 50 баксов,как сейчас обстоят дела ХЗ.(попробуй поискать, и связаться с автором)
У мну где-то она была, если найду выложу.