Если возможность получить страницу после того как был запущен js?

тоже интересно, что есть на данный момент для этой задачи

ну вообще есть движки типо rhino, которым можно на вход скормить html и js, но общий их уровень развития таков, что скорее всего вы получите html, отличный от того, что получился в браузере бы. Т.е. на headless сервере практически невозможно получить результат работы браузера без него самого.

xvfb

http://phantomjs.org/

По описанию классная штука.

Мне так нравятся формулировки вопросов в разделе Webdev этим летом. Жаль я ничего не понимаю.

возможность то есть, но больше теоретическая...

на вскидку:

• для тестирования, селениум отчасти может помочь
• есть ряд расширений для браузеров включая greasemonkey
• «внедряете» в страницу скрипт, который «сериализует» весь DOM и/или его интересные части и отсылает на сервер

вообще некорректно поставлен вопрос: js запускается практически сразу, а вот страница будет доступна для парсинга после события dom ready...

Но даже если DOM успешно передан на сервер, то это будет работать в частном случае. Сценарии могут требовать действий от пользователя для просмотра. Например ajax-порции. Здравствуй click-robot :)

Это уж как минимум третий такой тред за неделю. Тут ещё были варианты.

Я просто решил создать темы конкретно об этом, по ссылке она всплыла косвенно.