Я хотел бы написать скрипт парсинга для получения комментариев из статей cnn. Например, эта статья: http://www.cnn.com/2012/01/19/politics/gop-debate/index.html?hpt=hp_t1
Я понимаю, что cnn использует disqus для своих комментариев обсуждение. Поскольку загрузка комментариев не зависит от веб-страниц (например, предыдущая страница, следующая страница) и является динамической (например, необходимо нажать «загрузить следующие 25»), я не знаю, как получить все 5000+ комментариев для этой статьи.
Есть идеи или предложения?
Большое спасибо!