Эмуляция веб-браузера

для нас определяют задачу с в основном эмуляцией браузера для выборки веб-страниц, надеясь автоматизировать тесты на различных веб-страницах. Это будет использоваться для (идеально) приложений консольного выхода, которые работают в фоновом режиме и генерируют отчеты.

Мы пытались идти с.NET и библиотекой WatiN, но она была основана на Собранном IE, и таким образом, она испытала недостаток во многих функциях, в которых мы взломали с вызовами к неуправляемому собственному коду, но в конце дня IE не ориентирован на многопотоковое исполнение, ни безопасный процесс, и многие необходимые опции могли только быть реализованы путем изменения значений реестра, и это было просто ужасно негибко.

• Поддержка прокси
• Поддержка JavaScript - мы должны смочь проанализировать фактический DOM после того, как любой JavaScript выполнился (и надо надеяться событие генерируется для обработки любых вызовов ajax),
• Способность сохранить все содержание страницы включая изображения ОТ КЭША загруженной страницы до отдельного местоположения
• способность очистить cookie/кэш, получите cookie/кэш и т.д.
• Способность установить заголовки и изменить данные сообщения для любого вызова браузера
• Процесс и/или ориентированный на многопотоковое исполнение был бы идеален
• И из любви к drogs, API, который не является абсолютно загадочным

Приемлемый C++ языков, C#, Python, что-либо, что может быть простым небольшим фоновым приложением, которое несколько терпимо и не имеет абсолютно "нетрадиционного" синтаксиса как Ruby.

От моего собственного исследования, и верят мне, я ужасен при поисках Google, я услышал, что хорошие вещи о WebKit... были бы спокойный модуль QtWebKit обрабатывать все эти функции?