Tor Web Crawler

Хорошо, вот что мне нужно. У меня есть веб-сканер на основе PHP. Доступно здесь: http://rz7ocnxxu7ka6ncv.onion/ Теперь моя проблема в том, что моему пауку, который действительно сканирует страницы, необходимо сделать это через SOCKS-порт 9050. Дело в том, что я должен туннелировать его соединение через Tor, чтобы он мог разрешать домены .onion, что я индексирую. . (Только оканчивающийся на .onion.) Я вызываю этот сценарий из командной строки с помощью php crawl.php и добавляю соответствующие параметры для сканирования страницы. Вот что я думаю: Есть ли способ заставить его использовать Tor? ИЛИ могу ли я заставить ВСЮ МАШИНУ туннелировать вещи через Tor, и как? (Например, форсирование всего трафика через 127.0.0.1:9050) возможно, если я настрою глобальные настройки прокси, php будет их уважать?

Если какое-либо из моих решений сработает, как я буду это делать? (Пошаговые инструкции, я новичок.)

Я просто хочу создать свою собственную поисковую систему Tor. (Не рекомендую мои поисковые системы p2p - это не то, что я хочу для этого - я знаю, что они существуют, я сделал свою домашнюю работу.) Вот источник поискового робота, если вам интересно взглянуть на: Может быть, кто-нибудь с добрым сердцем сможет изменить его, чтобы использовать 127.0.0.1:9050 для всех запросов сканирования? http: // pastebin.com / kscGJCc5

10
задан Johan Nilsson 11 February 2012 в 15:59
поделиться