22
ответа
Сравнение между MVP и MVC [duplicate]
Я хочу спросить между mvp и mvc, у меня есть две части. 1. Я могу использовать веб-искатель для сравнения mvp и mvp в производительности? 2. может дать другой примерный пример исследования для сравнения mvp и mvc?
вопрос задан: 4 May 2015 03:26
15
ответов
Не удалось выполнить сканирование моего приложения AngularJS [дубликат]
Я работаю над приложением AngularJs (v1.5), которое имеет динамические ссылки. Я использовал html5mode для удобных URL-адресов в моем приложении AngularJs. Мое приложение размещено на сервере Nginx. У меня есть ...
вопрос задан: 3 August 2013 21:39
12
ответов
Препятствуйте тому, чтобы данные сайта были проверены и разорваны
Я изучаю создание сайта содержания с возможно тысячами различных записей, доступных индексом и поиском. Что является мерами, я могу взять, чтобы препятствовать тому, чтобы злонамеренные поисковые роботы разорвались...
вопрос задан: 7 October 2008 07:41
12
ответов
лучшая библиотека, чтобы сделать очистку сети
Я хотел бы получить данные из от различных веб-страниц, таких как адреса ресторанов или даты различных событий для данного местоположения и так далее. Что является лучшей библиотекой, я могу использовать для извлечения...
вопрос задан: 15 September 2008 21:16
10
ответов
Проверка Интернета
Я хочу проверить для определенных вещей. Конкретно события, которые происходят как концерты, фильмы, открытия художественной галереи, и т.д., и т.д. Что-либо, во что можно было бы провести время, идя. Как я реализую...
вопрос задан: 14 May 2009 21:52
9
ответов
Каковы ключевые соображения при создании поискового робота?
Я только что начал думать о создании/настройке поискового робота сегодня, и знайте очень мало о поисковом роботе / этикет робота. Большинство записей на этикете, который я нашел, кажется старым и неловким...
вопрос задан: 24 April 2014 00:19
9
ответов
Язык/библиотеки для загрузки и парсинга веб-страниц?
Какой язык и библиотеки подходят, чтобы сценарий проанализировал и загрузил небольшие числа веб-ресурсов? Например, некоторые веб-сайты публикуют псевдоподкасты, но не как надлежащие каналы RSS; они просто...
вопрос задан: 4 March 2010 00:32
8
ответов
Обнаружение 'скрытых' поисковых роботов
Что опции там для обнаружения поисковых роботов, которые не хотят быть обнаруженными? (Я знаю, что список методов обнаружения позволит умному программисту скрытого поискового робота делать лучшего паука, но меня...
вопрос задан: 6 November 2014 13:01
8
ответов
Автоматизированная проверка ссылок для [закрытого] тестирования системы
Я часто должен работать с хрупкими веб-сайтами прежней версии, которые прерывают неожиданные пути, когда логика или конфигурация обновляются. У меня нет времени, или знание системы должно было создать Селен...
вопрос задан: 7 November 2009 10:19
7
ответов
Поисковый робот в Python. Где я должен запустить и за чем я должен следовать? - Помощь необходима
У меня есть промежуточное знание в Python. если я должен записать поисковый робот в Python, за чем вещи должны я следовать и где должен я начинать. есть ли какая-либо определенная работа? любой совет имел бы очень...
вопрос задан: 29 July 2010 05:32
6
ответов
Как Вы архивируете весь веб-сайт для офлайнового просмотра?
Мы на самом деле записывали статические/архивируемые копии наших веб-сайтов asp.net для клиентов много раз. Мы использовали WebZip до сих пор, но у нас были бесконечные проблемы с катастрофическими отказами, загрузили страницы нет...
вопрос задан: 11 August 2017 03:18
6
ответов
Хранение URL, в то время как Глобальный поиск
Я создал немного поискового робота в Python, который я использую для сбора URL. Я не интересуюсь содержанием. Прямо сейчас я сохраняю все посещаемые URL в наборе в памяти, потому что я не хочу мой...
вопрос задан: 25 July 2015 06:30
6
ответов
Поисковые роботы Google интерпретируют JavaScript? Что, если я загружаю страницу через Ajax? [закрытый]
Когда пользователь вводит мою страницу, я должен выполнить другой вызов Ajax... для загрузки данных в отделении. Это, как мое приложение работает. Проблема состоит... в том, когда я просматриваю источник этого кода, это не делает...
вопрос задан: 3 March 2015 16:07
6
ответов
Получите список URL от [закрытого] сайта
Я развертываю заменяющий сайт для клиента, но они не хотят, чтобы все их старые страницы закончились в 404 с. Хранение старой структуры URL не было возможно, потому что это было отвратительно. Таким образом, я пишу 404...
вопрос задан: 14 April 2014 21:10
6
ответов
Запись более быстрого паука Python
Я пишу паука в Python для проверки сайта. Проблема, я должен исследовать приблизительно 2,5 миллиона страниц, таким образом, я мог действительно использовать некоторую справку, делающую оптимизированный для скорости. То, что я должен сделать, исследуют...
вопрос задан: 14 April 2014 20:17
6
ответов
Как записать поисковый робот?
У меня были мысли о попытке записать простой поисковый робот, который мог бы проверить и произвести список его результатов для веб-сайтов и содержания нашего NPO. У кого-либо есть какие-либо мысли о том, как сделать это? Где...
вопрос задан: 14 April 2014 20:16
6
ответов
Кто-либо знает хорошего основанного на Python поискового робота, что я мог использовать?
Я полузаставлен записать свое собственное, но у меня действительно нет достаточного количества времени прямо сейчас. Я видел список Википедии поисковых роботов с открытым исходным кодом, но я предпочел бы что-то записанное в Python. Я понимаю что я...
вопрос задан: 21 December 2010 03:04
6
ответов
руководство по сканированию всей сети?
Я просто подумал, и мне было интересно, можно ли сканировать всю сеть (как большие мальчики!) на одном выделенном сервере (например, Core2Duo, 8-гигабайтная оперативная память, 750-гигабайтный диск 100 Мбит / с). Я пришел ...
вопрос задан: 17 January 2010 09:10
6
ответов
Какой веб-хост позволяет Вам запустить поисковые роботы на нем?
Я работаю над проектом церемонии вручения дипломов для одного из моих университетских курсов, и я должен найти, что некоторое место запускает несколько поисковых роботов, из которых я записал в C#. Без опыта веб-хостинга я немного потерян. Это...
вопрос задан: 3 August 2009 17:25
6
ответов
Рекомендации по использованию инструмента для пауков с Lucene или Solr? [закрыто]
Что такое хороший сканер (паук) для использования с документами HTML и XML (локальными или сетевыми) и который хорошо работает в пространстве решений Lucene / Solr? Может быть на основе Java, но не обязательно.
вопрос задан: 12 November 2008 00:50
5
ответов
Как настроить robot.txt, который разрешает только страницу сайта по умолчанию
Скажем, у меня есть сайт на http://example.com. Мне бы очень хотелось, чтобы боты могли видеть домашнюю страницу, но любая другая страница должна быть заблокирована, поскольку паукам это бессмысленно. Другими словами, http://example.com & ...
вопрос задан: 2 November 2014 12:06
5
ответов
Как я делаю простой поисковый робот в PHP? [закрытый]
У меня есть веб-страница с набором ссылок. Я хочу записать сценарий, который вывел бы все данные, содержавшиеся в тех ссылках в локальном файле. Кто-либо сделал это с PHP? Общие руководящие принципы и...
вопрос задан: 14 April 2014 21:08
5
ответов
HTTPWebResponse + очень Медленный StreamReader
Я пытаюсь реализовать ограниченный поисковый робот в C# (только для нескольких сотен сайтов) использование HttpWebResponse. GetResponse () и Streamreader. ReadToEnd (), также попробованное использование StreamReader. Читайте () и цикл к...
вопрос задан: 8 February 2012 18:20
5
ответов
Лучший способ хранить данные для основанного на механике поискового робота?
Я хочу проверить сайт с Механиком и задаться вопросом, существует ли лучший способ временно снабдить значения, чем GM_setValue. То, что я хочу сделать, проверить мои контакты в социальной сети и извлечении...
вопрос задан: 28 January 2009 14:23
5
ответов
Могу я поисковые роботы поиска блока для каждого сайта на веб-сервере Apache?
У меня есть своего рода сервер подготовки в общедоступном Интернете под управлением копии производственного кода для нескольких веб-сайтов. Я действительно не хотел бы его, если сайты подготовки индексируются. Есть ли способ, которым я могу...
вопрос задан: 22 October 2008 07:51
4
ответа
помешайте rsync удалять незаконченные исходные файлы
У меня есть две машины, скорость и масса. скорость имеет быстрое соединение и запускает поисковый робот, который загружает много файлов к диску. масса имеет большое дисковое пространство. Я хочу переместить файлы от...
вопрос задан: 9 July 2019 06:57
4
ответа
Как Вы превращаете динамический сайт в статический сайт, который может быть demo'd с CD?
Я должен найти способ проверить одно из веб-приложений нашей компании и создать статический сайт из него, который может записываться к CD и использоваться путешествующим торговым персоналом для демонстрации веб-сайта. Бэкэнд...
вопрос задан: 6 September 2017 20:29
4
ответа
Текстовая загрузка Википедии
Я надеюсь загружать полный текст Википедии для своего проекта колледжа. Я должен записать своего собственного паука для загрузки этого или есть ли общедоступный набор данных Википедии, доступной онлайн? Просто дать Вам...
вопрос задан: 13 April 2017 22:04
4
ответа
как обнаружить ботов поисковой системы с php?
Как можно обнаружить ботов поисковой системы с помощью php?
вопрос задан: 31 March 2015 05:38
4
ответа
Замедлите глобальный поиск веб-сайта
Существует ли способ вынудить паука замедлить свой глобальный поиск веб-сайта? Что-нибудь, что может быть помещено в заголовки или robots.txt? Я думал, что не забыл читать что-то об этом являющемся возможным, но...
вопрос задан: 16 April 2013 13:26