Алгоритм (или библиотека C #) для определения «ключевых слов» в наборе сообщений? [закрыто]

Закрыто. Этот вопрос не по теме . В настоящее время он не принимает ответы.

Хотите улучшить этот вопрос? Обновите вопрос , чтобы он был по теме для Stack Overflow.

Закрыт 10 месяцев назад .

Я хочу создать список из ~ 6 ключевых слов (или даже лучше: пары ключевых фраз) для каждого сообщения на форуме сообщений.

В основном ключевые слова используются для замены строк темы в некоторых случаях.Например: Сообщение от Терри, отправленное 5 декабря, ключевые слова: норвежский синий, оперение, не мертвый
В идеальном мире ключевые слова будут определять как уникальные фазы, так и фразы, объединяющие обсуждение в «темы» , т. е. слова, которые имеют непосредственное отношение к рассматриваемому сообщению и некоторым другим сообщениям на форуме, но не часто встречаются на форуме в целом.
Я ожидаю, что появятся ненужные фразы, ничего страшного.
Не может быть слишком затратным с точки зрения вычислений: мне нужно что-то, что может обрабатывать несколько сотен сообщений за несколько секунд, так как мне нужно будет запускать это заново каждый раз, когда приходит новое сообщение.

Кто-нибудь знает хороший C # библиотека для этого? Может быть, есть способ заставить Lucene.NET предоставлять такую информацию?

Или, если это не удается, может ли кто-нибудь предложить алгоритм (или набор алгоритмов) для чтения? Если я реализую себя, мне нужно что-то не слишком сложное, я могу справиться с этим только в том случае, если это будет выполнимо примерно за неделю. На данный момент лучшее, что я нашел с точки зрения простого, но эффективного, - это TF-IDF .

ОБНОВЛЕНИЕ: Я загрузил результаты использования TF-IDF для выбора 5 лучших ключевых слов из реального набора данных здесь: http://jsbin.com/oxanoc/2/edit#preview

Результаты посредственные, но не совсем бесполезные ... может быть, с добавлением обнаружения многословных фраз, этого было бы достаточно.

задан Seth 3 January 2012 в 01:55

0 ответов

Другие вопросы по тегам:

c# algorithm search nlp text-mining

Алгоритм (или библиотека C #) для определения «ключевых слов» в наборе сообщений? [закрыто]

0 ответов

Похожие вопросы: