Вопросы с тегом «nlp»

Я разрабатывал внутренний веб-сайт для инструмента управления портфелем. Там много текстовых данных, названий компаний и т. Д. Я был очень впечатлен способностью некоторых поисковых систем очень быстро отвечать на запросы с помощью «Вы имели в виду: хххх». Мне нужно иметь возможность разумно принимать пользовательский запрос и отвечать не только необработанными …

436 algorithm  machine-learning  nlp  spell-checking  text-search 

Я смотрю на работу над проектом НЛП, на любом языке программирования (хотя Python будет моим предпочтением). Я хочу взять два документа и определить, насколько они похожи.

207 nlp 

Stanford NLP, демо-версия здесь , дает такой результат: Colorless/JJ green/JJ ideas/NNS sleep/VBP furiously/RB ./. Что означают теги «Часть речи»? Я не могу найти официальный список. Это собственная система Стэнфорда, или они используют универсальные теги? (Что такое JJ, например?) Кроме того, когда я перебираю предложения, ища существительные, например, я заканчиваю тем, …

172 java  nlp  stanford-nlp  part-of-speech 

Мне нужно найти достаточно эффективный способ распознавания слогов в слове. Например, Невидимый -> in-vi-sib-le Вот несколько правил слоговой записи, которые можно использовать: V CV VC CVC CCV CCCV CVCC * где V - гласная, а C - согласная. Например, Произношение (5 Pro-nun-ci-a -tion; CV-CVC-CV-V-CVC) Я пробовал несколько методов, среди которых …

142 nlp  spell-checking  hyphenation 

Когда я использую каждый? Кроме того ... зависит ли лемматизация NLTK от частей речи? Было бы точнее, если бы это было так?

132 python  nlp  nltk  lemmatization 

В почтовом клиенте iOS, когда электронное письмо содержит дату, время или место, текст становится гиперссылкой, и можно создать встречу или посмотреть карту, просто нажав на ссылку. Это работает не только для писем на английском, но и на других языках. Мне нравится эта функция, и я хотел бы понять, как они …

129 machine-learning  nlp  information-extraction  named-entity-recognition 

Я только начинаю использовать NLTK и не совсем понимаю, как получить список слов из текста. Если я использую nltk.word_tokenize(), я получаю список слов и знаков препинания. Вместо этого мне нужны только слова. Как избавиться от знаков препинания? Также word_tokenizeне работает с несколькими предложениями: к последнему слову добавляются точки.

125 python  nlp  tokenize  nltk 

В чем разница между парсером группы интересов и анализатором зависимостей ? Каковы различия в использовании этих двух?

114 parsing  nlp 

Закрыто . Этот вопрос основан на мнении . В настоящее время он не принимает ответы. Хотите улучшить этот вопрос? Обновите вопрос, чтобы на него можно было ответить с помощью фактов и цитат, отредактировав этот пост . Закрыт 6 лет назад . Уточните этот вопрос Я хотел бы знать, какой язык …

112 java  python  nlp 

Я пробовал PorterStemmer и Snowball, но оба работают не со всеми словами, пропустив некоторые очень распространенные. Мои тестовые слова: « кошки, бегущие, бегали, кактусы, кактусы, сообщества кактусов », и оба получают менее половины правильных ответов. Смотрите также: Алгоритм стемминга, который производит настоящие слова Стемминг - примеры кода или проекты с …

111 nlp  stemming  lemmatization 

Я работаю над проблемой анализа настроений, данные выглядят так: label instances 5 1190 4 838 3 239 1 204 2 127 Таким образом, мои данные несбалансированы, поскольку 1190 instancesпомечены значком 5. Для классификации я использую SVC scikit . Проблема в том, что я не знаю, как правильно сбалансировать мои данные, …

109 python  machine-learning  nlp  artificial-intelligence  scikit-learn 

У меня есть проблемы с созданием новой модели Stanford Parser. Я также скачал последнюю версию из Стэнфорда: http://nlp.stanford.edu/software/lex-parser.shtml А здесь Genia Corpus в 2-х форматах, xml и ptb (Penn Treebank). Standford Parser может обучаться с файлами ptd; затем я скачал Genia Corpus, потому что хочу работать с биомедицинским текстом: http://categorizer.tmit.bme.hu/~illes/genia_ptb/ …

93 java  nlp  stanford-nlp 

У меня есть приложение .NET, в котором, учитывая существительное, я хочу, чтобы оно правильно добавляло к этому слову префикс «a» или «an». Как мне это сделать? Прежде чем вы подумаете, что ответ - просто проверить, является ли первая буква гласной, подумайте о таких фразах, как: честная ошибка подержанная машина

93 c#  nlp  linguistics 

Можно ли использовать Stanford Parser в NLTK? (Я не говорю о Stanford POS.)

90 python  parsing  nlp  nltk  stanford-nlp 

В настоящее время этот вопрос не подходит для нашего формата вопросов и ответов. Мы ожидаем, что ответы будут подтверждены фактами, ссылками или опытом, но этот вопрос, скорее всего, потребует дебатов, аргументов, опросов или расширенного обсуждения. Если вы считаете, что этот вопрос можно улучшить и, возможно, снова открыть, обратитесь за помощью …

90 java  nlp