n-gram

2зной

2ответ

Каков наиболее эффективный способ хранения языковых моделей в приложениях NLP?

Как они обычно хранят и обновляют языковые модели (например, модели N-граммов)? Какая структура является наиболее эффективным способом хранения этих моделей в базах данных?

3зной

1ответ

Разница между NGramFilterFactory и EdgeNGramFilterFactory

Я новичок в Solr. В моем проекте NGramFilterFactory и EdgeNGramFilterFactory оба используются для поля. Мое понимание в соответствии с документом EdgeNGramFilterFactory используется для запроса «начин

0зной

1ответ

Как отсортировать список строк по n-граммам в python

Привет, я хочу отсортировать список строк accodring в порядке убывания n-граммов. Пусть следующий мой список ["sedan", "sail sedan", "sail", "price of", "price", "of chevrolet", "of", "chevrolet sail"

1зной

1ответ

Ngram модель и алгоритм сглаживания

Какой алгоритм сглаживания является простым и эффективным в случае реализации точки зрения? Моя подготовка корпуса является шестнадцатеричным свалка выглядит, 64 FA EB 63 31 D2 62 22 19 BD 64 B5 63 17

0зной

2ответ

Полиномиальная ошибка в Rapidminer при n-грамматической классификации

Я пытаюсь классифицировать различные понятия в тексте с помощью n-грамма. Мой данные tyically существует из шести колонок: Слова, которое нуждается в классификационном Классификационного Первого слова

4зной

3ответ

Как создать bigram из текстового файла с частотой в Spark/Scala?

Я хочу взять текстовый файл и создать биграмм всех слов, не разделенных точкой «.», Удаляя любые специальные символы. Я пытаюсь сделать это, используя Spark и Scala. Этот текст: Здравствуйте, мой друг

0зной

3ответ

Elasticsearch с Ngram индексации не находя частичные совпадения

Так у меня есть индекс elasticsearch, который был создан как это: curl -XPUT 'http://localhost:9200/person' -d '{ "settings": { "number_of_shards": 1, "analysis": { "filter": {

5зной

1ответ

Как настроить модель машинного перевода с использованием огромной языковой модели?

Moses - это программное обеспечение для создания моделей машинного перевода. И KenLM - это программное обеспечение модели языка defacto, которое использует moses. У меня есть текстовый файл с 16 Гб те

0зной

1ответ

Обучение SVM-классификатору с использованием bigrams в python

Я пытаюсь проанализировать твиты, используя классификатор SVM. Я смог успешно выполнить классификацию с использованием униграмм в качестве функций. Я использую реализацию SciKit libSVM, которая может