word2vec

1зной

1ответ

Как тренировать модель p (категория | название) с помощью слова2vec

Используя word2vec, цель состоит в том, чтобы максимизировать вероятность тела p (слово | контекст), а контекст - в виде слов. Предположим, что вам присвоены титулы и их категории (например, спорт, ед

6зной

2ответ

Эффективный способ объединения последовательности RDD из файлов в Apache Spark

В настоящее время я пытаюсь подготовить набор векторов Word2Vec в UMBC Webbase Corpus (около 30 ГБ текста в 400 файлах). Я часто сталкиваюсь с ситуациями с памятью даже на 100 ГБ плюс машины. Я запуск

7зной

3ответ

Почему word2vec использует 2 представления для каждого слова?

Я пытаюсь понять, почему в программе skipgram word2vec есть 2 представления для каждого слова (скрытое представление, которое является вложением слова) и выходное представление (также называемое вложе

2зной

1ответ

Gensim Word2vec хранения атрибут syn0norm

Я пытаюсь использовать word2vec для проекта и после тренировки я получаю: INFO: не хранить атрибут syn0norm Есть ли способ, которым я мог бы спасти syn0norm. Как это сделать? спасибо.

5зной

3ответ

Ошибка: 'utf8' кодек не может декодировать байт 0x80 в позиции 0: недействительный стартовый байт

Я пытаюсь сделать следующее kaggle assignmnet. Я использую пакет gensim для использования word2vec. Я могу создать модель и сохранить ее на диске. Но когда я пытаюсь загрузить файл обратно, я получаю

1зной

1ответ

Kaggle word2vec конкуренция, часть 2

мой код FROM: https://www.kaggle.com/c/word2vec-nlp-tutorial/details/part-2-word-vectors, я прочитал данные успешных, здесь используется для BeautifulSoup и NLTK очистить текст, удалить небуквы но циф