Как определить события с использованием НЛП и машинного обучения?

Question

У меня есть текст, описывающий такие события, как рождение, новая работа, свадьба, смерть и т. Д. Или никакого события. Как я могу обнаружить эти события?

Мой подход заключается в формировании набора слов и поиске их в тексте, соответствующем событию. Или используйте байесовский классификатор. Но байесовский классификатор требует некоторой подготовки по всем классам, мне нужен метод, который может даже классифицировать, не давая ему всех типов примеров? Это возможно ?

Answer 1

Каковы ваши требования к производительности? Низкий отзыв хорошо? Вам нужна высокая точность?

Основываясь на вашем вопросе, я предполагаю, что вы хотите что-то с разумным отзывом (чтение объявлений для рассылки спама?), Но на самом деле нет данных о тренировках.

Вы хотите метод, который может классифицировать документы (используя события из алгоритма распознавания имен именованных сущностей как функции) без предоставления каких-либо данных обучения. Все контролируемые методы (включая байесовские) требуют учебных данных, поэтому то, что вы просите/желаете, невозможно. Вам нужны помеченные данные в любом случае, иначе как вы можете сказать, насколько хорошо работает ваш процесс обнаружения?

На этом этапе вы даже не должны беспокоиться о том, какой классификатор использовать - я предлагаю написать несколько регулярных выражений, чтобы понять, насколько сильно ваша проблема/какая производительность вы получаете. Это может быть дюжина регулярных выражений, которые могут получить от вас 90% этих событий, и вы можете избежать чрезмерной разработки проблемы. Удачи!