Как подготовить пользовательскую систему на основе перехода на SyntaxNet

Question

Я разрабатываю парсер, который не является парсером зависимостей, но он по-прежнему является системой на основе перехода. Вместо использования трех действий SHIFT, REDUCE-LEFT и REDUCE-RIGHT, таких как дуги-переход, я предложил свои собственные действия для своего анализатора. Как я понимаю в статье Andor et al. (2016), я могу обучать SyntaxNet любой системе на основе перехода, если система следует некоторым правилам, определенным в документе. Но я точно не знаю, с чего начать. Я посмотрел на код, но кажется, что они в основном предназначены для обучения анализатора зависимостей (с тремя действиями SHIFT, REDUCE-LEFT и REDUCE-RIGHT). Я очень благодарен, если вы можете выделить некоторые части кода, которые могут помочь мне достичь моей цели.

Кроме того, я не совсем понимаю, как SyntaxNet может преобразовать формат данных ConNLL в данные обучения золота, можете ли вы показать мне, какой исходный файл отвечает за эту задачу?

Большое спасибо заранее

Answer 1

Если вы хотите изменить систему перехода с собственной один, вам нужно будет сделать несколько изменений в коде. Прежде всего, вам нужно будет реализовать оракул для сопоставления деревьев синтаксиса золота с последовательностью переходов. Нивер (2008) - хорошее введение в тему: http://www.mitpressjournals.org/doi/pdf/10.1162/coli.07-056-R1-07-027