斯坦福 stanford coreNLP 中的PCFG parser-lexparser

最新推荐文章于 2024-04-01 09:40:57 发布

一休Q_Q

最新推荐文章于 2024-04-01 09:40:57 发布

阅读量3.1k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： stanford-coreNLP阅读笔记文章标签：短语树依存句法树

本文链接：https://blog.youkuaiyun.com/eli00001/article/details/75088863

本文介绍了如何使用Stanford CoreNLP进行PCFG模型的训练，并展示了FPEG模型在句法分析上的测试效果，包括短语树和依存句法树的应用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

PCFG模型训练

Java -Xmx7g  edu.stanford.nlp.parser.lexparser.LexicalizedParser   -tLPP edu.stanford.nlp.parser.lexparser.ChineseTreebankParserParams  -train data/source/dataCTBZh//bracketed  -saveToSerializedFile  data/models/pcfgZH.ser.gz

其中：

-tLPP，用来选定训练树库的语言，中文选择edu.stanford.nlp.parser.lexparser.ChineseTreebankParserParams

说明：

        输入的语料共1677971个句子，去重后词为67811

输入的文件格式为：

<DOC>
<DOCID>XIN.19960210.0178</DOCID>
<HEADER>
<DATE>1996-02-10</DATE>
</HEADER>
<BODY>
<HEADLINE>
<S ID=1>
( (IP-HLN (NP-SBJ (NP-PN (NR 上海) 
			 (NR 浦东)) 
		  (NP (NN 开