使用opennlp进行依存句法分析

最新推荐文章于 2023-07-22 16:35:46 发布

转载最新推荐文章于 2023-07-22 16:35:46 发布 · 293 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：https://segmentfault.com/a/1190000014224312

文章标签：

#golang #人工智能

本文介绍如何使用OpenNLP进行依存句法分析，通过Parser工具和预训练模型实现英语句子的结构解析，并展示了解析结果的不同形式。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

序

本文主要研究下如何使用opennlp进行依存句法分析

Parser

opennlp主要使用Parser来进行依存句法分析，其模型为ParserModel

    @Test
    public void testParserTool() throws IOException {
        try (InputStream modelInputStream = this.getClass().getClassLoader().getResourceAsStream("chunker/en-parser-chunking.bin")) {
            ParserModel model = new ParserModel(modelInputStream);
            Parser parser = ParserFactory.create(model);
            String sentence = "The cow jumped over the moon";
            // Used to demonstrate difference between NER and Parser
            // sentence = "He was the last person to see Fred.";

            Parse parses[] = ParserTool.parseLine(sentence, parser, 3);
            for (Parse parse : parses) {
                parse.show();
            }
        } catch (IOException ex) {
            ex.printStackTrace();
        }
    }

这里使用en-parser-chunking.bin这个训练好的模型来进行分析

第一句输出如下

(TOP (PP (S (NP (DT The) (NN cow)) (PP (VP (VBD jumped) (PRT (RP over))))) (NP (DT the) (NN moon))))
(TOP (NP (NP (DT The) (NN cow)) (PP (S (VP (VBN jumped) (PP (IN over) (NP (DT the) (NN moon))))))))
(TOP (NP (NP (DT The) (NN cow)) (SBAR (S (VP (VBN jumped) (PP (IN over) (NP (DT the) (NN moon))))))))

第二句输出如下

(TOP (FRAG (FRAG (S (NP (PRP He)) (VP (VBD was) (NP (NP (DT the) (JJ last) (NN person)) (SBAR (S (VP (TO to) (VP (VB see))))))))) (: Fred.)))
(TOP (S (S (NP (PRP He)) (VP (VBD was) (NP (NP (DT the) (JJ last) (NN person)) (PP (VP (TO to) (VP (VB see))))))) (: Fred.)))
(TOP (S (FRAG (S (NP (PRP He)) (VP (VBD was) (NP (NP (DT the) (JJ last) (NN person)) (SBAR (S (VP (TO to) (VP (VB see))))))))) (: Fred.)))

小结

opennlp也支持依存句法分析，不过根节点的表示，stanford nlp使用的是ROOT，而opennlp使用的是TOP。

doc

tools.parser.parsing