Portuguese Word Embeddings 项目使用教程

Portuguese Word Embeddings 项目使用教程

portuguese_word_embeddings Portuguese Word Embeddings: Evaluating on Word Analogies and Natural Language Tasks 项目地址: https://gitcode.com/gh_mirrors/po/portuguese_word_embeddings

1. 项目的目录结构及介绍

portuguese_word_embeddings/
├── analogies/
│   └── testset/
├── sentence_similarity/
├── LICENSE
├── README.md
├── analogies.py
├── evaluate.py
├── preprocessing.py
├── requirements.txt
└── sentence_similarity.py

目录结构介绍

• analogies/: 包含用于评估词嵌入模型的测试集。
• sentence_similarity/: 包含用于句子相似度评估的文件。
• LICENSE: 项目的许可证文件，采用 GPL-3.0 许可证。
• README.md: 项目的介绍和使用说明。
• analogies.py: 用于评估词嵌入模型的脚本，支持语法和语义类比评估。
• evaluate.py: 用于评估句子相似度的脚本。
• preprocessing.py: 用于预处理文本文件的脚本，以便训练词嵌入模型。
• requirements.txt: 项目依赖的 Python 包列表。
• sentence_similarity.py: 用于句子相似度评估的脚本。

2. 项目的启动文件介绍

preprocessing.py

该脚本用于预处理文本文件，以便训练词嵌入模型。使用方法如下：

python preprocessing.py <input_file.txt> <output_file.txt>

• <input_file.txt>: 输入的原始文本文件。
• <output_file.txt>: 预处理后的输出文件。

evaluate.py

该脚本用于评估句子相似度。使用方法如下：

python evaluate.py <embedding_model.txt> --lang <language>

• <embedding_model.txt>: 词嵌入模型文件。
• --lang: 可选参数，指定葡萄牙语的变体（br 表示巴西葡萄牙语，eu 表示欧洲葡萄牙语）。

analogies.py

该脚本用于评估词嵌入模型的语法和语义类比。使用方法如下：

python analogies.py -m <embedding_model.txt> -t <testset.txt>

• -m <embedding_model.txt>: 词嵌入模型文件。
• -t <testset.txt>: 测试集文件。

3. 项目的配置文件介绍

requirements.txt

该文件列出了项目依赖的 Python 包，使用以下命令安装依赖：

pip install -r requirements.txt

LICENSE

项目的许可证文件，采用 GPL-3.0 许可证。

README.md

项目的介绍和使用说明，包含项目的安装、使用方法和评估方法的详细说明。

portuguese_word_embeddings Portuguese Word Embeddings: Evaluating on Word Analogies and Natural Language Tasks 项目地址: https://gitcode.com/gh_mirrors/po/portuguese_word_embeddings