Z-Bench 开源项目使用教程

Z-Bench 开源项目使用教程

z-bench Z-Bench 1.0 by 真格基金：一个麻瓜的大语言模型中文测试集。Z-Bench is a LLM prompt dataset for non-technical users, developed by an enthusiastic AI-focused team in Zhenfund. 项目地址: https://gitcode.com/gh_mirrors/zb/z-bench

1. 项目目录结构及介绍

Z-Bench 的项目目录结构如下所示：

z-bench/
├── .gitattributes
├── .gitignore
├── CODE_OF_CONDUCT.md
├── CONTRIBUTING.md
├── LICENSE
├── README.md
├── common.samples.csv
├── emergent.samples.csv
└── specialized.samples.csv

• .gitattributes：Git 属性配置文件，用于定义如何处理不同类型的文件。
• .gitignore：Git 忽略文件列表，用于指定在执行 git 命令时应该忽略的文件和目录。
• CODE_OF_CONDUCT.md：项目行为准则文件，定义了参与项目开发时应该遵守的行为规范。
• CONTRIBUTING.md：贡献指南文件，提供了如何为项目做贡献的指导和建议。
• LICENSE：项目许可证文件，本项目采用 CC-BY-4.0 许可。
• README.md：项目说明文件，包含了项目的基本信息和用法介绍。
• common.samples.csv：基础能力测试样本文件，包含了用于评估大模型基础能力的 Prompt 测试数据。
• emergent.samples.csv：进阶能力测试样本文件，包含了用于评估大模型进阶能力的 Prompt 测试数据。
• specialized.samples.csv：垂直能力测试样本文件，包含了用于评估大模型在特定领域能力的 Prompt 测试数据。

2. 项目的启动文件介绍

Z-Bench 项目并没有一个传统的启动文件，因为它是一个数据集，主要用于对大模型进行测试。用户可以直接查看 README.md 文件来了解项目的基本信息和如何使用数据集。

3. 项目的配置文件介绍

Z-Bench 项目同样没有配置文件，因为它不依赖于特定的配置来运行。数据集的三个 CSV 文件 (common.samples.csv, emergent.samples.csv, specialized.samples.csv) 直接提供了测试所需的 Prompt 数据，用户可以根据需要加载这些文件进行测试。

在使用数据集时，用户可能需要根据自己的应用场景和测试目的，对这些 CSV 文件进行适当的处理和配置。例如，选择特定的测试样本来针对特定的大模型能力进行评估。

z-bench Z-Bench 1.0 by 真格基金：一个麻瓜的大语言模型中文测试集。Z-Bench is a LLM prompt dataset for non-technical users, developed by an enthusiastic AI-focused team in Zhenfund. 项目地址: https://gitcode.com/gh_mirrors/zb/z-bench