开源项目推荐：Bananalyzer

开源项目推荐：Bananalyzer

bananalyzer Open source AI Agent evaluation framework for web tasks 🐒🍌 项目地址: https://gitcode.com/gh_mirrors/ba/bananalyzer

1. 项目基础介绍和主要编程语言

Bananalyzer 是一个开源的 AI 代理评估框架，专门用于网页任务。该项目基于 Python 编程语言，同时使用了 HTML、Jupyter Notebook 和 Shell 等技术。Bananalyzer 的目标是提供一个统一的平台，用于评估和测试 AI 代理在网页任务上的性能。

2. 项目的核心功能

Bananalyzer 的核心功能包括：

• 网页任务评估框架：提供了一个评估 AI 代理在完成网页任务时的性能的框架。
• 静态网页快照：能够保存和部署历史/静态网页快照，确保网页内容在评估过程中的稳定性。
• 多样化数据集：构建了一个包含不同行业和用例的网站数据集，以帮助代理进行泛化。
• 自定义评估标准：支持特定的评估标准和代理用例，专注于网站上的结构化和直接信息检索。
• 统一数据集：将多个现有的网页任务数据集和评估方法统一到一个代码库中。

3. 项目最近更新的功能

最近更新的功能包括：

• 增强的 CLI 参数：新增了 CLI 参数，用于过滤特定的测试意图、测试类型或测试类别。
• 服务器功能：引入了一个基本的 FastAPI 服务器，用于暴露示例数据，方便用户访问和测试。
• 数据集更新：增加了多种类型的数据检索示例，包括链接、点击和导航等，以及需要多步骤导航、关闭弹窗、登录和解决验证码等复杂场景的测试。

Bananalyzer 项目的持续更新和改进，使其成为一个强大的工具，用于评估和测试 AI 代理在网页任务上的表现，为开源社区提供了宝贵的资源和工具。

bananalyzer Open source AI Agent evaluation framework for web tasks 🐒🍌 项目地址: https://gitcode.com/gh_mirrors/ba/bananalyzer