AI can what?

网站 · 项目档案

WebArena-Verified

独立维护的 WebArena 评测产物,提供修订任务、结构化答案检查及基于已记录网络轨迹的离线判分。

评测Web

它可以用来做什么?

通过确定性的规范化及结构检查,对已记录网页 Agent 输出重新评分,或在支持的自建网站上收集新运行。

使用前需要知道什么?

它修订原始 WebArena 任务族。v1.2.3 的812项完整任务及258项 Hard 子集,不是可叠加到 WebArena 的新独立任务。离线判分需指定的答案和轨迹产物;收集新轨迹仍需网站及重置。应固定评分器、数据和镜像版本,成绩不一定与原始评分器一致。

我们核查了什么?

运行方式:支持 Python >=3.11 的 CLI/软件包或 Docker。评分器读取 Agent 答案和网络事件记录;网站容器及可选地图/维基百科下载需另行配置。本次未启动容器、重放任务或重置状态。

许可说明:评分代码及 v1.2.3 数据卡声明 Apache-2.0,底层网站软件与内容仍适用各自条款。 上游许可 ↗

本条目依据原始项目材料整理,未独立运行或复现结果。AI 参与开发的描述来自作者说明;上游版本、运行条件和许可应以原始来源为准。

资源类型
评测套件
开发方式
开发方式未确认
来源核查
平台
Web

放到同类资料中比较

继续浏览同类项目