AI can what?

应用 · 项目档案

ADE-bench

基于容器的基准,评估 Agent 修复或修改 dbt 项目、SQL 转换及数据仓库结果的能力。

评测请查阅上游说明

它可以用来做什么?

通过任务专用 dbt 测试和预期结果表比对,评估数据模型及分析流水线的修改。

使用前需要知道什么?

DuckDB 任务会把本地数据库复制到任务容器。Snowflake 任务使用真实账号,创建或替换试验数据库、用户及角色,且会保留这些对象;上游建议使用独立测试账号。数据库及项目变体因任务而异。固定的 Harbor 包含 48 项 DuckDB+dbt 任务,不能代表当前源码中的全部任务。

我们核查了什么?

运行方式:需 Python >=3.10、Docker/Compose、共享 dbt 项目及另行分发的 DuckDB 文件。模型凭证取决于所选 Agent;内置参考解法 Agent 可在不调用模型时检查任务配置。固定版本的源码有 60 个标为 ready 的任务目录,该状态不代表已独立验证运行。

许可说明:仓库代码采用 Apache-2.0。数据库发布及已查阅元数据未确立每个原始数据集的独立条款,不能假定所有仓库内容均沿用代码许可。 上游许可 ↗

本条目依据原始项目材料整理,未独立运行或复现结果。AI 参与开发的描述来自作者说明;上游版本、运行条件和许可应以原始来源为准。

资源类型
环境与评测
开发方式
开发方式未确认
来源核查
平台
请查阅上游说明

放到同类资料中比较

继续浏览同类项目