应用 · 项目档案
OmniACT
截图到动作程序的数据集,将桌面与网页任务指令、界面图像、目标标注和参考 PyAutoGUI 脚本配对。
它可以用来做什么?
训练和评估将屏幕图像及指令转换为鼠标键盘动作程序的视觉模型。
使用前需要知道什么?
提供静态样本和基于参考的动作指标,并非打包好的桌面执行环境。测试时不能将评估用目标框作为输入。数据卡标注 MIT;平台标签表示截图来源。
我们核查了什么?
本条目依据原始项目材料整理,未独立运行或复现结果。AI 参与开发的描述来自作者说明;上游版本、运行条件和许可应以原始来源为准。
- 资源类型
- 数据集与评测
- 开发方式
- 开发方式未确认
- 来源核查
- 平台
- Web, macOS, Windows, Linux