AI can what?

应用 · 项目档案

OmniACT

截图到动作程序的数据集,将桌面与网页任务指令、界面图像、目标标注和参考 PyAutoGUI 脚本配对。

训练评测Web, macOS, Windows, Linux

它可以用来做什么?

训练和评估将屏幕图像及指令转换为鼠标键盘动作程序的视觉模型。

使用前需要知道什么?

提供静态样本和基于参考的动作指标,并非打包好的桌面执行环境。测试时不能将评估用目标框作为输入。数据卡标注 MIT;平台标签表示截图来源。

我们核查了什么?

本条目依据原始项目材料整理,未独立运行或复现结果。AI 参与开发的描述来自作者说明;上游版本、运行条件和许可应以原始来源为准。

资源类型
数据集与评测
开发方式
开发方式未确认
来源核查
平台
Web, macOS, Windows, Linux

放到同类资料中比较

继续浏览同类项目