一幅油画:三名学徒对着立在墨水瓶之间的现代显示器临摹一幅解剖图,师傅在一旁检查他们的摹本。

数据集

别人没有的数据。

公开数据集教给模型的,是十年前的软件。我们记录的是企业每天都在用的软件,也能同样快地用你自己的工作构建数据集。

macOS 电脑操作数据集

v2.1 版,2026 年 9 月 25 日发布

个标注步骤
15,854
个任务
450
个教程
175

日常 macOS、视频剪辑、Blender 和 Godot。

仅留作测试:Photoshop、DaVinci Resolve、Audacity、Camtasia、QuickTime 等。

在对 1,015 个步骤的抽查中,约 90% 的点击落在正确目标上,约 70% 的操作完全正确。

各主题中完全正确的操作占比。Blender 和 Godot 按每批 30 个抽查,数字较为粗略。
主题完全正确的操作
日常 macOS76%
视频剪辑78%
Blender71%
Godot55%

标注由模型从教程视频中生成,通过抽样检查,而非逐条人工标注。

一段教程如何变成训练数据

我们找到全世界都在学的教程,只留下清晰的那些。每段教程被切分成一个个瞬间。对每个瞬间,我们还原做了什么、为什么这样做,找到屏幕上的准确位置,再把这些瞬间组合成任务。发布之前,再随机抽样审核一次。

从第一版到第二版用了两天,数据量增加了十倍。

数据集中的步骤

  • System Settingsclick (0.648, 0.436)Click the Schedule dropdown showing Off near the upper-right of the Night Shift dialog
  • CapCutclick (0.690, 0.234)Click the Custom curve preset tile in the Curve preset row at the top of the right inspector
  • Blenderhotkey shift+aPress the shortcut in the Blender 3D Viewport above the seabed plane
  • Godotclick (0.453, 0.638)Click the Create button in the lower-right of the Attach Script dialog
  • Finderhotkey cmd+shift+nPress the shortcut in the Finder Desktop file list in the main window
  • iMoviehotkey cmd++Press the shortcut in the active iMovie timeline panel at the bottom of the workspace
  • GodotwriteType button.mouse_exited.connect(_on_mouse_hovered.bind(false))
  • System Settingsclick (0.355, 0.539)Click the Always option in the open Show scroll bars pop-up menu

你的数据集

同一套工坊,也可以用在你的文档、工单和屏幕录像上。如果数据不能离开你的办公楼,我们就在现场离线工作:机器由我们带去,数据始终在你手里。

每一件委托,都从一次谈话开始。

告诉我们要做的工作、你手里有哪些数据、模型需要在哪里运行。我们会在两个工作日内回复。

洽谈项目biz@random-walk.co.jp