GoForum › 🌐 V2EX

codex 的电脑控制用的是什么技术？

jiuzhougege · 2026-10-06 10:03 · 0 次点赞 · 4 条回复

在 macos 右上角菜单栏有个电脑的图标，图标右下角有个小人头像。在被控制的 app 左上角也有显示这个图标；可以在后台操作这个 app ，不阻塞用户使用电脑。

4 条回复

supuwoerc · 2026-10-06 10:13

Computer use 吧

jiuzhougege · 2026-10-06 10:28

@supuwoerc 这个我也知道，但是底层是怎么实现的？ Accessibility API 是独占的，应该不是 Accessibility API 实现的

cubecube · 2026-10-06 10:33

https://github.com/e2b-dev/open-computer-use
开源实现，原理差不多吧，codex 不一定用的这个

vitality · 2026-10-06 10:43

就是用的录屏 API + Accessibility API 。至于非独占：点击不控制光标，而是直接对目标进程的元素执行动作；输入不发全局键盘事件，而是设置元素的值、选中文本。所以不需要动光标也不抢焦点，只需要在后台运行。

添加回复

你还需要登录后发表回复

登录后可发帖和回复

登录注册

主题信息

作者: jiuzhougege

发布: 2026-10-06

点赞: 0

回复: 0