V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
shineonme

Codex 这个申请权限的交互好有意思

  •  
  •   shineonme · 10 days ago · 3841 views

    > https://x.com/trpfsu/status/2044882275100250444

    ------

    而且这个 Computer Use 和用户操作是可以同时进行的,会冒出来一个像是幽灵鼠标一样的玩意儿,好奇这种是因为系统层面的支持所以可以实现吗?

    Supplement 1  ·  10 days ago
    这个效果已经有开源逆向实现了:
    https://x.com/dotey/status/2044986392862662957
    26 replies    2026-04-19 01:33:02 +08:00
    TonyMontana
        1
    TonyMontana  
       10 days ago
    cool
    hugsky
        2
    hugsky  
       10 days ago
    好炫酷
    sddyzm
        3
    sddyzm  
    PRO
       10 days ago
    确实在改变世界
    loading
        4
    loading  
       10 days ago
    好丝滑
    390547784
        5
    390547784  
       10 days ago
    第一次看见这种交互,太有意思了
    andforce
        6
    andforce  
       10 days ago
    “像是幽灵鼠标一样的玩意儿”
    印象中在 github 看过一个开源的类似东西,可以指引你操作电脑、软件
    zeyangstudies
        7
    zeyangstudies  
       10 days ago
    这是更新了吗?为啥我的还没有这个功能
    qppq54s
        8
    qppq54s  
       10 days ago
    好炫酷
    Mar5
        9
    Mar5  
       10 days ago
    @zeyangstudies 更新一下 codex app ,在设置中开启
    cadl
        10
    cadl  
       10 days ago
    这个交互真好。太聪明了
    Danswerme
        11
    Danswerme  
       10 days ago
    确实酷炫啊
    Danswerme
        12
    Danswerme  
       10 days ago
    好奇这个是怎么做到的,捕获窗口然后计算坐标? 那个拖动软件至列表中赋予权限的功能是 macOS 自带的吗?
    shineonme
        13
    shineonme  
    OP
       10 days ago
    @andforce 而且这个幽灵鼠标可以在其他未聚焦的窗口后台运行,跟操作了多年电脑,基本必须在聚焦窗口点击鼠标的认知相悖了,有点惊喜
    andforce
        14
    andforce  
       10 days ago via iPhone   ❤️ 1
    shineonme
        15
    shineonme  
    OP
       10 days ago
    @andforce 哇,这个项目也好有意思,而且感觉应用前景很好
    suibianwanwan
        16
    suibianwanwan  
       10 days ago
    @Mar5 codex 还有 app 吗, 是我 out 了, 我以为只有 client
    nicaiwss
        17
    nicaiwss  
       10 days ago via iPhone
    这个直接问 codex 让它实现就行了
    IsaacYoung
        18
    IsaacYoung  
       10 days ago
    不错不错
    shineonme
        19
    shineonme  
    OP
       10 days ago   ❤️ 1
    @Danswerme 「拖动软件至列表中赋予权限的功能」是系统自带的,就是一个 fileURL ;定位猜测就是捕捉窗口计算坐标的,这个系统设置窗口的宽度是固定的,会有一定的优势,高度坐标不太确定是如何实现的
    teaguexiao
        20
    teaguexiao  
       10 days ago
    这种干预式的权限申请设计真的屌,比直接弹系统对话框敢多了。就等其他 coding agent 也跟上吧。
    sddyzm
        21
    sddyzm  
    PRO
       10 days ago via iPhone
    逆向设计这么快就出来了,不知道效果能复原百分之几,甚至是做得更好?!更好奇的是这次逆向复原使用的辅助代码模型是什么
    pill
        22
    pill  
       10 days ago
    好奇为什么不把它做到 chatgpt desktop 里 因为目前 chatgpt desktop 是 native 而 codex desktop 是 electron
    zhaoxixiangban
        23
    zhaoxixiangban  
       10 days ago
    今天也看到了 ,比较细节。赞
    zz177060
        24
    zz177060  
       9 days ago via iPhone
    反重力一直可以。不过是测试浏览器这样,他后台运行,我鼠标操作我的。
    Mikukko
        25
    Mikukko  
       9 days ago via iPhone
    确实不错
    jackqian
        26
    jackqian  
       9 days ago
    还有 computer use 操作电脑时,程序不必在前台,就很奇怪。
    我让他帮我发条微博,他打开浏览器操作,截图 之类的,我浏览器不是当前屏幕前台上,他也能操作
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1137 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 78ms · UTC 23:07 · PVG 07:07 · LAX 16:07 · JFK 19:07
    ♥ Do have faith in what you're doing.