V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
shineonme

Codex 这个申请权限的交互好有意思

  •  
  •   shineonme · Apr 17 · 3947 views

    > https://x.com/trpfsu/status/2044882275100250444

    ------

    而且这个 Computer Use 和用户操作是可以同时进行的,会冒出来一个像是幽灵鼠标一样的玩意儿,好奇这种是因为系统层面的支持所以可以实现吗?

    Supplement 1  ·  Apr 17
    这个效果已经有开源逆向实现了:
    https://x.com/dotey/status/2044986392862662957
    26 replies    2026-04-19 01:33:02 +08:00
    TonyMontana
        1
    TonyMontana  
       Apr 17
    cool
    hugsky
        2
    hugsky  
       Apr 17
    好炫酷
    940i3s34v4F1HW41
        3
    940i3s34v4F1HW41  
    PRO
       Apr 17
    确实在改变世界
    loading
        4
    loading  
       Apr 17
    好丝滑
    390547784
        5
    390547784  
       Apr 17
    第一次看见这种交互,太有意思了
    andforce
        6
    andforce  
       Apr 17
    “像是幽灵鼠标一样的玩意儿”
    印象中在 github 看过一个开源的类似东西,可以指引你操作电脑、软件
    zeyangstudies
        7
    zeyangstudies  
       Apr 17
    这是更新了吗?为啥我的还没有这个功能
    qppq54s
        8
    qppq54s  
       Apr 17
    好炫酷
    Mar5
        9
    Mar5  
       Apr 17
    @zeyangstudies 更新一下 codex app ,在设置中开启
    cadl
        10
    cadl  
       Apr 17
    这个交互真好。太聪明了
    Danswerme
        11
    Danswerme  
       Apr 17
    确实酷炫啊
    Danswerme
        12
    Danswerme  
       Apr 17
    好奇这个是怎么做到的,捕获窗口然后计算坐标? 那个拖动软件至列表中赋予权限的功能是 macOS 自带的吗?
    shineonme
        13
    shineonme  
    OP
       Apr 17
    @andforce 而且这个幽灵鼠标可以在其他未聚焦的窗口后台运行,跟操作了多年电脑,基本必须在聚焦窗口点击鼠标的认知相悖了,有点惊喜
    andforce
        14
    andforce  
       Apr 17 via iPhone   ❤️ 1
    shineonme
        15
    shineonme  
    OP
       Apr 17
    @andforce 哇,这个项目也好有意思,而且感觉应用前景很好
    suibianwanwan
        16
    suibianwanwan  
       Apr 17
    @Mar5 codex 还有 app 吗, 是我 out 了, 我以为只有 client
    nicaiwss
        17
    nicaiwss  
       Apr 17 via iPhone
    这个直接问 codex 让它实现就行了
    IsaacYoung
        18
    IsaacYoung  
       Apr 17
    不错不错
    shineonme
        19
    shineonme  
    OP
       Apr 17   ❤️ 1
    @Danswerme 「拖动软件至列表中赋予权限的功能」是系统自带的,就是一个 fileURL ;定位猜测就是捕捉窗口计算坐标的,这个系统设置窗口的宽度是固定的,会有一定的优势,高度坐标不太确定是如何实现的
    teaguexiao
        20
    teaguexiao  
       Apr 17
    这种干预式的权限申请设计真的屌,比直接弹系统对话框敢多了。就等其他 coding agent 也跟上吧。
    940i3s34v4F1HW41
        21
    940i3s34v4F1HW41  
    PRO
       Apr 17 via iPhone
    逆向设计这么快就出来了,不知道效果能复原百分之几,甚至是做得更好?!更好奇的是这次逆向复原使用的辅助代码模型是什么
    pill
        22
    pill  
       Apr 17
    好奇为什么不把它做到 chatgpt desktop 里 因为目前 chatgpt desktop 是 native 而 codex desktop 是 electron
    zhaoxixiangban
        23
    zhaoxixiangban  
       Apr 18
    今天也看到了 ,比较细节。赞
    zz177060
        24
    zz177060  
       Apr 18 via iPhone
    反重力一直可以。不过是测试浏览器这样,他后台运行,我鼠标操作我的。
    Mikukko
        25
    Mikukko  
       Apr 18 via iPhone
    确实不错
    jackqian
        26
    jackqian  
       Apr 19
    还有 computer use 操作电脑时,程序不必在前台,就很奇怪。
    我让他帮我发条微博,他打开浏览器操作,截图 之类的,我浏览器不是当前屏幕前台上,他也能操作
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3254 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 87ms · UTC 12:22 · PVG 20:22 · LAX 05:22 · JFK 08:22
    ♥ Do have faith in what you're doing.