V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
PinLG

苹果即将发布的通过眼球追踪轨迹控制苹果设备屏幕,是否会第三方开发?眼球控制跑酷游戏?

  •  
  •   PinLG · May 17, 2024 · 1137 views
    This topic created in 711 days ago, the information mentioned may be changed or developed.
    iOS 18 即将亮相,苹果加入了新的辅助功能,其中就包括眼动追踪功能( Eye Tracking )。

    iOS 18 的眼动追踪功能( Eye Tracking )靠 AI 支持的,专为身体残疾的人设计,眼动追踪功能让用户通过眼睛观察和控制他们的设备,而潜质摄像头能够在数秒内完成设置和校准,这种感觉类似于 Vision Pro 。

    不懂就问:

    这样的功能苹果是否会开发给第三方开发者,如果开放,是否可以通过这个眼球追踪功能应用到很多领域。例如通过眼球控制跑酷游戏。

    射击类游戏?看一眼直接秒杀?哈哈。是不是我异想天开了?欢迎讨论指导,扩展扩展知识面!

    苹果最新的眼动追踪演示视频,感兴趣可以去看。当然你也可以自己去网上搜索找一下。

    https://topstip.com/ios-18-will-introduce-eye-tracking-capabilities/
    2 replies    2024-05-18 16:03:31 +08:00
    okakuyang
        1
    okakuyang  
       May 17, 2024 via iPhone
    应该会开放 ,但是可能不是以你所想的方式。这个功能看上去揉了三大块技术,一 ,基于点阵投影仪的面部识别(眼周围肌肉变化)二,基于机器学习的 UI 标注和理解(苹果做这个有两三年了) 三,基于眼动反应预测注释点(像是 apple vison pro 的副产物),可以预计的是 app 无法获取注释点坐标,此模式下 app 无法获取 UI 控件被高亮状态,此模式开启时状态栏可能会出现录像提示的绿点,此模式能够被添加到控制中心,此模式下不再能够使用鼠标,最后可能开发者需要在新版 app 中添加一个标识来注明 app 不支持此功能。
    以上均为本人预测。
    SkywalkerJi
        2
    SkywalkerJi  
       May 18, 2024 via Android
    眼动仪不是什么新技术,用来打 fps 我七年前就想过了,完全不行。主要还是设计给残疾人用的。
    现在有些 fps 主播就有用眼动仪直播的,视线方向和瞄准方向大部分时候是不一样的,用眼动仪瞄准和 fps 底层逻辑不合适。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1177 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 17:55 · PVG 01:55 · LAX 10:55 · JFK 13:55
    ♥ Do have faith in what you're doing.