爱意满满的作品展示区。
codeface
14.49D

我也做了一个可以操控手机的硬件 Agent

  •  
  •   codeface · 1 day ago · 1181 views

    看到 https://www.v2ex.com/t/1230118 中 @fzuccq 分享了他的手机 Agent 硬件方案,我也来介绍一下最近做的同类型项目。

    我的方案是利用手机的 C 口转 HDMI 投屏获取屏幕、USB HID 模拟鼠标键盘进行操作。

    目前项目代码也是完全开源的状态: https://github.com/AidenAI-IO/aiden-firmware

    自组硬件的成本大约在 400 元左右,核心组件如下:

    • Type C HUB 转 HDMI 、USB
    • Pico Zero RV1106G3 (核心处理单元)
    • HDMI 转 CSI 模块
    • 8 欧 2W 扬声器
    • 2.4g WiFi FPC 天线
    • HDMI 公对公转换头(用于连接 HUB 和 HDMI 转 CSI 模块)
    • CSI 连接软排线
    • ASPPRO 2.0 模块(可选,用作关键词唤醒)
    • 按键开关(可选,唤醒的另一种方式)

    11 replies    2026-07-30 15:19:48 +08:00
    codeface
        1
    codeface  
    OP
       1 day ago
    KeinHong
        2
    KeinHong  
       1 day ago
    这个支持 iPhone 手机么
    codeface
        3
    codeface  
    OP
       1 day ago
    @KeinHong 支持,需要开启 Assistant Touch 。
    关于 HDMI 获取屏幕的部分,这套硬件在 iPhone 上的兼容性反而还强于安卓,苹果可以稳定获取 1080p 分辨率的画面,一些安卓只能到 720p 。
    KeinHong
        4
    KeinHong  
       1 day ago
    @codeface #3 👍不错啊
    zhouyg
        5
    zhouyg  
       20h 16m ago
    这个硬件是完全独立运行的吗,其内部的操控逻辑怎么设置到硬件里的?
    codeface
        6
    codeface  
    OP
       12h 14m ago
    @zhouyg 是的,可以完全独立运行:设备本身运行完整的 Linux 固件,内置封装好的 C++ 硬件服务( frame_service 、audio_service 、hid_server )和 Go Agent daemon ,Agent 通过大模型进行推理并直接驱动 USB HID 操控外部设备,不需要额外的主控电脑常驻运行。
    v1
        7
    v1  
       11h 54m ago
    @zhouyg 群控小型化……想体验差不多效果但是懒得整硬件的话。闲鱼 1 毛钱买个群控软件+小主机😀
    shuang
        8
    shuang  
       10h 54m ago
    模拟鼠标键盘,安全性咋样,会不会容易被检测出来
    withrock
        9
    withrock  
       9h 20m ago
    @codeface 大模型的推理是通过 RV1106 内置的算力推理的吗,还是需要联网对接外部 api?
    imqiyue
        10
    imqiyue  
       9h 2m ago   ❤️ 1
    楼主能力好强,支持一下
    codeface
        11
    codeface  
    OP
       4h 34m ago
    @withrock RV1106 的 NPU 还是很弱,暂时无本地可能性,需要联网对接外部 API 。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3176 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 11:54 · PVG 19:54 · LAX 04:54 · JFK 07:54
    ♥ Do have faith in what you're doing.