【需求说明】移动端 AI Agent 硬件代理原型开发(深圳/兼职)
项目背景:
开发一套基于物理隔离模式的 AI Agent 硬件代理,通过 HDMI 采集手机画面,并利用 USB HID 模拟触控指令,实现对 iOS 和 Android 手机的自动化控制。
核心任务(MVP 阶段):
1. HID 模拟端:基于 ESP32-S3 实现标准 HID Digitizer(触控屏) 协议,支持 iOS(AssistiveTouch 模式)和 Android 的绝对坐标点击、滑动及多点触控。
2. 视频采集端:基于 RV1106 (Luckfox Pico) 或 PC 平台,通过 MS2109/MS2130 采集卡获取 1080P 视频流,并实现低延迟的 H.264 编码与 WebRTC/RTSP 转发。
3. 系统联调:打通“指令接收 -> 串口转发 -> HID 注入”的全链路,确保端到端延迟(从指令下发到手机响应)控制在 50ms 以内。
技术要求(硬指标):
• 精通 ESP32-S3 USB-OTG 开发,熟悉 TinyUSB 库或 ESP-IDF HID 堆栈。
• 能够独立编写和调试 HID Report Descriptor,有处理 iOS 绝对坐标偏移和握手协议的经验。
• 熟悉 Linux 下的 V4L2 框架及 UVC 采集协议,有 RV1106/RK3588 等瑞芯微平台开发经验者优先。
• 了解 HDCP 协议 规避逻辑,有 HDMI EDID 调试经验者优先。
交付物:
1. ESP32-S3 固件源码(支持串口指令转 HID Digitizer)。
2. RV1106 端的视频采集与转发脚本(C++/Python)。
3. 一份简易的硬件接线图及波特率配置说明。
协作方式:
• 地点:深圳(南山/宝安/华强北优先,便于线下联调)。
• 周期:10 - 14 天。
• 报酬:按阶段交付付费(具体面议,诚意寻高手)。
招聘类型:
职业:
工作方式:
城市:
领域:



8

