← 返回全部产品与方案
实验与研究 · 设备智控研究原型 · 已联调真实任务
📱

手机 App 智能群控系统

Smartphone App Intelligent Group Control

20 元自研群控 Router + LLM 任务编排 · 多机配对随身携带

基于 LLM 任务编排与 20 元自研 ESP32 ADB 群控 Router 的多设备协同控制系统。通过本地代理 / 配对路由器承载所有多机配对信息「随身携带」,让一组手机在任意网络环境下都能组成临时群控工作台;并由 LLM 把自然语言指令解析为可执行的点击/输入序列,全过程屏幕流 + Chain of Thought + 步骤时间线三轨可视化、可前进/后退/跟随最新。

产品演示

核心模块

🖥️

控制台中文界面 · 任务编排与实时监控

产品模块
控制台中文界面 · 任务编排与实时监控
🖥️

Control Console · English Version

产品模块
Control Console · English Version
🖥️

群控 Router 嵌入式管理后台 · 设备与配对

产品模块
群控 Router 嵌入式管理后台 · 设备与配对
🖥️

Router Captive Portal · 一键配网

产品模块
Router Captive Portal · 一键配网

核心理念

把"多机操作"从机械脚本升级为「自然语言驱动 + LLM 解析 + 硬件配对随身携带」的协同系统。

🎛️

LLM 任务理解

NATURAL → STEPS

把"打开微博查看热搜并总结给我"这样的自然语言,自动解析为 CLICK / BACK / SWIPE / INPUT 等真实操作步骤,并由同一个 LLM 在执行中持续观察屏幕、按需修正后续步骤。

📡

20 元 ADB 群控 Router

CARRY YOUR PAIRINGS

基于 ESP32 自研的 20 元 ADB 群控路由器,把多机的 ADB 配对信息(密钥、端口、设备 ID→IP 映射)固化在路由器本地存储 + TLS Keystore。换 Wi-Fi、换办公室、换城市不需要重新配对,所有多机配对信息「随身携带」。

🛰️

实时屏幕流 + 思考链

LIVE MONITOR

实时监控栏把"手机屏幕直播""LLM Chain of Thought""步骤时间线(CLICK @30,79 / BACK @175,380 …)"三栏同屏呈现,支持上一步 / 下一步 / 跟随最新任意切换;失败步骤即时记入 Failed。

📜

历史会话可回放

SESSION REPLAY

所有任务(Completed / Failed / In-Progress)按时间落库,支持按设备、时间、任务名回看完整步骤与思考链,为运营 / 测试 / 客服留出真实复盘材料。

行业现状与痛点

越是规模化的多账号运营,越是被"配对信息丢失""脚本透明性差""模型绑定"卡脖子。

📱

多设备手动重复操作

运营 / 客服 / 测试在 N 台手机上重复同一套点击流,人力浪费巨大、出错率高,规模化场景几乎不可行。

📶

群控路由器绑网络

传统商用群控盒把设备与设备 ID 绑定在特定 Wi-Fi / 特定局域网内;换办公室就要重新配对,无法"拿着就走"。

🤖

闭源模型绑定

市面多数群控方案绑定单一闭源模型,按调用收费且无法替换;想换更便宜或更准的模型就只能重写整套集成。

🕳️

操作不可回放

现成的脚本执行只有开始/结束,没有屏幕流、没有思考链、没有按步骤前进/后退的"录像";出了问题只能猜。

🧪

App 兼容性测试痛苦

每款新 App 上线都要在不同机型 / 不同分辨率上重跑一遍测试脚本,缺乏"自然语言写一次,N 台机型自动跑"的工程化能力。

群控 Router 的痛点与自研方案

20 元 ESP32 自研 ADB 群控 Router 在「配对 / 寻址 / 配网 / 并发 / 安全 / 成本」六个维度的真实痛点与落地解法。

痛点解决方案关键模块
配对信息丢失:换网 / 换机后所有 ADB pairing 失效,需重新连电脑烧录配对密钥。NVS Keystore 固化:ADB 配对密钥、设备 ID→IP 映射、TLS 证书写入 ESP32 NVS,掉电不丢;换网即插即用。adb_pairing.c + nvs_flash配对
多机地址混乱:多设备 IP 漂移、端口冲突,控制台找不到设备、串号。统一本地端口映射:Router 做 ADB-over-TCP 反向代理,每台设备固定虚拟端口;控制台只连 Router 一个地址。adb_proxy.c + tcp_forward寻址
一次性配网体验差:首次配网要连电脑改代码烧录,非技术用户不可用。Captive Portal + AP 兜底:手机连 Router 热点自动弹配网页,扫码 / 选 Wi-Fi 填密码即可,无需电脑。captive_portal.c + wifi_manager.c配网
多机并发流不稳定:N 台同时截屏 / ADB,带宽抢占、断流、延迟抖动。Wi-Fi 60s supervisor + 多机 health-check:断线自动重连、弱网降级、心跳保活。wifi_manager.c + health_check并发
ADB pairing 高安全要求:pairing code 明文、无 TLS,易被局域网嗅探。完整 AOSP pairing 协议栈:SPAKE2 + Ed25519 + AES-GCM,per-device keystore,与官方无线调试一致。adb_pairing.c (TLS)安全
规模化成本高:商用群控盒数千元 / 台,且绑死一家硬件。20 元 BOM 自研:ESP32 开源固件,可量产、可改,不被任何一家商用硬件锁定。main.c + 自研固件成本

核心能力

把多机协同从「脚本自动化」升级为「自然语言驱动 + 实时可见 + 可回放」

🗣️

自然语言转操作

用一句中文/英文指令描述目标,LLM 自动产出 N 步可执行动作(CLICK/BACK/SWIPE/INPUT),并在执行中根据截图持续反思下一步。

📡

20 元随身群控 Router

自研 ESP32 固件作为群控网关,把 ADB 配对密钥、IP 映射、TLS 证书存进 NVS;换网络即插即用,所有多机配对信息"塞进口袋"。

🤖

多设备并发执行

新建群控任务时可勾选多个目标设备;每台设备独立 session、独立步骤时间线,监控栏自动汇总成多台同步画面。

🛰️

实时三轨可视化

手机屏幕直播 + LLM Chain of Thought + 逐步骤时间线三栏对照,上一步/下一步/跟随最新任意切换,操作可推理。

🔌

OpenAI 兼容可换模型

默认 gelab-zero-4b-latest,支持任何 OpenAI 兼容接口(OpenAI/Claude/DeepSeek/Qwen/Gemini …);detector / parser 解耦,按 latency / cost / precision 自选。

📂

历史会话 + 失败回查

任务结果、步骤明细、Chain of Thought 落库;成功 / 失败 / 部分完成可区分、可重跑、可导出到运营复盘文档。

🔐

安全与审计

每台设备每次任务独立 session;ADB TLS + Per-Device Keystore;操作审计日志齐全,便于合规与权限追溯。

🧩

解析器 / 模型分离

把"自然语言→操作步骤"的 detector 抽离为独立 parser,可单测、可替换;不再绑死单一 LLM,模型升级不再要求整套回归。

从「一句话指令」到「N 台手机协同执行」

控制台 4 阶段 · 自然语言驱动 + 实时三轨可视化

30 步创作流程
任务下发0/3
1
新建群控任务
在控制台填写任务名 + 自然语言指令(如"打开微博查看热搜并总结给我"),勾选目标设备池。
2
选择模型与执行上限
选择 LLM(OpenAI 兼容接口)、detector / parser、模型推理上限(默认 400 步)、截图等待时长等参数。
3
加入队列
任务进入队列,顶部状态栏从 Model ready → 1 devices 变为 running,可在历史会话查看。
执行与回传0/3
4
Router 同步多机配对
20 元 ADB Router 通过本地 NVS + TLS Keystore 把每台手机的 ADB 配对密钥 / IP / 端口同步给控制台,无需重新配对。
5
LLM 解析为步骤序列
LLM 对指令做任务规划,输出 CLICK / BACK / SWIPE / INPUT 等动作序列;执行中持续观察截图、按需调整。
6
分布式执行 + 截屏回传
每台手机按步骤独立执行;每步截屏回传控制台,实时监控栏直接显示当前屏与思考链。
结果与回看0/3
7
实时三轨可视化
控制台右侧实时监控:屏幕流(小/中/大画面可切) + Chain of Thought + Step Timeline 三栏同屏,可上一步 / 下一步 / 跟随最新。
8
结果落库与历史会话
成功任务标记为 Completed,失败步骤汇总到 Failed;任务完整步骤 / 思考链 / 截图均落入历史会话表。
9
回看与复盘
在历史会话打开任意任务,支持按设备 / 时间 / 任务名筛选,导出复盘材料或一键重跑。
自然语言驱动
业务人员用日常语言描述目标,由 LLM 把"目的"翻译成"动作";脚本作者不再是必要角色。
操作可回放
屏幕流 + Chain of Thought + 步骤时间线全留痕,出问题时能像查监控录像一样回看。
模型/硬件解耦
OpenAI 兼容任意切换;20 元 Router 与商用群控盒职责互不交叉,长期演进不被任何一家锁死。

关键成效

把多机群控这件事的门槛、单价、可追溯性都做到台阶式下降。

20
群控 Router 单价
自研 ESP32 固件 BOM 成本
1+
多机并发
任务支持同时勾选多台设备
400
单任务上限
默认最大步数,可按场景调整
100%
会话可回放
屏幕流 / CoT / 步骤全留痕

核心突破点

把"多账号群控"这件事从机械脚本、绑定硬件、不可回放,推进到「便携 / 可视 / 可推理 / 可换模型」。

📡

20 元让群控「随身携带」

自研 ESP32 ADB 群控 Router 把多机配对密钥、IP 映射、TLS 证书固化到本地;换 Wi-Fi / 换办公室不需要重新配对,所有信息"塞进口袋"。

🛰️

三轨实时可视化

屏幕流 + Chain of Thought + 步骤时间线在同一屏对照,LLM "为什么点这里"也写在任务流里;失败任务能像查监控录像一样回看。

🔌

模型 / 解析器解耦

detector / parser / model 全部独立,可任意替换 OpenAI 兼容接口与解析策略;不被任何一家闭源模型或商用群控盒锁定。

📦

群控 + LLM 一体工程化

控制台 + Router + LLM parser 三者紧密耦合在同一仓库,真正做到"研发原型即产品原型";不再需要二次集成。

业务价值

把技术能力转化为可量化、可复用的业务价值。

带来的提升
用一句自然语言指令就能让 N 台手机按你意图动作,运营/测试/客服人效数倍提升。
20 元 ADB Router 把所有多机配对信息固化本地存储,换 Wi-Fi、换办公室、换城市都能"即插即用"。
屏幕流 + Chain of Thought 全程留痕,每一步都能定位为什么失败,运营复盘和故障归因第一次有"录像"可查。
OpenAI 兼容任意切换,detector / parser 解耦,不被任何一家闭源模型或商用群控硬件锁定。
适用场景
多账号矩阵运营:批量内容分发、批量客服接待、批量账号唤醒。
App 兼容性 / 回归测试:在不同机型、不同分辨率上自动跑同一用例,截屏回传控制台。
内容分发 / 直播间分发:短视频、直播、商品链接多账号分发与监控。
AI Agent 数据采集:让 LLM 直接驱动手机完成"看微博热搜""查小红书种草"这类真实任务。
📌

内容持续更新中

该产品的介绍内容已基于内部资料整理上线,以下为后续可继续深化的方向:

群控实操演示视频(多设备并发执行同一任务 · 屏幕流 + CoT 全程)
与微博 / 抖音 / 淘宝 / 小红书等常见 App 的真实任务示例库
20 元 Router 量产硬件与不同 ESP32 芯片的兼容性矩阵
压测数据:多设备并发 / 长时运行稳定性 / 异常 Wi-Fi 切换恢复
联系我们

开启 AI 合作

无论您身处政务、金融、制造、消费还是内容领域,我们都能为您定制垂直 AI 智能体方案

📍

公司地址

福建省厦门市 · 拟落地武汉 OPC

📧
🌐

官方网站

www.xianma.top

贤码智能

厦门贤码智能科技有限公司

© 2024-2026 厦门贤码智能科技有限公司 · AI 智能体解决方案提供商 · www.xianma.top

产品与方案:15个在研 / 落地项目