返回资讯中心
外部精选
软件工程
#开发者实时流

DroidPath:绕过 ADB,通过 TCP 以 60Hz 流式传输 Android UI 树

来源标题:DroidPath – Stream Android UI Trees at 60Hz over TCP (Bypassing ADB)

DroidPath 通过 Android 无障碍与窗口 API 直接流式输出 Shadow DOM,绕过 ADB 并以 60Hz 经 TCP 传输 Android UI 树。它将 UI 跳转编译为持久空间图,用 A* 寻路以亚秒级跳转完成多屏工作流导航,无需中间 LLM 往返。项目还包含无头 Kotlin Shadow DOM 守护进程和独立 MCP 桥接。

Hacker News 最新Ak4shik2026/11/16 · 今天10 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

持久化的 A* 符号化 UI 路由器、无头 Kotlin Shadow DOM 守护进程,以及独立的 MCP 桥接层,面向 Android 平台

DroidPath 消除了 Android 自动化中缓慢且 token 消耗巨大的 VLM 截图-思考-点击循环。DroidPath 不再要求 LLM 在每一步都检查截图,而是直接从 Android Accessibility 与 Window API 流式输出实时 Shadow DOM,将 UI 状态迁移编译为持久化的 Spatial Graph,并通过 A* 路径规划以亚秒级跳转确定性地导航多屏工作流——全程零中间 LLM 往返。

flowchart LR Agent["AI Agent (Claude / Cursor / MCP Client)"] <-->|"JSON-RPC 2.0 (stdio / HTTP+SSE)"| CLI["droidpath-mcp / DroidPathBridge"] subgraph Host["macOS Host (Swift 5.9+ · AndroidShadowGraphKit)"] CLI <-->|"Path Queries & Passive Learning"| Bridge["ShadowGraphBridge"] Bridge --> DOM["ShadowDOMState + ShadowTreeIndex"] Bridge --> Graph["SpatialGraphEngine\nScreenLayoutHasher · Jaccard ≥ 0.90\n~/.droidpath/shadow_graph.json"] Bridge --> AStar["AStarPathfinder + MacroExecutionEngine"] Bridge -->|"Self-Healing Recovery Hook"| Recovery["SHA-256 Deploy + app_process Restart"] end subgraph Android["Android Device (Zero-APK)"] Daemon["android-daemon.jar (Kotlin single-DEX)\napp_process :27189 · NDJSON Delta Stream"] Sys["UiAutomation / Accessibility / WindowManager"] end Daemon <-->|"adb forward tcp:27189"| DOM AStar -->|"adb shell input tap/swipe"| Sys Daemon --- Sys Loading

Layer 1 — 无头 Kotlin Shadow DOM 守护进程(android-daemon/):

Layer 2 — 实时 Shadow DOM 与持久化 Spatial Graph(AndroidShadowGraphKit):

Layer 3 — 持久化 A* 符号化路由器与独立 MCP 桥接层(DroidPathBridge + droidpath-mcp):

提示词:从启动器主屏幕“导航到 Night Light”:

  1. 构建 droidpath-mcp 与 android-daemon.jar

前置条件:macOS 14+、Swift 5.9+、adb(brew install android-platform-tools)、JDK 17(仅在需要从 Kotlin 源码重新构建 android-daemon.jar 时才需要)。

git clone https://github.com/V0val0x/DroidPath.git cd DroidPath

Build standalone single-DEX Kotlin daemon (requires JDK 17 + Android d8 / build-tools or Gradle)

./android-daemon/scripts/build-dex.sh

Run Swift + Kotlin tests

swift test ./android-daemon/gradlew -p android-daemon test

Build release CLI

swift build -c release

或者直接从 GitHub Releases 下载预构建的 droidpath-mcp 与 android-daemon.jar。

"mcpServers": { "droidpath": { "command": "/path/to/droidpath-mcp

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →