onion (@user2270) 在 一块让Agent操作手机的虚拟屏幕:可让电脑、云端、安卓本地直接操作手机副屏,补齐电脑、服务器、手机操作最后一块拼图 中发帖

▶ 
开源推广
这是一块可以跨设备调用的安卓虚拟屏幕,可以:

在电脑/云端(Muse、codex、GPT Work等)使用tailscale快捷连接,或直接在本地Agent连接。解决手机遇到问题只能询问教程,操作起来却抓瞎的问题。Agent-VScreen补齐补齐电脑、服务器、手机操作最后一块拼图,让你的Agent帮你处理全部问题!

本项目引入时间感截图、本地OCR等解决安卓大部分应用“无障碍”缺失和手机操作需要大量拖动、长按,Agent无法理解连续点击过程的变化的问题,并不是简单移植电脑操作逻辑。
v1.3.0更新日志:

Agent在遇到不会操作的APP页面时可以在悬浮窗中询问,并请求用户点击示范(连续操作/点击指出按钮/框选目标区域等),示范的结果可以保存为可复用的脚本。
定时任务预约,由于许多任务场景需要定时任务,而本地Agent熄屏下唤起其他APP不方便,而云端Agent更...