能自动操控手机和电脑的智能体，终于来了！真的太赞了！

你好，我是郭震

最近“龙虾” （** OpenClaw**）刷屏，趁周末看了下，这篇文章分享下关于这方面软件的** 介绍和上手使用等。**** **

** OpenClaw** 的出现让很多人意识到，AI 终于不再只是一个“聊天框”，而是进化成了能直接上手帮我们干活的助手：

1 “龙虾”能做什么？

以前我们用 AI，是把它当成一个“大脑”，你给它指令，它给你文字或代码：

给它提示词，它才能开始回复你，但当你需要它去操作一个没有 API 接口的传统软件，比如财务系统、旧版 ERP，或者让你在几十个网页间搬运数据时，AI 就显得无能为力。

OpenClaw解决的核心痛点，让 AI 像真人一样“看见”并“操作”电脑，过程如下图所示：

OpenClaw工作过程，大概两大步骤。第一，它得像人类一样看见电脑，做到这步通过视觉模型理解真实电脑里的GUI：

通过上面建立了屏幕和可操作对象的语义映射，第二步就是决策和操作，真正替人去操作具体对象的GUI元素。

最后一句话总结龙虾：用视觉模型理解真实电脑 GUI，再通过动作模型直接操作鼠标和键盘，这样的好处：让 AI 不依赖 API 也能自动完成任务。

我在调研龙虾时，发现了一个具有龙虾功能的软件，发现它不仅能实现龙虾操作电脑的功能，还有自主操作手机的能力。下面结合这个软件，一起进一步深入理解下龙虾这样的自主智能体到底是怎么回事。

2 AiPy电脑端龙虾操作

它的名字叫做Aipy，爱派，如下图所示：

在深入它的手机控之前，我们先看看它的电脑端能力。

根据我的实验发现它在电脑端，实现了 OpenClaw 的核心能力，不依赖繁琐的后台接口，而是通过模拟人的视觉和动作，直接接管电脑的操作逻辑。

具体操作步骤如下所示，大家根据电脑系统下载对应版本，如下截图所示：

下载安装后，点击注册，如下截图所示：

注册并登录后，进入到操作界面：

电脑端案例1：分析当前电脑CPU、内存占用TOP10软件有哪些？如下填入后，点击发送：

开始回复，如下截图所示：

过一会提示我，成功找到我电脑上769个进程：

一回分析出我电脑上：CPU占用TOP10：

内存占用TOP10，并带有一个简短的分析报告：

这个案例展示了我发现的这个AiPy软件，能瞬间从769个进程中精准提取并分析核心硬件数据，是一个** 能够理解硬件状态、自主调配系统资源** 的电脑管家。

它不再是简单的“指令接收器”，而是能根据模糊目标自主规划路径，完成从数据抓取到报告生成的全流程“电脑端自主智能体”。这种深度介入系统底层并自主完成复杂分析的能力，正是OpenClaw龙虾式工具最核心的进化方向。

案例2：叫它根据我安装的软件，推断我的职业和爱好

如下发给它提示词，点击发送：

如下截图是它的回复过程：

它扫描到了372个应用：

最可能职业：程序员和算法工程师，详细分析结果如下所示，

通过这个案例展示了AiPy语义推理与“数字画像”能力，能通过对数百个本地应用的跨维度关联，推断出用户的职业属性与行为偏好。

这说明真正的自主智能体已具备深度的环境理解力，能通过局部碎片信息勾勒出完整的用户背景，OpenClaw这个能力真的好用。

3 手机端操控

我看这个AiPy 它不仅能操控电脑端，还能** 对手机端操控，这个就是OpenClaw所不具备的能力。**

手机系统（尤其是安卓）的封闭性远高于电脑，很多 App 根本没有对外接口。让 AI 控制手机，难度比电脑端要大。

** AiPy的实现思路：既然没有接口，那就直接模拟人的眼睛去看、模拟人的手去点，下面看几个使用AiPy操作我手机的案例。**

案例1：“手机之眼”：远程控屏与自动化截屏

你可以在电脑端直接看到手机的实时画面。

更好的是，它的自动化截屏归档功能：只需一行指令，AiPy 就能精准抓取手机屏幕，并自动跨设备保存到电脑的指定文件夹里：

案例2：“远程安装包助手”：App 一键静默安装

以前想给手机装个测试版软件，要先下载、传微信、再在手机上点安装、点授权。

现在，你只需要把安装包丢在电脑里，给 AiPy 下个指令，它会自动完成传输、触发安装、甚至帮你点击确定，如下截图所示：

案例3：验证码克星”：短信收发全自动化

这是所有“双机党”的福音。

当你登录账号需要验证码，而手机又不在身边时，你直接在电脑上问 AiPy：“手机刚收到什么短信？”它就能直接把内容读给你，甚至能帮你直接回信息。

** 自动发送短信状态截图：**

** 读取短信截图：**

** 收取内容：**

** 案例4：“短视频/语音 Agent”：全自动刷视频**

如果你有刷视频任务或者需要语音操控手机，AiPy 也能做，它能模拟人工滑动、点赞，如下截图所示，5秒自动刷一个：

手机操作快速上手，大概需要三步：

1）开启“开发者选项”中的** USB 调试** （小米等机型需额外开启“安全设置”）：

** 2）电脑侧：** 下载 AiPy 客户端

** 3）连接与执行：** 数据线连接（或远端连接），直接在电脑端输入指令。

大家再有下载、安装和使用问题，可以进入群获取到指导，记得填写个邀请码：0o4T，再领取350万Tokens：

总结一下

OpenClaw（龙虾）让 AI 从“只能聊天和生成内容”，进化为能看懂真实电脑界面并亲自上手操作的行动型智能体。

AiPy 在电脑端完整复现了龙虾的核心能力，不依赖 API，通过视觉理解 + GUI 操作，自主完成从分析到报告的完整流程。

在此基础上，AiPy 进一步扩展到手机端操控，把“看屏幕、点按钮”的能力从电脑延伸到手机，让自主智能体真正落地到更多真实场景。感兴趣的朋友可以上手体验使用

以上全文 2985 字，25张图。若可以，给我个三连击：点赞、转发和在看。若可以再给我加个⭐️，谢谢你看我的文章，我们下篇再见。