乐于分享
好东西不私藏

想到一种最方便自然的控制 AI 助手的方式

想到一种最方便自然的控制 AI 助手的方式

大家好,我是轻舟,好久不见。

虽然很久没有发文章了,但是一直也没有停下折腾 AI。最近我把 Hermes 接到了 iPhone 的 Action Button 上。

现在我的使用方式是:长按 iPhone 的 Action Button,对手机说话,iPhone 会把语音转成文字,然后发送到电脑上的 AI 助手 Hermes。

Hermes 收到后,就可以在我授权的范围内查文件、整理表格、读文档,或者执行一些电脑上的操作。做完以后,再把结果通过短信的方式通知我。

这几天用下来,我觉得这个入口挺接近我想象中的 AI 助手了。

不用每次都打开一个 App,也不用坐到电脑前认真打字。想到什么,按一下,说一句,让电脑去处理。

1. Hermes 是什么

很多人可能没听过 Hermes。

你可以理解成类似小龙虾的本地 AI Agent,我上面说的这个流程不限于 Hermes,OpenClaw 同样可以连接。

普通 AI 聊天工具更多是在回答你。Hermes 这种 Agent 更像是坐在你电脑前,可以帮你处理一些真实任务。

比如我现在会让它:

  • • 查找某个文件
  • • 整理表格
  • • 总结文档
  • • 把一段想法整理成文章大纲
  • • 执行一些我授权过的电脑操作

当然,前提是权限要控制好。涉及删除文件、敏感信息、系统设置这类操作,我肯定不会让它直接跑。

2. 为什么要接到 Action Button

我一开始是直接用微信指挥 Hermes。

其实已经很方便了,但是我还想更爽一点。每次找 AI 要打开微信,找到对话,再输入或者语音。虽然步骤不算多,可很多临时想法会卡在这里。

比如走路的时候突然想到:

“帮我找一下昨天那份选题文档。”

或者准备写文章时想到:

“把刚才这段想法整理成公众号大纲。”

这种想法来得很快,也很容易丢弃。如果还要打开 App,我大概率就先放着了。放着放着,可能就忘了。主要也还是没有形成一个在微信内直接指挥 AI 的习惯。

Action Button 的好处是,它足够轻,足够快,足够自然。

长按,说话,结束。

这个动作很像随手记一条语音备忘录,但背后接到的是电脑上的 Hermes。

3. 我现在的流程

我现在的流程大概是这样:

长按 Action Button-> 语音转文字-> 快捷指令发送 iMessage-> Photon 转给电脑端 Hermes-> Hermes 执行任务-> 结果通知回来

这里我用 iMessage,是因为它和 iPhone、Mac 本来就打通,通知也比较及时。

Photon 负责把消息接到电脑端,再转给 Hermes。

整个流程里,最让我舒服的地方是:我不需要进入一个正式的聊天场景。

它更像是随手给电脑派一个小任务。

比如我可以直接说:

“帮我看一下桌面最近修改的几个文件。”

“把下载文件夹里的表格整理一下。”

“把这段话改成公众号文章的大纲。”

然后电脑那边开始处理。处理完以后,我收到通知,再决定要不要继续追问。

4. 给 AI 的最简提示词

如果你也想搭,可以直接把下面这段丢给电脑上的 AI 助手。Codex、Claude Code、Claude Desktop、扣子都可以,重点是让它根据你的电脑环境自己判断怎么落地。

我想搭一个流程:在 iPhone 上长按 Action Button,说一句话,手机把语音转成文字,通过快捷指令发送到电脑端。电脑上的 Hermes Agent 收到后,在我授权的范围内查文件、整理表格、读取文档或执行简单操作,然后把结果通知我。请你根据我的实际环境,帮我设计最简单能跑通的方案。优先跑通这个测试:我对手机说“查看桌面最近修改的 5 个文件”,电脑端返回文件名、路径和修改时间。要求:- 先检查我的电脑上有没有 Hermes、Photon 或类似连接器。- 告诉我 iPhone 快捷指令怎么配置。- 不要假设每个人环境一样,请根据实际情况调整。- 涉及删除文件、读取敏感信息、修改系统设置的操作,必须先问我。- 能自动检查的地方直接检查,不能自动完成的地方告诉我怎么操作。

这套流程跑通以后,我最大的感受是:AI 的入口变轻了。

以前我会把很多小任务攒到电脑前再处理。现在想到就可以丢出去。哪怕只是查一个文件、整理一段文字、生成一个大纲,也能少打断我很多次。

我现在还不敢说这就是最终形态,但它确实比打开聊天窗口自然很多。

如果你也在用 Hermes,或者之前用过小龙虾,可以试试把入口接到手机上。先别搞复杂,就跑通一个最小任务。

长按一下,说一句话,让电脑帮你干一件小事。

这个体验一旦顺了,后面很多工作流就可以慢慢长出来。


下面是我自己开发的两款 app,帮你解决一些细微但恼人的小问题。

你可以在 AppStore 或者鸿蒙应用商店搜索下载: