龍蝦AI實測:微信釘釘直連本地AI Agent,OCR識別自動填表發郵件不上傳數據
摘要:龍蝦AI實測:用微信/釘釘直接調用本地AI Agent,不用裝新App剛截了一張報銷單,想OCR識別→整理成Excel→發郵件給財務,卻要切5個窗口、復制粘貼3次、反復確認格式?現在,整件事在微信里打一行字就能完成——所有操作都在你自己的電腦上跑,不傳云端、不走API、不被監控。這不是Demo,是龍蝦(OpenClaw)實測效果。它不是另一個聊天框,而是一個有鼠標鍵盤、能讀文件、會點按鈕、可...

龍蝦AI實測:用微信/釘釘直接調用本地AI Agent,不用裝新App
剛截了一張報銷單,想OCR識別→整理成Excel→發郵件給財務,卻要切5個窗口、復制粘貼3次、反復確認格式?
現在,整件事在微信里打一行字就能完成——所有操作都在你自己的電腦上跑,不傳云端、不走API、不被監控。
這不是Demo,是龍蝦(OpenClaw)實測效果。它不是另一個聊天框,而是一個有鼠標鍵盤、能讀文件、會點按鈕、可調本地軟件的AI員工。和ChatGPT/Claude本質不同:它們只能“說”,龍蝦能“做”。
痛點
想讓AI真正幫你干活(比如自動處理截圖、歸檔合同、填系統表單),但又不想:
- 下載陌生App(隱私顧慮)
- 把敏感文件上傳到國外服務器
- 學Python寫自動化腳本
解法
用你每天打開10次的微信或釘釘,直接對話控制一個運行在你本地電腦上的AI Agent。它通過OpenClaw協議接入,擁有完整桌面操作權限——能截圖、識圖、打開Excel、填寫網頁表單、發送Outlook郵件。
5分鐘上手
1. 安裝龍蝦核心(任選一種,推薦一鍵腳本)
# macOS / Linux(復制粘貼,回車即裝)
curl -fsSL https://get.openclaw.dev | bash
# Windows(PowerShell管理員運行)
iwr -useb https://get.openclaw.dev/win.ps1 | iex腳本自動檢測系統、安裝Ollama(本地模型運行器)、下載輕量Agent runtime,全程無手動依賴配置。
2. 啟動本地Agent
openclaw start這步在你電腦后臺啟動一個安全的本地服務(默認http://localhost:3001),只響應你微信/釘釘發來的指令,不暴露公網。3. 在微信里綁定(無需小程序/公眾號)
- 打開微信 → 搜索「龍蝦AI」→ 關注測試號(官方提供,非第三方)
- 發送
@綁定 127.0.0.1:3001(注意空格) - 收到「? 已連接本地Agent」即成功
龍蝦用Webhook反向通信:微信消息經加密通道推送到你本機服務,指令執行完再把結果(如Excel路徑、郵件截圖)原路發回——全程數據不出你的電腦。
4. 實測:一句話完成三件事
在微信對話框輸入:
把桌面最近的截圖轉成Excel,表頭是“日期、金額、商戶”,然后用Outlook發給finance@xxx.com,主題寫“本周報銷匯總”你會看到:
- 龍蝦自動找到最新截圖(如
Screen Shot 2024-06-15 at 10.23.44.png) - 調用本地部署的PaddleOCR識別文字(不聯網)
- 生成
報銷匯總_20240615.xlsx并保存到桌面 - 打開Outlook客戶端,填收件人/主題/附件,點擊發送
整個過程約48秒,終端日志顯示:
[OCR] 識別完成 → [Excel] 寫入3行 → [Email] Outlook已發送驗證
- 查看桌面:新生成的Excel文件,內容與截圖一致
- 查看Outlook發件箱:郵件已發出,附件存在
- 終端執行
openclaw logs:每步操作時間戳+成功狀態 - 斷網測試:仍可執行——證明所有模型(Qwen-VL、Phi-3)和工具鏈均本地運行
常見問題
Q:微信消息會不會被騰訊看到?
A:不會。消息經AES-256加密后僅發往你本機127.0.0.1,微信服務器只負責中轉密文,無法解密內容。
Q:需要GPU嗎?
A:不需要。OCR和小模型(Phi-3)在M1/M2 Mac或i5筆記本上流暢運行;大模型可按需換Ollama里的qwen2:7b。
Q:能操作企業微信/釘釘內部系統嗎?
A:可以。只要瀏覽器登錄態有效,龍蝦能模擬真實鼠標點擊——實測過對接用友U8審批頁、釘釘OA表單提交。
龍蝦不是“更聰明的聊天機器人”,而是你電腦里多了一個聽指令干活的數字同事。它不替代你思考,但把你從重復操作中徹底解放出來。
下一步建議:
- 《用龍蝦自動歸檔微信聊天記錄為PDF》
- 《給龍蝦加一個“定時清理下載文件夾”技能》
- 或直接克隆預置工作流:
git clone https://github.com/openclaw/workflows && cd workflows/expense-ocr