mirror of
https://github.com/openclaw/openclaw.git
synced 2026-02-19 18:39:20 -05:00
a3ec2d0734
What: - update zh-CN glossary, TM, and translator prompt - regenerate zh-CN docs and apply targeted fixes - add zh-CN AGENTS pipeline guidance Why: - address terminology/spacing feedback from #6995 Tests: - pnpm build && pnpm check && pnpm test
163 lines
5.7 KiB
Markdown
163 lines
5.7 KiB
Markdown
---
|
||
read_when:
|
||
- 在 iOS 节点或 macOS 上添加或修改相机捕获
|
||
- 扩展智能体可访问的 MEDIA 临时文件工作流
|
||
summary: 用于智能体的相机捕获（iOS 节点 + macOS 应用）：照片（jpg）和短视频片段（mp4）
|
||
title: 相机捕获
|
||
x-i18n:
|
||
generated_at: "2026-02-03T07:50:55Z"
|
||
model: claude-opus-4-5
|
||
provider: pi
|
||
source_hash: b4d5f5ecbab6f70597cf1e1f9cc5f7f54681253bd747442db16cc681203b5813
|
||
source_path: nodes/camera.md
|
||
workflow: 15
|
||
---
|
||
|
||
# 相机捕获（智能体）
|
||
|
||
OpenClaw 支持用于智能体工作流的**相机捕获**：
|
||
|
||
- **iOS 节点**（通过 Gateway 网关配对）：通过 `node.invoke` 捕获**照片**（`jpg`）或**短视频片段**（`mp4`，可选音频）。
|
||
- **Android 节点**（通过 Gateway 网关配对）：通过 `node.invoke` 捕获**照片**（`jpg`）或**短视频片段**（`mp4`，可选音频）。
|
||
- **macOS 应用**（通过 Gateway 网关的节点）：通过 `node.invoke` 捕获**照片**（`jpg`）或**短视频片段**（`mp4`，可选音频）。
|
||
|
||
所有相机访问都受**用户控制的设置**限制。
|
||
|
||
## iOS 节点
|
||
|
||
### 用户设置（默认开启）
|
||
|
||
- iOS 设置标签页 → **相机** → **允许相机**（`camera.enabled`）
|
||
- 默认：**开启**（缺少键时视为启用）。
|
||
- 关闭时：`camera.*` 命令返回 `CAMERA_DISABLED`。
|
||
|
||
### 命令（通过 Gateway 网关 `node.invoke`）
|
||
|
||
- `camera.list`
|
||
- 响应载荷：
|
||
- `devices`：`{ id, name, position, deviceType }` 数组
|
||
|
||
- `camera.snap`
|
||
- 参数：
|
||
- `facing`：`front|back`（默认：`front`）
|
||
- `maxWidth`：数字（可选；iOS 节点默认 `1600`）
|
||
- `quality`：`0..1`（可选；默认 `0.9`）
|
||
- `format`：当前为 `jpg`
|
||
- `delayMs`：数字（可选；默认 `0`）
|
||
- `deviceId`：字符串（可选；来自 `camera.list`）
|
||
- 响应载荷：
|
||
- `format: "jpg"`
|
||
- `base64: "<...>"`
|
||
- `width`、`height`
|
||
- 载荷保护：照片会重新压缩以保持 base64 载荷小于 5 MB。
|
||
|
||
- `camera.clip`
|
||
- 参数：
|
||
- `facing`：`front|back`（默认：`front`）
|
||
- `durationMs`：数字（默认 `3000`，上限 `60000`）
|
||
- `includeAudio`：布尔值（默认 `true`）
|
||
- `format`：当前为 `mp4`
|
||
- `deviceId`：字符串（可选；来自 `camera.list`）
|
||
- 响应载荷：
|
||
- `format: "mp4"`
|
||
- `base64: "<...>"`
|
||
- `durationMs`
|
||
- `hasAudio`
|
||
|
||
### 前台要求
|
||
|
||
与 `canvas.*` 类似，iOS 节点仅允许在**前台**执行 `camera.*` 命令。后台调用返回 `NODE_BACKGROUND_UNAVAILABLE`。
|
||
|
||
### CLI 辅助工具（临时文件 + MEDIA）
|
||
|
||
获取附件最简单的方法是通过 CLI 辅助工具，它将解码的媒体写入临时文件并打印 `MEDIA:<path>`。
|
||
|
||
示例：
|
||
|
||
```bash
|
||
openclaw nodes camera snap --node <id> # default: both front + back (2 MEDIA lines)
|
||
openclaw nodes camera snap --node <id> --facing front
|
||
openclaw nodes camera clip --node <id> --duration 3000
|
||
openclaw nodes camera clip --node <id> --no-audio
|
||
```
|
||
|
||
注意事项：
|
||
|
||
- `nodes camera snap` 默认拍摄**两个**方向以给智能体提供两个视角。
|
||
- 输出文件是临时的（在操作系统临时目录中），除非你构建自己的包装器。
|
||
|
||
## Android 节点
|
||
|
||
### 用户设置（默认开启）
|
||
|
||
- Android 设置页 → **相机** → **允许相机**（`camera.enabled`）
|
||
- 默认：**开启**（缺少键时视为启用）。
|
||
- 关闭时：`camera.*` 命令返回 `CAMERA_DISABLED`。
|
||
|
||
### 权限
|
||
|
||
- Android 需要运行时权限：
|
||
- `CAMERA` 用于 `camera.snap` 和 `camera.clip`。
|
||
- `RECORD_AUDIO` 用于 `includeAudio=true` 时的 `camera.clip`。
|
||
|
||
如果缺少权限，应用会在可能时提示；如果被拒绝，`camera.*` 请求会失败并返回 `*_PERMISSION_REQUIRED` 错误。
|
||
|
||
### 前台要求
|
||
|
||
与 `canvas.*` 类似，Android 节点仅允许在**前台**执行 `camera.*` 命令。后台调用返回 `NODE_BACKGROUND_UNAVAILABLE`。
|
||
|
||
### 载荷保护
|
||
|
||
照片会重新压缩以保持 base64 载荷小于 5 MB。
|
||
|
||
## macOS 应用
|
||
|
||
### 用户设置（默认关闭）
|
||
|
||
macOS 配套应用暴露一个复选框：
|
||
|
||
- **设置 → 通用 → 允许相机**（`openclaw.cameraEnabled`）
|
||
- 默认：**关闭**
|
||
- 关闭时：相机请求返回"用户已禁用相机"。
|
||
|
||
### CLI 辅助工具（节点调用）
|
||
|
||
使用主 `openclaw` CLI 在 macOS 节点上调用相机命令。
|
||
|
||
示例：
|
||
|
||
```bash
|
||
openclaw nodes camera list --node <id> # list camera ids
|
||
openclaw nodes camera snap --node <id> # prints MEDIA:<path>
|
||
openclaw nodes camera snap --node <id> --max-width 1280
|
||
openclaw nodes camera snap --node <id> --delay-ms 2000
|
||
openclaw nodes camera snap --node <id> --device-id <id>
|
||
openclaw nodes camera clip --node <id> --duration 10s # prints MEDIA:<path>
|
||
openclaw nodes camera clip --node <id> --duration-ms 3000 # prints MEDIA:<path> (legacy flag)
|
||
openclaw nodes camera clip --node <id> --device-id <id>
|
||
openclaw nodes camera clip --node <id> --no-audio
|
||
```
|
||
|
||
注意事项：
|
||
|
||
- `openclaw nodes camera snap` 默认 `maxWidth=1600`，除非被覆盖。
|
||
- 在 macOS 上，`camera.snap` 在预热/曝光稳定后等待 `delayMs`（默认 2000ms）再捕获。
|
||
- 照片载荷会重新压缩以保持 base64 小于 5 MB。
|
||
|
||
## 安全性 + 实际限制
|
||
|
||
- 相机和麦克风访问会触发通常的操作系统权限提示（并需要 Info.plist 中的使用说明字符串）。
|
||
- 视频片段有上限（当前 `<= 60s`）以避免过大的节点载荷（base64 开销 + 消息限制）。
|
||
|
||
## macOS 屏幕视频（操作系统级别）
|
||
|
||
对于*屏幕*视频（非相机），使用 macOS 配套应用：
|
||
|
||
```bash
|
||
openclaw nodes screen record --node <id> --duration 10s --fps 15 # prints MEDIA:<path>
|
||
```
|
||
|
||
注意事项：
|
||
|
||
- 需要 macOS **屏幕录制**权限（TCC）。
|