<state-dir>/logbook/ 中,但模型处理不一定在本地进行。采样的屏幕截图会发送到已配置的视觉路由;观察记录和时间线文本会发送到默认智能体模型。如果屏幕内容和派生的活动文本必须保留在本机,请为两个阶段都使用本地模型路由。
Logbook 已内置,但默认禁用。启用该插件即表示允许 Gateway 网关捕获屏幕,因为 captureEnabled 默认为 true。
开始之前
你需要:- 一个已连接且公开
screen.snapshot或logbook.snapshot的节点。 macOS 应用节点需要 Screen Recording 权限。无头 macOS 节点主机 (openclaw node host run) 会获得由插件提供的logbook.snapshot命令,该命令由系统的screencapture工具提供支持。 - 已启用并完成身份验证的内置 Codex 插件。Codex 目前提供
Logbook 所需的结构化图像提取契约。使用
openclaw models auth login --provider openai登录;其他身份验证方式请参阅 Codex harness。 - 一个可用的默认智能体模型。完成视觉处理后,Logbook 使用该模型合成卡片、站会记录以及日期问答。
快速开始
启用 Codex 和 Logbook 插件:plugins.allow,请同时包含 codex 和 logbook。更改插件配置后重启
Gateway 网关,然后检查注册信息并打开仪表板:
screen.snapshot 或 logbook.snapshot。
无头节点仅在插件处于活动状态后才会公布 logbook.snapshot。
如果缺少该命令,请参阅节点故障排查。
仅当插件已启用且 Control UI 会话具有 operator.write 时,才会显示 Logbook 标签页。状态行应显示 正在捕获,且没有错误。
分析窗口关闭时会显示时间线卡片;捕获活动后,也可以选择
立即分析。
工作原理
- 捕获:Logbook 每隔
captureIntervalSeconds(默认 30 秒)调用 所选节点的捕获命令,并存储一帧缩放后的 JPEG 图像。 连续相同的帧会标记为空闲,并从分析中排除。 - 观察:分析窗口(默认 15 分钟)结束后, 插件最多采样 16 个活动帧并将其发送到视觉模型, 后者返回带时间戳的活动观察记录(“VS Code:正在编辑 store.ts,修复类型错误”)。超过两分钟的捕获间隔或 本地午夜也会关闭当前窗口。
- 合成:观察记录与现有卡片中最近 45 分钟的内容 会被修订为时间线卡片(每张 10-60 分钟),其中包含标题、摘要、 类别、主要应用以及任何短暂的分心活动。
- 清理:删除超过
retentionDays天(默认 14 天)的帧。 卡片、观察记录和缓存的站会记录会保留。
<state-dir>/logbook/ 下。
模型和数据流
Logbook 使用两个独立的模型路由:
完整的 SQLite 数据库不会发送给任一模型。原始屏幕截图仅发送到
观察阶段;卡片合成、站会记录和问答接收的是派生文本。
配置
未设置
nodeId 时,Logbook 优先选择公开
screen.snapshot 的已连接应用节点,然后回退到公开
logbook.snapshot 的无头节点。在未固定节点的设置中,失败的节点会排到其他符合条件的节点之后。
仪表板的暂停开关仅对当前会话有效,并会在 Gateway 网关重启时重置;如需持久停止,请使用 captureEnabled: false。
视觉模型选择
Logbook 按以下顺序解析观察模型:plugins.entries.logbook.config.visionModeltools.media.models下第一个支持图像的 Codex 条目
tools.media.image.enabled: false 会禁用借用的媒体默认值,但显式设置的
Logbook visionModel 仍然有效。
仪表板标签页
- 时间线:按活动显示可展开的卡片,其中包含类别颜色、主要 应用、分心活动标签和快照关键帧。
- 日期概览:专注比例、类别细分、最常用应用。
- 每日站会记录:将昨天和今天的内容转化为可直接粘贴的更新。
- 询问当天活动:根据已跟踪的时间线回答自然语言问题 (“我是什么时候审查 Gateway 网关 PR 的?”)。
- 立即分析:立即关闭当前捕获窗口,而不是 等待分析间隔结束。
Gateway 网关方法
Logbook 注册以下 Gateway 网关 RPC 方法:
读取方法返回运行状态或派生文本。原始屏幕截图像素、产生模型费用的操作和运行时变更需要
operator.write。Control UI 标签页还需要 operator.write,因为它会公开这些操作和原始帧预览;只读客户端仍可直接调用派生文本方法。
隐私说明
- 快照可能包含屏幕上的任何内容,包括密钥。除非作为采样输入发送给已配置的观察模型,否则帧绝不会 离开本机。
- 在卡片合成、站会内容生成或问答期间,观察结果、最近的卡片和问题可能会通过 默认智能体模型离开本机。将提供商的数据处理策略同时应用于这两条模型路由。
- 需要完全本地化的流水线时,请为结构化观察模型和默认智能体 模型都使用本地路由。
- 帧、时间线数据库和临时捕获内容均以 仅所有者可访问的文件权限写入。
- 将
screen.snapshot添加到gateway.nodes.commands.deny是 屏幕捕获的终止开关:它既会阻止应用节点捕获,也会阻止 Logbook 自身的logbook.snapshot命令。 - 设置
tools.media.image.enabled: false还会阻止 Logbook 借用 媒体图像模型进行分析;此时仅使用插件配置中显式指定的visionModel。
故障排查
Logbook 选项卡缺失
检查以下三个条件:openclaw plugins list --enabled包含logbook。- 更改插件或允许列表后,Gateway 网关已重启。
- Control UI 连接具有
operator.write;只读会话不会 收到交互式选项卡描述符。
plugins.allow,则推荐配置要求它必须同时包含 logbook 和 codex。
捕获报告错误
- 确认节点公开了
screen.snapshot或logbook.snapshot。 - 在执行捕获的 Mac 上授予“屏幕录制”权限。
- 如果配置了
nodeId,请确认它与节点 ID 或显示名称匹配。 - 检查
gateway.nodes.commands.deny是否不包含screen.snapshot。
捕获成功但未显示卡片
- 缺少模型状态表示未找到兼容的结构化视觉路由。
请启用 Codex 插件并完成身份验证,或设置有效且显式的
visionModel。缺少模型期间,捕获的帧会保持待处理状态, 修复配置后即可进行分析。 - 等待
analysisIntervalMinutes,或者在捕获到活动后选择 立即分析。 - 连续相同的帧会被视为空闲证据,不会进入分析 批次。测试前请更改屏幕上的可见内容。
- 如果最新批次显示错误,请修复模型或身份验证问题,然后选择 立即分析。为避免重复产生模型费用,失败的批次仅在执行该显式操作时 才会重试。