Skip to main content
Logbook 插件可将屏幕活动自动转化为工作日志。它会定期从已配对的节点捕获屏幕快照,将其总结为带时间戳的观察记录,并在 Control UI 中构建时间线卡片。它还可以生成每日站会记录,并回答有关某个已跟踪日期的问题。 OpenClaw 所有的状态保留在 Gateway 网关上的 <state-dir>/logbook/ 中,但模型处理不一定在本地进行。采样的屏幕截图会发送到已配置的视觉路由;观察记录和时间线文本会发送到默认智能体模型。如果屏幕内容和派生的活动文本必须保留在本机,请为两个阶段都使用本地模型路由。 Logbook 已内置,但默认禁用。启用该插件即表示允许 Gateway 网关捕获屏幕,因为 captureEnabled 默认为 true

开始之前

你需要:
  • 一个已连接且公开 screen.snapshotlogbook.snapshot 的节点。 macOS 应用节点需要 Screen Recording 权限。无头 macOS 节点主机 (openclaw node host run) 会获得由插件提供的 logbook.snapshot 命令,该命令由系统的 screencapture 工具提供支持。
  • 已启用并完成身份验证的内置 Codex 插件。Codex 目前提供 Logbook 所需的结构化图像提取契约。使用 openclaw models auth login --provider openai 登录;其他身份验证方式请参阅 Codex harness
  • 一个可用的默认智能体模型。完成视觉处理后,Logbook 使用该模型合成卡片、站会记录以及日期问答。

快速开始

启用 Codex 和 Logbook 插件:
配置显式视觉模型,以确保启动行为确定:
如果使用 plugins.allow,请同时包含 codexlogbook。更改插件配置后重启 Gateway 网关,然后检查注册信息并打开仪表板:
节点描述必须包含 screen.snapshotlogbook.snapshot。 无头节点仅在插件处于活动状态后才会公布 logbook.snapshot。 如果缺少该命令,请参阅节点故障排查 仅当插件已启用且 Control UI 会话具有 operator.write 时,才会显示 Logbook 标签页。状态行应显示 正在捕获,且没有错误。 分析窗口关闭时会显示时间线卡片;捕获活动后,也可以选择 立即分析

工作原理

  1. 捕获:Logbook 每隔 captureIntervalSeconds(默认 30 秒)调用 所选节点的捕获命令,并存储一帧缩放后的 JPEG 图像。 连续相同的帧会标记为空闲,并从分析中排除。
  2. 观察:分析窗口(默认 15 分钟)结束后, 插件最多采样 16 个活动帧并将其发送到视觉模型, 后者返回带时间戳的活动观察记录(“VS Code:正在编辑 store.ts,修复类型错误”)。超过两分钟的捕获间隔或 本地午夜也会关闭当前窗口。
  3. 合成:观察记录与现有卡片中最近 45 分钟的内容 会被修订为时间线卡片(每张 10-60 分钟),其中包含标题、摘要、 类别、主要应用以及任何短暂的分心活动。
  4. 清理:删除超过 retentionDays 天(默认 14 天)的帧。 卡片、观察记录和缓存的站会记录会保留。
日期边界和时间线时钟使用 Gateway 网关的本地时区,而不是 浏览器时区。帧和 SQLite 时间线数据库位于 <state-dir>/logbook/ 下。

模型和数据流

Logbook 使用两个独立的模型路由: 完整的 SQLite 数据库不会发送给任一模型。原始屏幕截图仅发送到 观察阶段;卡片合成、站会记录和问答接收的是派生文本。

配置

所有 Logbook 配置键均为可选。数值会舍入为整数, 并限制在支持的范围内。 未设置 nodeId 时,Logbook 优先选择公开 screen.snapshot 的已连接应用节点,然后回退到公开 logbook.snapshot 的无头节点。在未固定节点的设置中,失败的节点会排到其他符合条件的节点之后。 仪表板的暂停开关仅对当前会话有效,并会在 Gateway 网关重启时重置;如需持久停止,请使用 captureEnabled: false

视觉模型选择

Logbook 按以下顺序解析观察模型:
  1. plugins.entries.logbook.config.visionModel
  2. tools.media.models 下第一个支持图像的 Codex 条目
系统会跳过其他媒体提供商,因为它们目前不公开 Logbook 所需的结构化提取契约。设置 tools.media.image.enabled: false 会禁用借用的媒体默认值,但显式设置的 Logbook visionModel 仍然有效。

仪表板标签页

  • 时间线:按活动显示可展开的卡片,其中包含类别颜色、主要 应用、分心活动标签和快照关键帧。
  • 日期概览:专注比例、类别细分、最常用应用。
  • 每日站会记录:将昨天和今天的内容转化为可直接粘贴的更新。
  • 询问当天活动:根据已跟踪的时间线回答自然语言问题 (“我是什么时候审查 Gateway 网关 PR 的?”)。
  • 立即分析:立即关闭当前捕获窗口,而不是 等待分析间隔结束。

Gateway 网关方法

Logbook 注册以下 Gateway 网关 RPC 方法: 读取方法返回运行状态或派生文本。原始屏幕截图像素、产生模型费用的操作和运行时变更需要 operator.write。Control UI 标签页还需要 operator.write,因为它会公开这些操作和原始帧预览;只读客户端仍可直接调用派生文本方法。

隐私说明

  • 快照可能包含屏幕上的任何内容,包括密钥。除非作为采样输入发送给已配置的观察模型,否则帧绝不会 离开本机。
  • 在卡片合成、站会内容生成或问答期间,观察结果、最近的卡片和问题可能会通过 默认智能体模型离开本机。将提供商的数据处理策略同时应用于这两条模型路由。
  • 需要完全本地化的流水线时,请为结构化观察模型和默认智能体 模型都使用本地路由。
  • 帧、时间线数据库和临时捕获内容均以 仅所有者可访问的文件权限写入。
  • screen.snapshot 添加到 gateway.nodes.commands.deny 是 屏幕捕获的终止开关:它既会阻止应用节点捕获,也会阻止 Logbook 自身的 logbook.snapshot 命令。
  • 设置 tools.media.image.enabled: false 还会阻止 Logbook 借用 媒体图像模型进行分析;此时仅使用插件配置中显式指定的 visionModel

故障排查

Logbook 选项卡缺失

检查以下三个条件:
  1. openclaw plugins list --enabled 包含 logbook
  2. 更改插件或允许列表后,Gateway 网关已重启。
  3. Control UI 连接具有 operator.write;只读会话不会 收到交互式选项卡描述符。
如果已设置 plugins.allow,则推荐配置要求它必须同时包含 logbookcodex

捕获报告错误

  • 确认节点公开了 screen.snapshotlogbook.snapshot
  • 在执行捕获的 Mac 上授予“屏幕录制”权限。
  • 如果配置了 nodeId,请确认它与节点 ID 或显示名称匹配。
  • 检查 gateway.nodes.commands.deny 是否不包含 screen.snapshot
连续失败三次后,Logbook 会暂停十个捕获周期, 然后重试。未固定节点的设置可以轮换到另一个符合条件的节点。

捕获成功但未显示卡片

  • 缺少模型状态表示未找到兼容的结构化视觉路由。 请启用 Codex 插件并完成身份验证,或设置有效且显式的 visionModel。缺少模型期间,捕获的帧会保持待处理状态, 修复配置后即可进行分析。
  • 等待 analysisIntervalMinutes,或者在捕获到活动后选择 立即分析
  • 连续相同的帧会被视为空闲证据,不会进入分析 批次。测试前请更改屏幕上的可见内容。
  • 如果最新批次显示错误,请修复模型或身份验证问题,然后选择 立即分析。为避免重复产生模型费用,失败的批次仅在执行该显式操作时 才会重试。

相关内容