Weekly Report — 2026-W40 (2026-09-28 ~ 2026-10-04)

本周重点是通过严格的审计、VLM benchmarking 和高级 robotic policy evaluation,将高风险研究从文档阶段过渡到 operational readiness 阶段。主要成就包括成功部署 RecoverBench framework,通过 visual-only memory architectures 优化 OmniJev,以及对学术申请材料和 WeAgent infrastructure 进行技术完善。

Weekly Overview

Metric Value
Date Range 2026-09-28 ~ 2026-10-04
Active Days 6 / 7
Total Conversations 48
Projects 32
Tasks Completed 47
Tasks In Progress 15
Total Tokens 7,527,067,752
Total Cost $2,744.02
Claude Code Token 7,488,004,360
Claude Code Cost $2,677.32
Codex Token 39,063,392
Codex Cost $66.70
Daily Average Cost $457.34

Project Progress

RecoverBench (4 days active) — 🔄 active

Accomplishments:

  • 完成了带有 deterministic numerics 的 Phase 2 实现
  • 通过 multi-agent workflows 执行了大规模的 claim vs. evidence 审计
  • 发起了 Phase 3 deployment audits 和 human demo reconciliation

Blockers:

  • ⚠️ 需要协调 recording requirements 和 operator kit bugs

OmniJev / VLM Evaluation (4 days active) — 🔄 active

Accomplishments:

  • 通过 visual-only arm 实现达到了 77.5% 的成功率
  • 建立了基于 HTTP 的 closed-loop evaluation architecture
  • 发现 GPT-6 Astra 在 long-term object identity tracking 方面优于 Gemini 3.1 Pro

Blockers:

  • ⚠️ wrist-camera tasks (BinFill) 中的 visual noise

MIHD / MihD-dev (3 days active) — 🔄 active

Accomplishments:

  • 组装了完整的 first manuscript draft
  • 启动了 Round 3 subagent management (13 agents)
  • 建立了 decision register 和 formal scientific guardrails

Blockers:

  • ⚠️ 等待 high-level policy decisions (H1-H7)

WeAgent / Wechat Integration (3 days active) — 🔄 active

Accomplishments:

  • 将核心逻辑迁移到 AstrBot plugin architecture
  • 集成了 LifeCopilot entry 和 channel token authentication
  • 使用 ‘Replay’ 方法解决了关键的 SQLite WAL corruption 问题

Blockers:

  • ⚠️ 在 auto-restarts 期间维持稳定性

Academic/PhD Application (3 days active) — 🔄 active

Accomplishments:

  • 重构了 CV,以优先展示 research identity 和 impact
  • 生成了交互式的 PhD/MS program dashboard
  • 进行了大规模的 advisor reputation 和 alignment 审计

Key Tasks

  • 🔄 RecoverBench Claim & Code Audit — 执行大规模 workflow,针对所有 research claims 与 code、data 及 cluster artifacts 构建 ‘have/missing/differs’ ledger;从 claim-compliance 转向 operational usability/pipeline gap analysis。
  • 🔄 MIHD Manuscript Drafting & Investigation — 组装了 MIHD manuscript 的完整初稿,并启动了多阶段 investigative workflow,以根据已发表的 methodology 审计当前的实现情况。
  • ✅ OmniJev Closed-loop Deployment & Optimization — 建立了独立的基于 HTTP 的 evaluation architecture,并验证了 ’event memory + point-wise judgment’ 逻辑在 VideoPlace tasks 中的性能提升。
  • ✅ W4A4 Closed-Loop Evaluation — 在 CPU 上评估了 W4A4 配置,由于显著的 backbone activation degradation,识别出成功率为 0.0%。
  • ✅ OmniJev 16-task Extension & Evaluation — 为 16 个 RoboMME tasks 实现了 shim extensions 和 truth replay,并使用 2B model 进行了完整的 closed-loop evaluation。
  • 🔄 Gemini Visual-Only Integrity Enforcement — 通过剥离 proprioception 并实现基于 detection 的 visual window tracking,执行纯视觉的 Gemini arm ablation。
  • ✅ Advisor Reputation Audit (Top 50) — 对数百名教授进行了详尽的多阶段 workflow 审计,以筛选指导风格、program protection 和 research alignment。
  • ✅ Fix SQLite WAL Merge Integrity — 为解密的 WAL files 实现了一种稳健的 ‘SQLite Replay’ 方法,以确保 integrity 并处理复杂的 checkpointing/frame validation rules。

Problems & Solutions

1. RecoverBench paper claims 与实际使用的 training data 之间的差异。[RecoverBench]

Solution: 进行了系统的 agentic audit,将 claims 映射到 cluster 上的实际文件;实现了 ‘Claims/Evidence’ ledger。

2. ResNet shortcut 实现使用了 projection convolutions 而不是 identity requirement。[ECE661/ResNet]

Solution: 重构了 ResNet class 以实现 Option A (identity shortcut) 并重新训练了模型。

3. 由于 Conv3d patch embedding bottleneck,OmniJev M2 执行速度极慢。[OmniJev]

Solution: 用等效的 linear layer 替换了缓慢的 torch 实现,将每张图像的 latency 从 16s 降低到 0.06ms。

4. W4A4 quantization 导致严重的性能下降 (0% 成功率)。[Quantization/VLA]

Solution: 确定 backbone activation 是错误来源,并建议转向 W8A8 以避免 non-functional quantization graphs。

5. SQLite WAL merge 导致数据库损坏和 ‘quick_check’ 失败。[WeAgent]

Solution: 使用官方 engine 的 ‘SQLite Replay’ 方法替换了手动 merging logic,以回放解密的 WAL files。

6. 由于隐藏的 proprioceptive data 使用,导致 robot policy evaluation 成功率虚高。[OmniJev]

Solution: 实现 DRAWN_MEMORY_VISUAL_ONLY/TRACK flags 以强制实现 zero proprioception,将成功率修正为 65.0%。

Learnings

Architecture (architecture)

  • 在 multimodal agents 中,分解 memory tasks(使用 code 处理 temporal/sequence logic,使用 VLM 处理 perception)优于使用 VLM 进行所有 reasoning。
  • 对于研究导向的身份(CVs/PhD),优先考虑问题定义和 research intuition 的战略性叙述比单纯罗列技术细节更有效。

Debugging (debugging)

  • GPU kernel autotuning(例如 Triton GEMM/XLA)可能会引入模拟 code regressions 的 non-determinism;在进行 benchmarks 时需要强制使用 deterministic autotuning。

Domain Knowledge (domain)

  • 由于硬件会自动为某些操作使用 FP16,4-bit simulations 在预测硬件精度方面可能过于悲观且不可靠。
  • 可靠的 robot learning 必须区分 ‘arbitrary starting state’ 和 ‘state following an execution error’,以衡量真正的 error recovery。

Tools (tools)

  • 在处理像 SQLite WAL 这样复杂的 database internals 时,使用官方 engine 来 replay 解密文件比实现自定义的 manual merging 更安全。

AI Usage Notes

Effective Patterns:

  • ✓ 用于 ‘Claims/Evidence’ 审计的 Multi-agent workflows
  • ✓ 使用 writer/reviewer/adversarial loops 进行 Agentic manuscript drafting
  • ✓ 使用 AI 将 high-level scientific constraints 整合为 structured decision tablesLimitations:
  • ✗ AI 在研究推断中倾向于“过度确定性” (over-certainty)
  • ✗ 在没有显式提示的情况下,无法识别 policy evaluations 中的非视觉数据泄露
  • ✗ 在 multi-agent loops 中难以管理复杂的、高精度的数据结构 (AttributeError/KeyError)

Next Week Outlook

下周的优先级包括:完成 quantized pi0.5 的 LIBERO evaluation;完成将 MIHD 项目重构为 Full/E2E/Demo levels 的工作;推进 RecoverBench camera-ready 版本中详细错误定义 (H1, H2, H5) 的实现。此外,专注于 VLA quantization recovery (W8A8) 以及完成 Gemini vs. Astra visual prompt comparison 也将至关重要。

Token Usage Statistics

AI Usage · 2026-W40 Claude Code + Codex
Total cost
$2,744.02
Total tokens
7.53B
Output tokens
13M
Cache read
97.0%
Cost split Claude Code $2,677 · Codex $67
Token character Cache reads 97.0% · Active 3.0%

Most token volume came from cache reads; Claude Code drove nearly all cost.

Peak Day: 2026-10-04 — $887.99 / 2626.2M tokens

Daily Average: $457.34