宋红
AgentOS 编排层 / 端侧语言规划 / SimCar 反馈闭环
基本信息
| 项 | 内容 |
|---|---|
| 姓名 | 宋红 |
| 方向 | 意图理解、任务规划、指令下发、反馈闭环、失败处理、语音入口 |
| 项目 | 嘲风桌面机器人 AgentOS |
| 主代码 | agent-llm-vla/src/agent_api/ |
| SimCar 探索 | /root/chaofeng/.claude/worktrees/simcar-agent-loop/agent-llm-vla |
| 周期 | 2026-07-07 ~ |
文档入口
- AgentOS 编排层:启动期架构设计和职责说明;
- 当前实现状态:当前代码、测试、能力边界和下一步;
- 周报:按周汇总工作、证据和计划;
- 工作日志:从项目日志中筛选的关键实施与决策记录;
- 总览:项目设计、工程约束和协作边界;
- SimCar:Gateway、契约、演示、端侧 Planner 和交接资料;
- 资料索引:复制来源和选取理由。
最新进展
截至 2026-07-24:
- AgentOS / SimCar 已从单句指令推进到有界多轮会话:可记录场景障碍物、安全补全“绕过去”等指代,并在纯观察话轮中零动作落盘;
- 新增 L1 确定性快速路径、36 条规划基准与 raw/final 双口径门禁;当前
demo_gate_pass=true、model_gate_pass=false; - 落地
SIMCAR_REHEARSAL=1离线预演,以及 WSLg 实时麦克风 / 虚拟麦克风回放闭环;权威回归355 passed / 10 skipped; - 按老板要求启动 Ascend 310B / Orange Pi AIpro 20T 的 SenseVoice 端侧部署:板端已连通,ONNX 已导出,OM 转换阻塞在工具链算子包,持续推进中。
能力边界
当前已验证的是自然语言路由、端侧结构化计划、已知几何控制、有界会话上下文、离线预演和本机实时语音闭环。当前尚未完成真实视觉障碍物识别、未知环境自主导航、任意抽象轨迹、GPT 级开放指令理解,以及 310B 上可交付 OM / 板端 SenseVoice 推理。
涉及运动的系统坚持:大模型做高层语义和任务拆解;距离、角度、路径、安全边界和急停由确定性模块负责。
当前周报
原始资料位置
- 工作日志:
D:\THU\BeiJing\嘲风\工作日志\; - 总览:
D:\THU\BeiJing\嘲风\总览\; - 本目录中的副本用于个人工作归档,原始资料仍是跨团队权威来源。