社区测试与交付报告
Nervos Brain
星火计划交付总结:一个可部署的 Nervos / CKB 社区知识系统原型,已支持检索、引用、回复上下文和评分反馈。
执行摘要
已经完成可部署、可问答、可反馈的社区知识系统原型。
当前版本适合作为 星火计划社区测试交付版本,后续进入 DAO 阶段做速度、覆盖和可验证性增强。
真实群测全部评分均值;按回答聚合为 3.75 / 5。
8 名真实用户 + 8 个补充测试人设。
评分按钮和 坏例 记录已在真实群聊中验证。
4-5 分占比 63.0%;低分主要用于标记数据缺口、边界问题和无意义测试消息。
系统能力
从聊天入口、检索库到反馈闭环,核心链路已打通。
当前交互入口已跑通,长期定位是知识系统。
文档、论坛和 GitHub 代码组成检索底座。
部署、配置、数据、运行和排障文档已补齐。
Talk 与 GitHub 刷新路径已准备。
测试覆盖
真实群测 + 补充跑测,覆盖约 16 人测试视角。
正式测试群记录 60 条回答;6 月 22 日新增 4 条回答、2 位当天测试者。
质量结果
真实评分和补充跑测都显示:4-5 分回答为主。
27 次评分。
24 个有评分回答。
4-5 分占比。
40 条固定跑测。
真实群测评分 3.67 / 5
补充跑测评分 3.83 / 5
真实评分中 4-5 分回答数量,占比 63.0%。
低分主要用于定位边界和资料缺口,不代表核心问答不可用。
真实群测与补充跑测结论一致:可用 最小可用版本 已成立。
响应时间
直接回答较快,复杂检索问答是 DAO 阶段优化重点。
90 分位 41.4 秒
90 分位 199.7 秒
90 分位 118 秒
xUDT 合约审查原始跑测 1104.2 秒;复测约 133.75 秒,检索本身约 0.8 秒。更像回答生成、反思、自检和引用整理链路偶发拉长。
多日群测只观察到一次极端长链路,复测已明显回落。
重点不在检索速度,而在生成、反思、自检和引用整理的收束。
把复杂问题从“能回答”推进到“可控时间内稳定回答”。
能力验证
核心能力已验证,少数垂直主题进入 DAO 阶段待办。
典型好案例
高分案例覆盖技术解释、部署路径、安全提醒和产品讨论。
CKB Cell 与脚本
编码层面解释 cell、lock script、交易流和 dead cell,多轮追问上下文稳定。
Fiber 节点代理部署
覆盖节点、钱包、通道、RPC / SDK 控制和私钥隔离建议。
CCC TypeScript 转账
围绕项目创建、交易构造、补输入、补手续费和发送流程组织答案。
钱包安全
对私钥、助记词、诈骗排查给出明确拒绝和替代排查信息。
资料限制说明
明确说明不能联网查最新网页资料,建议核对官方原始来源。
产品讨论
对 CKB 发展、预测市场、冷启动和风险边界给出结构化分析。
测试 → 修复 → 交付
内测推动多轮产品化修复,交付版本比招募时更稳定。
语言、引用、回复上下文和召回在真实群聊中暴露边界。
核心可见问题已修复,剩余速度优化进入 DAO 待办。
交付版本比招募测试时更稳定,更适合验收汇报。
已知边界
边界问题已收敛成 DAO 阶段待办,而不是交付阻塞。
当前版本已经能支撑真实群聊问答、基础技术解释、资料检索、回复追问和反馈收集。边界问题适合后续 DAO 阶段继续建设。
DAO 路线图
从星火计划原型走向长期社区知识基础设施。
- 复杂链路时间预算
- 后置反思收束
- 引用解析机制
- 回归测试自动化
- 生态项目结构化资料
- Talk 元数据 与治理资料
- 更多 GitHub 示例入口
- Spore / DOB / xUDT 垂直增强
- 社区共建资料流程
- 公开评测与质量看板
- 持续增量更新
- DAO 运营与反馈闭环
最终验收
当前版本适合作为 Nervos Brain 社区测试交付版本。
真实群聊问答、追问、评分闭环已经跑通;核心 Nervos / CKB 知识问答达到可用原型水平;报告、测试集、部署文档和后续增强方向已经清楚。