2026 深圳Agent 沙龙材料分享 LoongSuite Pilot 让每一个 AI Coding Agent 可观测、可评估、可审计

可观测、可评估、可审计AICodingAgent时代，我们答不出的问题?团队每天消耗了多少Token？?Agent输出不符预期时，困难来自三个层面多Agent数据天然割裂多Agent数据天然割裂存储位置、粒度、语义各异无法规模化横向对比端侧是可观测的盲区Agent行为天然难观测结果反思与决策从安装到效果展示curl-fsSLhttps://...loongsuite-pilot/installer.sh|bash-s--install\--sls-endpoint""\--sls-project"my-project"--sls-logstore"my-logstore"\--sls-ak-id"your-ak-id"--sls-ak-secret"your-ak-secret"静默采集静默采集本地Dashboard自动部署实际演示架构+五个关键设计选择LoongSuiteLoongSuitePilot架构总览AICodingAgentsIDE历史文件SQLite数据库运维能力HookWatchdog·AutoUpdater·Metrics·StatusBar·LogRetention存储&分析后端阿里云SLS实时查询分析CMS2.0/LangfuseOTLP链路追踪本地JSONL零依赖落盘自建后端HTTP对接Discovery+DeploymentAgentDiscoveryServiceInputLayer(InputManager)HookInputProcessingStateStoreSnapshotStoreagents.d/*.jsonSessionInputDeploymentManagerSqliteInputMultiFlusher(并行扇出)SLSLogstoreOTLPTraceMaskingNormalizationContentPolicyGitEnrichmentHTTPEndpoint不丢·不重CliForwarder本地JSONLIdeInput一次部署，自动覆盖所有已安装的AICodingAgent一次安装·一个二进制▼agents.d/agents.d/claude-…▼DeploymentManager·声明驱动部署DetectionOnlyCursorClaudeCodeCodexQoderWukongQwenCodeCLICursorClaudeCodeCodexQoderWukongQwenCodeCLIQoderWorkOpenClaw/GeminiCLI/Cline...→→→→→→基础设施复用基础设施复用接入新Agent时看板、告警、分析查询gen_ai.session.id...灵活粒度，平衡观测与安全按Agent类型配置是否采集消息内容、工具参数灵活粒度，平衡观测与安全按Agent类型配置是否采集消息内容、工具参数多目标输出，不绑定后端本地JSONL零依赖落盘，本地调试SLSLogstore多目标输出，不绑定后端本地JSONL零依赖落盘，本地调试SLSLogstore生产级实时查询HTTPEndpoint对接自建后端OTLPTraceCMS2.0/Jaeger/Langfuse四个以前回答不了的关键问题有了数据之后：四个最重要的场景不同Agent不同Agent有不同的“甜蜜区”Token效率/成功率/时长传统指标失效，需新维度：任务完成率/Token效率比/人机协作比Token消耗与质量非线性识别“Token黑洞”＝发现能力瓶颈识别“Token黑洞”＝发现能力瓶颈Agent选型实践--ClaudeCo考生ClaudeCode(opus-4-6)vsQoderCLI(Ultimate)考题考生ClaudeCode(opus-4-6)vsQoderCLI(Ultimate)考题8道复杂编程任务·覆盖实现/修复/编译/并发/重构/迁移准出每题22–32个预写单元测试，必须全部PASS采集LoongSuite-Pilot后台自动采Trace·零埋点零改码执行方式claude--print/qodercli-p非交互一次性执行npxvitestrun自动验证根据session提取数据分析生成报告8道考题矩阵覆盖不同编程场景每题预写22–32个测试作为准出线#类型任务内容单测数T1多模块实现EventBus(核心+中间件+通配符+异步)T2跨文件Bug修复4文件中12个跨调用链bugT3编译器实现Markdown→HTML转换器T4并发系统DAG调度(拓扑排序+超时+失败级联)T5API设计链式SQL查询构建器(不可变)T6重构+扩展单体Logger→插件架构T7代码迁移Callback→async/awaitT8代码生成JSONSchema→TS类型+校验器评测结果：质量全部达标、效率各有所长Token消耗2.03×ClaudeCode4.4MvsQoderCLI2.1M·QoderCLI省51%Token消耗2.03×ClaudeCode4.4MvsQoderCLI2.1M·QoderCLI省51%ClaudeCode967svsQoderCLI1593s·Claude快39%单任务效率均值平均端到端120.9s199.1sClaude快39%平均推理106.1s191.4sClaude单次更快平均Token545.3K268.7KQoderCLI省51%平均ReAct9.8轮8.2轮QoderCLI更精简Trace才能看到的两个洞察Markdown编译器QoderCLI触发max_tokens截断续传耗时812s，Claude一气呵成324s——finish_reasons=[ımax_tokens’]只能在Trace里看到插件架构重构QoderCLI24轮小步迭代389s，Claude16轮165s——Trace的STEP序列揭示"先理解后动手"vs"写-测-改"策略差异预写测试全部通过·双方100%PASS·质量打平数据来源：LoongSuite-PilotOTLPTrace·按gen_ai.session.id聚合指标ClaudeCodeQoderCLI优势方LLM请求次数QoderCLIQoderCLI工具调用次数ClaudeCodeTotalTokens4.4MQoderCLILLM总耗时848.8sClaudeCode端到端总耗时966.9sClaudeCode结论Agent选型不再靠感觉——每一次LLM调用、每一次工具使用、每一轮ReAct都成为可量化、可对比、可追溯的数据安全审计：六层体系从管理到追溯④数据泄露分析LoongSuitePilot正式开源端侧端侧AI编程Agent服务端AIAgent基础设施CursorClaudeCodeCodLoongSuite可观测生态定位LoongSuitePilot补齐了AIAgent可观测在端侧的一块拼图服务端框架无侵入采集LoongSuitePilot端侧AI编程Agent数据采集多协议输出：OT