我们来说说 Agent 的基础框架是什么
2026-07-11 3392052
2026-07-11 0
LongCat AI通过LoZA注意力、DiNA多模态编码和GA上下文管理三大能力实现信息密度优化:精准聚焦关键片段、图文音协同提纯、目标感知式动态压缩,读取即蒸馏。

LongCat AI 优化长文信息密度,不是靠堆长度,而是靠“精准萃取 + 动态压缩 + 模态对齐”。
它把冗余、重复、低相关性的内容自动过滤掉,只留下对当前任务真正起作用的高价值片段——就像编辑一本专业手册时,删掉所有举例说明里的背景铺垫,只保留操作步骤和关键参数。
信息密度优化依赖三个底层能力
LoZA 注意力机制:只聚焦关键片段
LongCat 的 LoZA(ZigZag Attention)不扫描全文,而是用可学习权重 α 自动识别哪些段落/句子/词组最相关。比如处理一份10万字的合同,模型会跳过标准条款模板,重点锁定“违约责任”“付款周期”“管辖法院”等5–8个核心区块,并将它们结构化压缩为带语义标签的紧凑表示。
DiNA 多模态统一编码:图文音协同提纯
当长文含图表、截图或语音备注时,LongCat-Next 不再把图像当附件处理,而是用 dNaViT 分词器将其离散化为与文字同源的 Token。一张流程图被转成几十个视觉 Token,和旁边的文字描述共同参与注意力计算——模型能识别“图中第3个节点对应文字第2段第4句”,从而合并语义、剔除图文重复表达。
GA 智能体上下文管理:边读边忘,边用边存
在处理超长文档(如1M token 技术白皮书)时,LongCat 启用 Goal-Aware(目标感知)机制:每轮推理只加载与当前子任务强相关的上下文窗口(例如“提取API错误码列表”),同时把已确认的关键结论(如“错误码401=未授权”)固化为轻量记忆单元,替代原始段落。这样既避免信息过载,又保障逻辑连贯。
本质上,LongCat 不是在“读完再总结”,而是在“读的过程中就完成信息蒸馏”。它把长文本当作动态知识流,而非静态数据块——读到哪里,密度就优化到哪里。