长上下文
2 条- 01HySparse2:两级KV共享的混合稀疏注意力机制
设计HySparse2架构,通过两级KV共享优化长上下文预填充与缓存效率,适配长程多轮智能体场景。
- 02机器可解释信息:将文档编译为可搜索且可读的协议状态
提出Machine-Interpretable Information(MII)协议,实现文档到架构无关、可检索、低注意力开销的代理间状态表示
设计HySparse2架构,通过两级KV共享优化长上下文预填充与缓存效率,适配长程多轮智能体场景。
提出Machine-Interpretable Information(MII)协议,实现文档到架构无关、可检索、低注意力开销的代理间状态表示