模型发布 / 更新普通
Nvidia 研究者称超大 AI 上下文窗口是死路
内容摘要
Nvidia 研究团队认为,模型上下文窗口一味扩大往往是过度且昂贵的做法,定期摘要加定向检索在多项测试中效果相当。GPT-4 于 2023 年 3 月发布时上下文为 8,192 tokens,如今 GPT 5.6 Sol 可处理约一百万 tokens,约为前者 120 倍。
内容分类AI 模型发布与更新
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源The Decoder:AI News(RSS)
站内情报编号intel-bb7d89fa39405b25e1cad593