大模型
讲清大模型这一技术品类:它是什么、靠什么能力成为 AI 应用的基础,选型时要看的关键维度,以及它的能力边界在哪。
讲清大模型这一技术品类:它是什么、靠什么能力成为 AI 应用的基础,选型时要看的关键维度,以及它的能力边界在哪。
上下文快满了,AI 就会开始忘事,这多半不是它态度变差,而是早期内容已经被截断或压缩。最稳的做法是先让它总结要点,再新开一段对话、贴上总结继续,而不是在原对话里反复提醒它“你记错了”。 四个信号,说明上下文快满了 第一个信号是忘了开头交代的设定和名字。比如你一开始就说好的人物名、称呼、格式要求,聊到...
分词器是你发给模型的那句话最先经过的部件,它不负责理解,只负责切分和编号。文字送进大模型之前,分词器会先把它切成一个个 token,再换成词表里的编号,模型读到的就是这串编号。想通这一点,不少困惑就有答案:token 既不是字,也不是词。 它切的不是字,而是出现概率 目前主流的分词器多采用 BPE ...
Muse Spark 在2026年10月2日成为 Meta 公布的一项协作研究的主角:Meta 的数学家团队与该模型共同完成六篇研究论文,其中五篇回答了此前悬而未决的开放问题。团队使用的是 Muse Spark 1.1 和 1.2 的 Thinking Mode,全程只通过 meta.ai 的普通聊...
Mercor 的会计对照研究在 2026 年 10 月 2 日由 Mercor 通过官方博客公布:研究团队请来 12 名平均从业 5 年半、持有注册会计师资格的初级会计师,与前沿大模型在同一批月末结账任务上正面对照。结果很刺眼——会计师的平均得分约为 37%,而 Claude Opus 5 等前沿模...
模型对齐指的是在预训练完成之后,通过针对性训练,让大模型学会按人类期待的方式回答:诚实、不作恶、不瞎编、拒绝危险请求。预训练只教会模型"会说话",对齐才是让它学会"好好说话"。 对齐不是预训练,也不是微调 预训练:用海量文本训练,让模型学会语言规律和世界知识——这个阶段的模型只是个"文本续写器"。 ...
2026 年 10 月 1 日,Modal 在官方工程博客宣布,多节点 GPU 集群产品 Modal Clusters 正式可用(GA)。开发者只需要在 Python 函数上加一个装饰器 @modal.clustered ,就能获得一个多节点集群:节点之间通过 InfiniBand verbs 互联...
2026 年 9 月 30 日,蚂蚁集团旗下 InclusionAI(百灵)通过官方公众号发布了新一代语言模型 Ling-3.1-flash:总参数 5600 亿、每次推理仅激活约 250 亿参数,主攻智能体任务、搜索、办公软件和专业应用场景。这是 flash 系列第一次把参数规模推到 5000 亿...
Gemini 4 Argon 是 Google 在 2026 年 9 月 30 日推出的新一代旗舰模型,也是全新 Gemini 4 系列的首款产品。DeepMind 在官方博客中称它是"下一个前沿智能时代"的开端,为复杂长程工作流中的深度推理而造,覆盖真实软件工程、企业知识工作(法律、金融)与网络安...