上下文窗口的用法:塞满不等于用好 Nov 14, 2026 百万窗口有两个真问题:中间遗忘和变慢。这篇给四个省 token 又提准的做法与三条判断标准。 大模型 # 大模型 # 长上下文 # 提示词 # 推理成本
MoE 稀疏激活:参数大而算力省,代价在哪 Nov 14, 2026 MoE 省算力但不省显存。这篇讲路由机制、三个训练与部署的坑,以及选型该看哪两栏。 AI前沿 # AI前沿 # MoE # 模型架构 # 推理成本