标签：语言模型

• 
  从 n-gram 到神经语言模型：条件概率建模简史

  2026-08-17 · ai

  语言模型n-gram分布式表示

  n-gram 用查表的方式直接数出条件概率，神经语言模型改用分布式表示让相似词共享统计。本文讲清平滑技术为什么救不了稀疏问题，以及 Bengio 2003 模型里参数共享的数学机制。