#预测编码

𝙩𝙮≃𝙛{𝕩}^A𝕀²·ℙarad𝕚g𝕞

3周前

LLM是人类智能的信息论视角下的智能映射如果从本质层面来看，LLM智能可以被理解为一种人类智能的信息论维度在计算系统中的可反映形式： •它不是模拟神经结构，而是模拟语言行为背后的预测编码结构； •它捕捉的是人类通过语言活动积累的行为概率空间，并在此基础上进行生成； •因此它是一种“符号-预测-行为”路径上的统计智能，而非具身智能或价值智能。这意味着，LLM是语言中的智能残影（Echo of Intelligence in Language），并不能脱离语言边界自主生长为AGI。

#LLM #信息论 #人类智能 #预测编码 #符号-预测-行为 #统计智能