#TD算法

6天前

趁着假期终于把《智能简史（A Brief History of Intelligence）》看完了，还挺推荐的。书中有一个很有意思的事情： 80年代的时候，Richard Sutton发明了TD算法（时序差分算法），用来做强化学习。差不多同时期，神经科学家Wolfram Schultz在研究猴子大脑的多巴胺神经元。一开始这俩完全是独立进行的，谁也不知道对方在干嘛。直到1996年，Montague他们几个人把两边的数据一对比，发现多巴胺神经元的活动曲线，跟TD算法计算出来的误差曲线，基本一模一样！换句话说，进化用了几亿年在动物大脑里"写"出来的代码，跟我们人类花几十年想出来的算法，解决问题的底层逻辑是一样的，所以，是不是可以猜测智能的本质，可能真的有某种普遍规律。

#智能简史 #Richard Sutton #TD算法 #多巴胺神经元 #智能本质