Yann LeCun在最新的發言中強調,自回歸大型語言模型(LLMs)並不具備推理和計劃的能力。他指出,雖然結合令牌序列搜索的LLMs可以在某些領域中進行推理,但這種方式效率低下,主要適用於數學和程式碼等特定情境。LeCun進一步解釋,真正的推理和計劃需要在答案或輸出之間進行搜索,這一過程依賴於能量最小化,並需要一個世界模型,而目前的LLMs並不具備這種模型。此外,他強調,針對真實世界數據的世界模型無法使用生成架構,因為現實世界的複雜性、噪音和不可預測性使得這一方法不適用。這些觀點引發了對於LLMs能力的深入思考,並對未來的AI發展提出了挑戰。