LLM 到底能不能进行“推理”和“计划”?

LLM到底能不能进行“推理”(Reasoning)和“计划”(Planning)?

这是牵涉到LLM是不是真正有一定智能的根本问题。目前在学术界和工业界,对于这个问题有很强大的两派观点。赞同的人认为LLM目前在很多实用的数据集上已经有了不错的表现,的确是智能的表现,而反对的人则举出了一些实例来论证这些智能都是某种程度的训练集的记忆。

在ICML 2024会议上,来自Arizona State University的教授Subbarao Kambhampati给了一个名为“On the Role of Large Language Models in Planning”(网页链接)的短课程来详细阐述他的观点。

简单而言,Subbarao认为目前LLM的直接计划能力是不存在的。他们实验室做了大量的工作,认为LLM的诸多能力其实都是某种程度的Hallucination,本质上没法泛化或者泛化程度很低。

在相对比较乐观的一方面,Subbarao他们提出了一个叫LLM-Modulo的框架,让LLM来进行辅助的计划,这一方面LLM有很大的表现空间,使用了LLM来进行辅助计划的任务都有不错的提升。

对LLM如何能够进行复杂计划的读者,可以看看这个教程。

——洪亮劼

未经允许不得转载:岩猫星空网 » LLM 到底能不能进行“推理”和“计划”?