AI玩词谜游戏：编剧式提示让大模型实力大增！ | AI的自主"智慧寻宝"！一个检索模型的诞生

​1、AI玩词谜游戏：编剧式提示让大模型实力大增！

图片

在人工智能的创新世界里，研究者提出了一个颠覆性的思路：将大语言模型比作"方法派演员"。就像演员需要深入理解角色，大模型也可以通过精心设计的"剧本"和"表演指导"来提升解决复杂问题的能力。这项研究以《纽约时报》的连接词谜游戏为实验场景，展示了这一创新思路的惊人效果。

图片

研究团队设计了四个关键原则：将提示工程视为编剧和导演、强调表演需要充分准备、将复杂任务分解到模仿和真实性产生相同结果的程度，以及在模仿失败时寻找替代方案。通过这种"方法演员"式的提示架构，GPT-4o的连接词谜游戏解题准确率从传统方法的27%大幅提升到86%，堪称质的飞跃。

图片

在实验中，研究者还测试了OpenAI最新的推理模型o1-preview。当使用传统方法时，模型解决拼图的准确率为79%，而采用"方法演员"提示后，准确率提升到87%。更令人印象深刻的是，在允许多次API调用的情况下，模型甚至能够100%解决拼图，超越了人类专家的表现。

图片

这项研究不仅仅是关于解决一个词谜游戏，更是为大语言模型的提示工程提供了一个全新的思考框架。它启示我们，通过精心设计"剧本"和"表演指导"，AI可以像真正的"演员"一样，更加灵活和intelligent地理解和解决复杂任务。。

论文标题：LLMs as Method Actors: A Model for Prompt Engineering and Architecture

论文链接：https://arxiv.org/abs/2411.05778

2、AI的自主"智慧寻宝"！一个检索模型的诞生

图片

在人工智能的知识检索领域，研究者们提出了一个令人惊叹的创新方案：Auto-RAG。这是一个能够自主进行多轮对话检索的模型，它不再依赖传统的人工设计规则，而是充分发挥大语言模型的推理能力，像"侦探"一样主动且智能地获取信息。

图片

Auto-RAG的工作原理就像一个智能对话系统。当遇到复杂问题时，它能自主决定是否需要继续检索更多信息。模型通过多轮对话，不断调整和优化检索策略，直到获取足够的外部知识来全面回答问题。在六个不同的基准测试中，这个模型展现出了卓越的性能，尤其在开放域问答和多跳问答任务上。

图片

与传统检索增强生成方法不同，Auto-RAG最大的创新在于它能根据问题的复杂程度动态调整检索轮数。更令人印象深刻的是，它还能用自然语言表达整个检索过程，大大提高了模型的可解释性，让用户能够直观地理解AI的思考过程。

图片

这项研究不仅仅是技术的突破，更为我们展示了大语言模型在知识获取方面的巨大潜力。Auto-RAG为未来的智能问答系统指明了一个全新的方向：让AI不再被动接收信息，而是像人类一样主动、灵活地获取和整合知识。

论文标题：Auto-RAG: Autonomous Retrieval-Augmented Generation for Large Language Models

论文链接：https://arxiv.org/abs/2411.19443

本文转载自 ​​AI帝国​​，作者： 无影寺