导读 中国科技公司百度的人工智能研究团队正在提出一种新的推理框架，旨在提高法学硕士的可靠性和可追溯性。该团队在arXiv预印本服务器上发表了...
中国科技公司百度的人工智能研究团队正在提出一种新的推理框架，旨在提高法学硕士的可靠性和可追溯性。该团队在arXiv预印本服务器上发表了一篇论文，阐述了他们的想法。
在过去的几年里，ChatGPT等LLM已经成为主流应用，用户利用它们的功能来编写文档、创建图像甚至创作歌曲。
但LLM仍有一个明显的弱点——无法检查自己的结果，以确保它们不会偶尔向用户呈现“幻觉”，即毫无意义的结果。这一弱点使得AI应用无法用于更依赖数据完整性的关键应用。
在这次新的努力中，百度团队制定了一项策略，旨在迫使法学硕士在向最终用户展示结果之前检查他们的工作。
新方法涉及在呈现结果之前向LLM引擎添加一个三步流程。第一步是添加一个相关性感知模型来评估结果并根据其与用户提示的相关性进行判断。第二步涉及证据感知选择选项，其中选择相关文档进行引用，并呈现摘录作为答案正确性的证据。第三步涉及轨迹分析模块，该模块根据前两个模块的结果进行清晰简洁的分析。然后它为用户提供最终答案。
研究团队表示，这种方法将迫使LLM更加了解提供给用户的答案，最终应该会提高准确性。该团队还通过在LLM中添加测试模块然后编写提示来测试他们的想法。他们声称改进后的LLM能够使用小得多的训练数据集超越GPT-4。
研究人员表示，他们这样的框架可以带来更可靠的LLM，从而使其适合更多应用。他们还表示，他们将向更多目前无法获得大量训练数据集的玩家开放这一领域。