随着人工智能大模型的不断发展，如何让其在“难”的问题上深入思考，而不是对所有问题“想个不停”？记者5月29日从中国科学院自动化研究所获悉，该所联合鹏城实验室提出了一种高效推理策略AutoThink，可让大模型实现自主切换思考模式，避免“过度思考”。
“当前，越来越多的大模型开始具备‘深度思考能力’。”中国科学院自动化研究所研究员张启超说，模型在回答问题之前要先生成一整段包含反复自我反思、自我验证的推理过程，然后再给出答案。
张启超表示，这一思考模式显著提升了大模型解决复杂问题的能力，但同时也带来了“过度思考”的问题，即在处理简单任务时也会生成冗余的思考过程。
“比如使用者对大模型提问‘2+3等于几’，大模型可能会从自然数定义讲起，列出加法交换律，甚至反复确认，最后才输出答案是5。”张启超说，这种不必要的“过度思考”现象在推理模型中广泛存在。
针对这一问题，AutoThink可赋予推理模型根据题目难度自主切换思考模式的能力，即通过所设计的提示词和多阶段强化学习，引导其自主决定是否进行深度思考。
张启超介绍，AutoThink提供了一种简单而有效的推理新范式——通过省略号提示配合三阶段强化学习，引导大模型不再“逢题必深思熟虑”，而是根据问题难度自主决定“是否思考”“思考多少”。在多个数学数据集上，AutoThink实现了准确率与效率平衡，既提升性能又节省算力，展示出较强的适应性和实用性。
据悉，AutoThink已集成于一站式智能科研平台ScienceOne，并将用于训练ScienceOne的基座大模型S1-Base。研发团队表示，让大模型“更聪明地思考、更简洁地表达”，是未来科学基础大模型演进的重要方向。
随着人工智能大模型的不断发展，如何让其在“难”的问题上深入思考，而不是对所有问题“想个不停”？记者5月29日从中国科学院自动化研究所获悉，该所联合鹏城实验室提出了一种高效推理策略AutoThink，可让大模型实现自主切换思考模式，避免“过度思考”。
“当前，越来越多的大模型开始具备‘深度思考能力’。”中国科学院自动化研究所研究员张启超说，模型在回答问题之前要先生成一整段包含反复自我反思、自我验证的推理过程，然后再给出答案。
张启超表示，这一思考模式显著提升了大模型解决复杂问题的能力，但同时也带来了“过度思考”的问题，即在处理简单任务时也会生成冗余的思考过程。
“比如使用者对大模型提问‘2+3等于几’，大模型可能会从自然数定义讲起，列出加法交换律，甚至反复确认，最后才输出答案是5。”张启超说，这种不必要的“过度思考”现象在推理模型中广泛存在。
针对这一问题，AutoThink可赋予推理模型根据题目难度自主切换思考模式的能力，即通过所设计的提示词和多阶段强化学习，引导其自主决定是否进行深度思考。
张启超介绍，AutoThink提供了一种简单而有效的推理新范式——通过省略号提示配合三阶段强化学习，引导大模型不再“逢题必深思熟虑”，而是根据问题难度自主决定“是否思考”“思考多少”。在多个数学数据集上，AutoThink实现了准确率与效率平衡，既提升性能又节省算力，展示出较强的适应性和实用性。
据悉，AutoThink已集成于一站式智能科研平台ScienceOne，并将用于训练ScienceOne的基座大模型S1-Base。研发团队表示，让大模型“更聪明地思考、更简洁地表达”，是未来科学基础大模型演进的重要方向。
本文链接：http://www.vanbs.com/v-146-957.html我国科学家提出高效推理策略 可避免大模型“过度思考”
相关文章：
祝尊敬的老师元旦快乐的句子01-07
简洁的爱情哲理语录摘录11-27
工作压力大的朋友圈说说07-20
保护环境的心得体会01-07
班长竞选的演讲稿12-07
《六项精进》读后感10-11
塔吊司机实习心得体会08-30
老干部工作先进工作者事迹材料12-05
写给杨老师的一封信11-14
快乐的元旦节三年级作文11-03
遗址作文600字10-05
西安的一本大学哪些专业比较突出01-02
江苏2024年10月证券行业专业人员水平评价预约报名入口已开通10-11
2024北京交通大学在吉林如何招生08-14
小学数学一年级《比较数的大小》教案10-30
大学生学期学习计划01-12
公共场所消防安全提示标语12-05