IT之家 2 月 15 日消息，科技媒体 marktechpost 昨日（2 月 14 日）发布博文，报道称加州大学伯克利分校的研究团队提出了一种 AI 训练方法，仅需少量数据即可增强大语言模型（LLM）推理能力。
提升 LLM 推理能力的难点在于训练模型生成具有结构化自反思、验证和回溯的长链式思维（CoT）响应。现有模型的训练过程通常需要在大量数据集上进行昂贵的微调，且许多专有模型的训练方法并不公开。
研究团队提出了一种新的训练方法，仅使用 17000 个 CoT 示例，微调 Qwen2.5-32B-Instruct 模型，并结合了 SFT 和 LoRA 微调技术，强调优化推理步骤的结构完整性而非内容本身，通过改进逻辑一致性并最大限度地减少不必要的计算开销，从而显著提高了 LLM 的推理效率。
研究表明，在增强 LLM 推理性能方面，CoT 的结构起着至关重要的作用，改变训练数据的逻辑结构会显著影响模型的准确性，而修改单个推理步骤的影响则很小。
IT之家附上使用新方法后的测试效果如下：
这些结果表明，高效的微调技术可以使 LLM 在更少的数据需求下达到与 OpenAI 的 o1-preview 等专有模型相媲美的推理能力。
这项研究表明，将关注点从大规模数据依赖转向结构完整性，可以开发出一种以最少的计算资源确保强大逻辑一致性的训练方法。这种方法减少了对海量数据集的依赖，同时保持了强大的推理能力，使 LLM 更易于访问和扩展。
该研究的成果为未来模型的优化铺平了道路，证明结构化微调策略可以有效地增强 LLM 推理能力，而不会影响效率，这标志着复杂的 AI 推理模型在更广泛应用方面迈出了重要一步。
海量资讯、精准解读，尽在新浪财经APP
VIP课程推荐
加载中...
APP专享直播
热门推荐
收起
新浪财经公众号
24小时滚动播报最新的财经资讯和视频，更多粉丝福利扫描二维码关注（sinafinance）
