微软宣布对 Azure AI Foundry 的模型微调进行重大更新

Microsoft Azure AI Foundry 已经支持模型微调。今天，微软宣布在 AI Foundry 上对模型微调进行重大改进，支持强化微调（RFT）等功能。RFT 是一种新技术，它使用思维链推理和特定任务分级来提高特定领域的模型性能。

去年 12 月，OpenAI 首次宣布了 RFT 的 alpha 计划。据他们的早期测试者称，与标准开箱即用模型相比，RFT 使模型性能提高了 40%。微软今天宣布，针对 OpenAI 的 o4-mini 模型的 RFT 即将登陆 Azure AI Foundry。该公司建议在以下情况下使用 RFT：

• 自定义规则实施：RFT 在决策逻辑高度特定于您的组织且无法通过静态提示或传统训练数据轻松捕获的环境中蓬勃发展。它使模型能够学习反映现实世界复杂性的灵活、不断发展的规则。
• 特定领域的作标准：非常适合内部程序与行业规范不同的场景，以及成功取决于遵守这些定制标准的场景。RFT 可以有效地将程序变化（例如延长时间表或修改合规性阈值）编码到模型的行为中。
• 决策复杂性高：RFT 在具有分层逻辑和变量丰富的决策树的领域中表现出色。当结果取决于浏览大量子案例或动态权衡多个输入时，RFT 可帮助模型泛化复杂性并提供更一致、更准确的决策。

微软今天还宣布支持针对 OpenAI 最新 GPT-4.1 纳米模型的监督微调（SFT），该模型适用于对成本敏感的人工智能应用。针对 GPT-4.1 的微调将在未来几天内推出。

最后，微软宣布支持微调 Meta 最新的 Llama 4 Scout 170 亿参数模型，该模型支持 10M 标记上下文窗口。此外，Llama 4 微调还可作为 Azure 托管计算产品的一部分提供。微调后的 Llama 模型既可在 Azure AI Foundry 中使用，也可作为 Azure 机器学习组件使用。