当前位置: 首页 > 科技资讯 > Meta科研团队创新突破:思维精炼技术赋能,语言模型效能飞跃升级

Meta科研团队创新突破:思维精炼技术赋能,语言模型效能飞跃升级

发布时间:2024-11-21 23:13:53 作者: 阅读:1次

近日消息,一项引人瞩目的研究揭示了通过精心设计的训练方法,现代语言模型能够显著增强其多步骤推理的能力。

Meta科研团队创新突破:思维精炼技术赋能,语言模型效能飞跃升级

Meta公司的研究人员开发出一种新方法,将计算密集型的多步骤推理过程"提炼"为语言模型的参数。研究结果显示,在某些情况下,经过这种方法训练的模型能够以更低的计算成本达到与原始多步骤过程相似的性能。

这种"提炼"方法的工作原理是:首先对大量示例数据应用多步骤推理方法,然后筛选并保留一致性高的结果,最后使用这些数据对语言模型进行微调训练。本质上,该方法通过生成合成训练数据,使语言模型能够直接得出结论而无需中间步骤。

研究人员将这种方法应用于四种不同的多步骤推理技术和五种任务类型。结果表明,在许多情况下这种方法都能有效提升模型性能,但并非适用于所有场景。

例如,在避免偏见和改善回应质量等任务中,经过"提炼"的模型表现与多步骤方法相当,但所需计算资源大幅减少。然而,在复杂的数学推理任务中,这种方法却未能奏效。研究人员推测,某些任务对于单步推理来说可能过于复杂。

尽管如此,研究人员认为这种方法为开发更强大的语言处理系统提供了一个有前景的方向。未来可以将这种方法与其他技术相结合,专注于解决真正具有挑战性的问题。

这项研究为提升语言模型的推理能力开辟了新的路径,有望在多个应用领域带来突破。

Meta革新XR开发:最新Core SDK助力MR应用跨越虚拟与现实边界

7月8日消息,Meta公司宣布了一项针对混合现实(MR)应用的革新性更新,这一举措有望彻底改变MR应用的开发与体验方式。

Meta革新XR开发:最新Core SDK助力MR应用跨越虚拟与现实边界

通过最新发布的Meta XR Core SDK软件开发工具包,开发者将首次获得权限,能够自主决定是否启用安全边界系统,从而突破了长期以来制约MR应用沉浸感和自由度的限制。

据了解,安全边界对于 VR 游戏和应用来说至关重要,头显会在使用者接近边界时发出提醒,避免他们碰撞墙壁或物品。然而对于 MR 应用而言,这些限制显得有些多余。

此次更新的 XR Core SDK (用于开发 Quest 系列应用的软件开发工具包)版本号为 66,通过更新,开发者能够在应用使用透视功能显示真实环境画面时关闭安全边界。一旦应用切换回 VR 模式,安全边界将会立即恢复作用。

移除安全边界限制将助力开发者打造更沉浸的 MR 体验。混合现实之所以引人入胜,正是因为它能利用用户已知且熟悉的真实环境,通常是他们的生活空间。没有了边界束缚,用户可以更大范围地畅游于 MR 世界,而无需反复设置安全区域。

渝ICP备20008086号-35 违法和不良信息举报/未成年人举报:dzhanlcn@163.com

CopyRight©2003-2018 违法和不良信息举报(12377) All Right Reserved