您当前位置: 首页 - 科技动态 - 微软与MIT携手,引领AI推理新时代:精炼6700万参数模型,挑战GPT-4顶尖地位

微软与MIT携手,引领AI推理新时代:精炼6700万参数模型,挑战GPT-4顶尖地位

文章来源:互联网 作者:38资源网 发布时间:2024-09-20 11:38:22

近日,在这个信息爆炸的时代,智能设备如何理解“因为下雨,所以要带伞”这类因果关系,实际上涉及到人工智能领域的一个重要分支——因果推理(Causal Inference)。

微软与MIT携手,引领AI推理新时代:精炼6700万参数模型,挑战GPT-4顶尖地位

一群来自微软和麻省理工学院等知名学术机构的研究人员,共同开发了一种突破性的机器学习训练策略。这项策略不仅克服了大型机器学习模型在逻辑推理方面的不足,还通过以下步骤实现了显著的进步:

独特的训练方法:研究人员采用了一种新颖的训练方法,这可能与常规的机器学习训练技术有所区别。

逻辑推理的改进:他们的方法显著提升了大型模型的逻辑推理能力,解决了先前存在的挑战。

利用因果关系构建训练集:研究团队利用因果关系模型来构建训练数据集,这种模型能够揭示变量间的因果联系,有助于训练出能够理解数据背后因果逻辑的模型。

教授模型基础公理:他们直接向模型传授逻辑和数学中的基础前提,帮助模型更好地进行逻辑推理。

小型Transformer模型的惊人表现:尽管模型参数仅有6700万,但通过这种方法训练出的Transformer模型,在推理能力上竟能与GPT-4相媲美。

因果推理,听起来像是哲学家的专利,但其实它早已渗透到我们生活的方方面面。对于人工智能来说,掌握因果推理,就像是学会了用“因为...所以...”来解释世界。但AI不是天生就会这个的,它们需要学习,而这学习的过程,就是这篇论文要说的故事。

公理训练方法:

想象一下,你有一个非常聪明的学生,但它对世界的因果关系一无所知。你要怎么教它呢?研究人员就想出了一个办法——公理训练。这就像是给AI一本“因果关系手册”,让它通过这本手册,学会如何识别和应用因果规则。

研究人员用变换器模型做了实验,结果发现,这种训练方法真的有效!AI不仅学会了在小规模的图上识别因果关系,而且还能把这些知识应用到更大的图上,即使它以前没见过这么大的图。

这项研究的贡献在于,它提供了一种新的方法,让AI能够从被动数据中学习因果推理。这就像是给了AI一种新的“思考”方式,让它能够更好地理解和解释世界。

这项研究不仅让我们看到了AI学习因果推理的可能性,也为我们打开了一扇门,让我们看到了AI在未来可能的应用场景。也许在不久的将来,我们的智能助手不仅能回答问题,还能告诉我们为什么会这样。

微软斥资2000万欧元与欧陆云企握手言和,巧妙规避反垄断调查阴霾

7月11日消息,微软采取了主动措施以缓解与欧洲云计算行业组织之间的紧张关系,特别是为了规避潜在的欧盟反垄断调查。据报道,微软已与欧洲云基础设施服务提供商协会(CISPE)达成了一项价值2000万欧元(约合1.58亿元人民币)的和解协议。

微软斥资2000万欧元与欧陆云企握手言和,巧妙规避反垄断调查阴霾

查询公开资料,CISPE 协会包括微软云计算竞争对手亚马逊网络服务公司(Amazon Web Services),以及一些规模较小的云计算公司。

CISPE 此前向欧盟委员会提出申诉,指控微软的云业务存在不当行为,影响整个市场的良性竞争。微软为了避免调查,和 CISPE 除了在金钱方面和解之外,还同意让 CISPE 成员运行微软的软件。

报道称微软将为欧洲云提供商提供增强版 Azure Stack HCI,该版本将提供基于 Windows 11 的多会话虚拟桌面基础架构、免费扩展安全更新(ESU)和 SQL Server 的现收现付许可等功能。

微软总裁布拉德·史密斯(Brad Smith)在一份声明中说:

在与 CISPE 及其欧洲成员合作一年多之后,我很高兴我们不仅解决了他们过去的担忧,还共同确定了前进的道路,为欧洲及其他地区的云计算市场带来了更多竞争。

复制本文链接 攻略文章为38资源网所有,未经允许不得转载。