Facebook推出ReAgent,或为构建决策AI最强工具包

发布时间:2019-10-18 阅读量:1308 来源: 智东西 发布人: Jane

10月17日消息,据外媒报道,Facebook今日推出ReAgent强化学习(reinforcement learning)工具包,首次通过收集离线反馈(offline feedback)来实现策略评估(policy evaluation)。

 

目前ReAgent已与Microsoft Azure顶尖AI平台实现合作。

 

一、“1+1+1”


Facebook AI Research今天推出了ReAgent,这是一种强化学习工具包,用于构建可以接收反馈的决策AI(decision-making AI)。ReAgent可以给用户行为评分,并将用户的输入行为(例如单击推荐内容)作为训练数据。

 

ReAgent是一个小型C ++库,可从GitHub下载,并在任何应用程序中嵌入。该工具包包含一组入门的决策AI模型,一个用于模型性能评估的离线模块,以及一个使用TorchScript库将AI部署到生产中的平台。

 

Horizon是一个强化学习平台,曾用于Facebook 2018年11月的开源生产中,现已成为ReAgent的一部分。

 

二、建立大规模实时决策AI模块变得简单

 

应用研究负责人Srinivas Narayanan今天在Facebook的@Scale会议上说,ReAgent现在每天要将数十亿个Facebook上的决定个性化(personalized),例如Facebook和Instagram上的用户通知。

 

Facebook曾在博客中提到:“ReAgent是各类创建AI推理系统(AI-based reasoning systems)的开源平台中最全面和模块化的,并且是第一个通过收集离线反馈来实现策略评估,从而改进模型的。”

 

“ReAgent让建立大规模的实时决策模块变得简单,同时也让创建和评估研究项目以及生产应用中的策略变得平民化(democratized)。

 

三、与Microsoft Azure合作

 

为了继续改进ReAgent,Facebook发布了将其应用在Microsoft Azure等云服务中的文档。Microsoft Azure今年年初推出了自己的强化学习服务。

 

Facebook推出ReAgent.png 

▲图片来源:Microsoft,图中为Microsoft Azure的全球服务地区

 

在今年夏天Transform会议上的一次对话中,OpenAI首席技术官Greg Brockman和首席科学家Ilya Sutskever认为,未来AI发展的核心就是推理( reasoning)和可解释性(explainability)。

 

结语:开源是好事,也是大势所趋

 

谷歌和微软作为AI两大巨头,均有自己的开源AI开发平台,如谷歌的Google Cloud Prediction API和微软的Microsoft Azure Machine Learning。

 

如今Facebook也发布了自己的开源AI工具包。AI领域的研发门槛在不断降低,一些中小创企得以加入这场竞赛,也让这个领域不断注入新鲜的血液,充满活力。

 

充分竞争,交流融合,才会有更多灵感的迸发。

 

原文来自:Venturebeat

相关资讯
2mm²颠覆快充技术!ROHM发布全球最小双MOSFET芯片"

全球半导体制造商ROHM于2025年5月15日宣布,推出突破性30V耐压共源Nch MOSFET产品"AW2K21"。该产品采用2.0mm×2.0mm超小型封装,典型导通电阻低至2.0mΩ,兼具业界领先的功率密度与效能表现,标志着双向供电电路设计进入新一代技术阶段。

AI驱动半导体产业革新,台积电A14制程引领技术突破

在2025年5月15日举行的台积电技术论坛上,其全球业务资深副总经理张晓强指出,半导体产业正迎来以人工智能(AI)为核心动力的增长周期。台积电预测,2025年全球半导体产值将同比增长超10%,而到2030年,行业规模有望突破1万亿美元,其中AI贡献的占比将达到45%。这一愿景的背后,是台积电在先进制程、封装技术及多场景应用生态上的持续创新。

全球微电子巨头Melexis董事会注入亚太基因,战略锚定60%营收核心区

全球领先的微电子工程企业Melexis(迈来芯)于2025年5月15日宣布,其年度股东大会正式通过决议,任命齐玲女士与Kazuhiro Takenaka先生为董事会新成员。此次人事调整标志着公司深化亚太市场战略布局迈出关键一步,旨在通过行业资深人才的多元视角,赋能全球业务增长与区域本地化运营。

工业智能化浪潮下的技术创新图谱:从感知设备到系统集成

在全球制造业数字化转型加速的背景下,半导体与电子元器件领域正经历着技术范式变革。2025年5月,知名NPI代理商贸泽电子联合Analog Devices与Samtec发布的《工业应用中的机器人、AI与ML深度解析》电子书,系统阐述了智能技术如何重构现代工业体系。该著作汇集九位行业专家的前沿观点,重点揭示了三大技术演进方向:

全球半导体巨头加速扩产布局 台积电启动九大新厂建设计划

全球半导体代工龙头企业台积电(TSMC)在5月15日举办的2024年度技术论坛中国台湾专场上,首次披露了年度产能扩张蓝图。据该公司营运/先进技术暨光罩工程副总经理张宗生透露,今年将在中国台湾地区及海外同步推进九个生产设施建设项目,包含八座尖端晶圆制造厂和一座先进封装基地,彰显其在半导体先进制程领域的持续领导力。