亚马逊与 AI 公司 Hugging Face 合作:定制芯片低成本运行 AI 模型

99科普4个月前热门话题126

IT之家 5 月 23 日消息,亚马逊公司的云部门宣布,已与人工智能初创公司 Hugging Face 合作,将在亚马逊的定制计算芯片上更低成本地运行数千个 AI 模型。

亚马逊与 AI 公司 Hugging Face 合作:定制芯片低成本运行 AI 模型

估值 45 亿美元(IT之家备注:当前约 326.25 亿元人民币)的 Hugging Face 已成为 AI 研究人员和开发者分享聊天机器人或其他 AI 软件的中心,并得到了亚马逊、Alphabet 旗下的谷歌和英伟达等公司的支持,它是开发者获取和调整开源 AI 模型(如 Meta Platforms 的 Llama 3)的主要平台。

当开发人员调整了开源的 AI 模型后,他们通常希望使用该模型来驱动软件。亚马逊和 Hugging Face 周三宣布,他们已经合作在一个名为 Inferentia2 的定制亚马逊网络服务(AWS)芯片上实现这一目标。

“对我们来说,效率非常重要 —— 确保尽可能多的人能够运行模型,并且能够以最具成本效益的方式运行,”Hugging Face 的产品和增长负责人 Jeff Boudier 说。

AWS 希望吸引更多的 AI 开发者使用其云服务来交付 AI。虽然英伟达在训练模型的市场上占据主导地位,但 AWS 认为其芯片可以以较低成本运行那些经过训练的模型。

负责 AWS 人工智能产品的 Matt Wood 表示,你可能每个月训练这些模型一次,但可能每小时对它们进行成千上万次推理,这是 Inferentia2 真正闪光的地方。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

文章版权声明:除非注明,否则均为久久博客原创文章,转载或复制请以超链接形式并注明出处。

相关文章

还记得史无前例的“负油价”吗?美国最大原油ETF又“搞事”了

还记得史无前例的“负油价”吗?美国最大原油ETF又“搞事”了

  还记得史无前例的“负油价”吗?美国最大原油ETF又“搞事”了   来源:华尔街见闻 卜淑情   USO将从9月开始将其持有的大部分头寸重新分配到近期石油期货合约上,此举已引起监管部门注意。   美...

中威电子:7月18日公司高管石旭刚减持公司股份合计26.8万股

中威电子:7月18日公司高管石旭刚减持公司股份合计26.8万股

证券之星讯,根据7月19日市场公开信息、上市公司公告及交易所披露数据整理,中威电子(300270)最新董监高及相关人员股份变动情况:2023年7月18日公司董事石旭刚共减持公司股份26.8万股,占公司...

浙商中拓: 拟变更公司董事

浙商中拓: 拟变更公司董事

浙商中拓(SZ000906,收盘价:6.83元)6月17日晚间发布公告称,袁京鹏先生为公司控股股东浙江省交通投资集团有限公司推荐的董事,因工作调动,其申请辞去所担任的公司第八届董事会董事、审计委员会...

Sea盘前涨超3% 开盘有望刷新阶段高价

Sea盘前涨超3% 开盘有望刷新阶段高价

来源:格隆汇 格隆汇5月16日丨Sea(SE.US)盘前继续上涨3.1%,报90.8美元,开盘有望刷新阶段高价,近日累计升幅超15%走出反转行情。日前公布的业绩显示,去年第四季度实现GAAP净利润4....

新东方-S(09901.HK)第二季度股东应占净利润升4007.4%至3010万美元 预计第三季度净营收10.7亿至10.935亿美元

新东方-S(09901.HK)第二季度股东应占净利润升4007.4%至3010万美元 预计第三季度净营收10.7亿至10.935亿美元

格隆汇1月24日丨新东方-S(09901.HK)公告,截至2023年11月30日止的2024财年第二季度,新东方的净营收为869.6百万美元,同比上升36.3%。主要由于公司的教育属性新业务以及东方甄...

6月15日河北滦县花生价格行情

6月15日河北滦县花生价格行情

  原标题:6月15日河北滦县花生价格行情 来源:花生交易网   备注:以上价格采集自河北省唐山市滦县花生市场,为当地主流成交价格。   【市场行情】:   河北滦县产区基层上货量有限,交易较为清...