当前位置:首页 > 公众号精选 > 信息速递
[导读]据 21ic 获悉,因为微软支持的 OpenAI 的生成式人工智能聊天模型 ChatGPT 每天投入的运行成本高达 70 万美金,为了降低生成式人工智能模型的运行成本,微软正在开发一款代号为“Athena”的人工智能芯片。

据 21ic 获悉,因为微软支持的 OpenAI 的生成式人工智能聊天模型 ChatGPT 每天投入的运行成本高达 70 万美金,为了降低生成式人工智能模型的运行成本,微软正在开发一款代号为“Athena”的人工智能芯片

据悉,近日全球半导体行业研究公司 SemiAnalysis 首席分析师 Dylan·Patel 表示,由于 ChatGPT 运行在价格昂贵的计算基础设施之上,OpenAI 每天为运行 ChatGPT 投入的成本可能高达 70 万美金。

Dylan·Patel 表示,无论是撰写求职信、生成教学计划、帮助用户优化个人资料,还是基于事实或假设对事物进行判断分析,ChatGPT 均需要庞大的算力才能基于用户的输入信息做出反馈,而这部分成本都来自于昂贵的服务器。

Dylan·Patel 及其同事 Afzal·Ahmad 均认为,虽然训练 ChatGPT 背后的大语言模型可能要花费上亿美元,但其运营费用或其背后的内容生产成本会更高,即使采用任何合理的部署规模都远远超过了其训练成本。

近日传言微软为了降低生成式人工智能模型的运行成本正在开发一款代号为“Athena”的 AI 芯片。报道称该项目自 2019 年以来一直在生产中,并可供一小部分 Microsoft 和 OpenAI 员工进行测试。

微软之前与 OpenAI 达成了 10 亿美元的投资协议,要求 OpenAI 仅在微软的 Azure 云服务器上运行其模型。此前有消息称,因为短缺导致微软为一些内部团队配给 GPU。而英伟达的处理器售价很高,因此微软期望以相同工作负载的更便宜方式来运行。

除了强大的性能之外,英伟达的芯片还具有显着的软件优势,大部分 AI 工作负载都是为它们设计的,并且拥有数十年的开发人员经验。目前微软大约有 300 多名员工正在开发这款芯片。

消息人士称,该芯片最早可能在明年发布供微软和 OpenAI 内部使用,微软官方对此没有回复,但是否也让 Azure 客户使用还正在讨论中。谷歌开发了自己的 AI 芯片系列 TPU,是目前唯一开发 LLM 的竞争对手芯片,而亚马逊拥有自己的替代产品线 Trainium。

据悉,“Athena”基于 5nm 工艺节点,专为大型语言模型 (LLM) 等训练软件而构建,这些软件是近几个月出现的生成式 AI 激增的核心,但这些模型的增长一直受到 AI 训练芯片市场领导者英伟达GPU 短缺的困扰。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

作为英特尔首个神经元数量达到11.5亿的神经拟态系统,Hala Point为更高效、规模更大的AI开辟了道路。

关键字: 神经拟态系统 AI 深度学习模型

基于大语言模型研发的品牌定制化AI客服解决方案,获得业界高度认可 上海2024年4月16日 /美通社/ -- transcosmos集团(中文名:大宇宙集团;以下简称:transcosmos)于2024年4月11日在C...

关键字: TRANS TI COSMOS AI

全新Balletto™系列无线MCU基于Alif Semiconductor先进的MCU架构,该架构具有DSP加速和专用NPU,可快速且低功耗地执行AI/ML工作负载

关键字: 处理器 微控制器 AI

4月17日消息,Intel官方宣布,工程师内部研发了一种新的AI增强工具,可以让系统级芯片设计师原本需要耗费6个星期才能完成的热敏传感器设计,缩短到区区几分钟。

关键字: Intel 芯片 1.8nm

业内消息,近日京东集团创始人、董事会主席刘强东以“采销东哥”AI 数字人开启直播首秀,同时亮相京东家电家居、京东超市采销直播间,不到1小时直播间观看量超2000万,并创造京东超市采销直播间开播以来观看人数的最高峰。

关键字: 京东 AI 数字人 刘强东 直播

回看历史,人工智能总会时不时爆发一次,然后又归于沉寂。

关键字: AI OpenAI AGI 通用人工智能

2024年4月12日,中国--服务多重电子应用领域、全球排名前列的半导体公司意法半导体(STMicroelectronics,简称ST;纽约证券交易所代码:STM)宣布,松下自行车科技有限公司(Panasonic)宣布采...

关键字: 人工智能 电动自行车

4月17日消息,斯坦福大学近日发布《2024年AI指数报告》(AI Index Report 2024),凭借AI在大规模胰腺癌早筛上的创新突破,阿里达摩院(湖畔实验室)医疗AI入选科学与医疗领域的年度亮点研究(High...

关键字: AI 人工智能 集成电路

业内消息,微软公司宣布将向阿联酋顶级人工智能公司G42投资15亿美元,以支持这家总部位于阿布扎比的公司缩减在中国业务的承诺。此前该公司表示将减少在中国的业务,并承诺投资于主要的西方市场。

关键字: 微软 G42

业内消息,昨天美国芯片设计公司 AMD 推出了锐龙PRO 8040/8000系列AI处理器芯片,为支持人工智能的PC提供动力,试图在与英伟达和英特尔等竞争对手的AI PC 竞争中获得领先地位。

关键字: AMD 锐龙 AI处理器 芯片
关闭