栏目分类导航
查看更多 +产品分类导航
查看更多 +新闻分类导航
查看更多 +151-1260-5312詹先生
跟着人工智能运用的广泛扩大,练习及部署这些繁杂模子所需的计较力也于急剧上升。这一趋向使患上数据中央的本钱支出(CapEx)及运营支出(OpEx)连续上升,而数据中央恰是支撑这场数字革命的要害基石。
人工智能(AI)已经成为鞭策全世界技能厘革的焦点气力,它于医疗、金融、汽车及文娱等多个范畴揭示出巨年夜的成长潜力。但跟着人工智能运用的广泛扩大,练习及部署这些繁杂模子所需的计较力也于急剧上升。这一趋向使患上数据中央的本钱支出(CapEx)及运营支出(OpEx)连续上升,而数据中央恰是支撑这场数字革命的要害基石。
面临成本不停上升的挑战,浩繁数据中央业主采取了一种计谋,即经由过程人工智能练习装备的摊销来分摊推理阶段的成本,例如,部署已经经练习终了的人工智能模子。只管这类做法于短时间内看似可以或许减轻企业财政压力,实则躲藏危害,可能会对于数据中央的财政康健及运营效率造成倒霉影响。为了鞭策人工智能的连续康健成长,咱们必需调解计谋 力图于均衡本钱投入与运营支出的同时,保障装备的持久不变性及高效运行。
当前计谋:摊销及分摊成本将人工智能练习硬件的成本于其估计利用周期内举行摊销的做法相对于直接。鉴在人工智能练习对于计较资源的高需求,高端GPU及加快器的购置成本可能高达数百万美元。数据中央业主经由过程将这些昂扬成天职摊至数年,试图为这一巨额投资提供合理性,并确保高端练习装备于经济上具备可行性。
这些昂贵的硬件于完成练习使命后其实不会闲置,它们凡是会于练习阶段竣事后转而用在推理事情。这类做法的思绪是,假如数据中央可以或许使用统一套硬件既举行练习又举行推理,那末由此孕育发生的总收入将有助在抵消最初的装备投资及连续的电力耗损。从理论上看,这一逻辑是建立的:将投资成天职摊到多种运营勾当中,可以减轻财政指标的压力,从而可能晋升盈利程度。
然而,实际环境远比理论繁杂。依靠人工智能练习装备举行推理的做法,给数据中央带来了不容轻忽的限定,如今这些问题已经没法再被纰漏。
真实的运营成本首恶:电力耗损只管练习装备是一项要害的本钱投入,但于数据中央中,电力耗损才是运营成本的重要构成部门,特别是于练习及推理历程中。高机能GPU及加快器于运行时孕育发生年夜量热量,需要强盛的冷却体系来维持,这不仅致使电费激增,还有给电力举措措施带来压力。纵然采用了尖真个冷却技能及节能办法,年夜范围运行人工智能的电力需求依旧难以有用节制。
当数据中央利用高功率练习装备履行永劫间的推理使命时,问题愈发现显。与凡是为突发性且可能间歇性举行的练习差别,推理使命是连续性的,由于模子需要处置惩罚及时数据流。连续的事情负载象征着,这些高容量体系需要永劫间靠近满负荷运行,从而致使运营成本远超预期。
隐蔽的运营成本首恶:延迟于硬件处置惩罚范畴,延迟是一个常被纰漏却具备庞大影响的因素。延迟指的是从倡议查询到得到相应之间的时间距离。于呆板进修的练习阶段,延迟通常为可以容忍的,但于推理阶段,环境则彻底差别。于这个环节中,即即是微小的延迟也可能激发连锁反映。假如相应时间跨越几秒钟,就可能致使用户介入度降落,侵害用户体验,并违反及时处置惩罚的目的。
为了降服延迟问题,工程师可能会思量增长处置惩罚器数目以实现并行处置惩罚,从而晋升总体处置惩罚能力。乍看之下,这类要领好像行之有用;究竟,增长处置惩罚器能直接晋升处置惩罚速率。但现实上,这个问题远比想象中繁杂。增长处置惩罚器确凿可以或许提高机能,但这暗地里的价钱也是巨年夜的:数据中央运营方的本钱支出及运营支出将会急剧增长。扩充硬件资源犹如添柴加火,虽然可能暂时减缓延迟问题,但也可能激发成本急剧增长,以至在难以连续的水平。
成本的增长不仅表现于早期的投资上,还有会致使一样平常运营预算的上升,进而增长电力耗损、维护成本及资源治理的需求。对于在浩繁企业而言,这类做法可能会酿成一项极重繁重的运营承担,其带来的负面影响可能跨越了削减延迟所带来的收益。面临这一挑战,企业需要采取更为高效及可连续的计谋来解决延迟问题,好比经由过程专门的硬件优化、更智能的数据处置惩罚架构,或者是使用那些能简化及时相应又不会凌驾预算的技能手腕。
装备折旧及寿命挑战当前摊销计谋的一个重要问题于在,它预设了人工智能练习装备于转为推理使命利用时,可以或许连续充足长的时间来完玉成部折旧。只管这些装备确凿具有强盛的处置惩罚能力,但永劫间持续利用所酿成的磨损及损耗可能会很是严峻。
练习阶段被极限利用的人工智能硬件,于连续履行推理使命时的耐用性可能不如预期。一个不容轻忽的实际是,很多数据中央可能不能不于这些体系完成折旧以前就举行改换,这不仅会致使本钱提早刊出,还有会带来分外的财政承担。
追求可连续解决方案面临这些挑战,行业必需摸索可连续的解决之道,于本钱支出与运营支出之间追求均衡,确保对于人工智能基础举措措施的投资不仅于短时间内合理,久远来看也能连结耐用与高效。此时,那些着眼在持久不变性及能源效率的立异设计便显患上尤为主要。
一种可能的解决方案源自一个看起来与数据中央其实不相干的行业:汽车财产。汽车级技能持久以来致力在打造耐用、机能不变且高能源效率的产物。差别在传统数据中央硬件,汽车级体系被设计成可以或许抵御卑劣情况及持久持续运行的磨练,且其机能不会较着阑珊。这类坚韧特征象征着更长的利用寿命及降低的改换频次,这于思量装备摊销时成为一个至关主要的上风。
采用汽车级要领一家最初办事在汽车行业的立异企业,开发了一项技能,可能会重塑数据中央于人工智能计谋上的制订方式。该技能采用为汽车行业量身定制的严酷质量及耐用性尺度,汽车级解决方案是以具有了与数据中央需求高度匹配的多个上风。
起首,这些体系于设计上看重低功耗。与很多高功耗的高端GPU及人工智能加快器差别,这项技能于连结卓着机能的同时,优先思量了能源效率。这有用解决了于年夜量运行人工智能模子时电力耗损所带来的重要运营成本问题,从而显著降低了总体的运营成本。
其次,这种解决方案相较在传统人工智能练习硬件,拥有更长的利用寿命。采用汽车级耐用性的装备可以或许抵御连续利用的严苛情况,不容易像传统数据中央硬件那样呈现初期磨损及毁坏。这象征着更长的折旧周期及削减了对于新硬件的本钱投入,从而有用减轻了数据中央运营商的财政压力。
从头思索人工智能计谋人工智能的成长势头不减,支撑其发展的数据中央需求也于不停上升。今朝,将昂贵的练习装备转用在推理使命以分摊成本的计谋,正日趋显露出其短视性,该计谋未能充实思量电力耗损及硬件寿命的现实影响。为防止财政及运营上的不成连续压力,必需对于战略举行调解。
将汽车级技能解决方案融入人工智能基础举措措施计划之中,可以或许带来火急需要的改善。虽然这些体系可能需要于早期从头调解预算以应答较高的本钱支出,但其持久利益 降低能耗、延伸装备利用寿命,以和更为合理的摊销摆设 将远超初始的投资成本。
于数据中央不停鞭策人工智能革命的历程中,行业带领者们必需从头审阅计谋,以应答AI范围化带来的隐性成本。今朝,将练习装备成本经由过程于推理阶段的共用举行摊销的做法,轻忽了要害的运营成本挑战及硬件利用寿命的现实问题。
经由过程采取看重效率及长期性的解决方案,数据中央可以或许为人工智能的将来构建一个越发可连续、更具成本效益的基石。将来的成长路径,不仅要求于AI模子上推陈出新,也要求于支撑AI运行的基础举措措施长进行立异。
本文翻译自国际电子商情姊妹平台EETimes,原文标题:HiddenCostofAI:WhyDataCenterStrategiesNeedaRethink
责编:Clover.li 本文为国际电子商情原创文章,未经授权禁止转载。请尊敬常识产权,背者本司保留究查责任的权力。芯片巨头德州仪器Q1财测表示低迷连续,回应于华推销争议国际电子商情24日讯,被看做“晴雨表”的模仿芯片巨头德州仪器(Texas Instruments Inc.)23日宣布了使人掉望的2025年第一季度盈利猜测,表示工业芯片市场阑珊将连续……还击!上汽、吉祥、比亚迪告状欧盟
中欧汽车商业战第一枪。“赢麻了”!SK海力士宣布史上最强财报
国际电子商情23日讯 韩国科技巨头SK海力士日前发布的2024财年和第四序度财政陈诉显示,公司业务收入达66.1930万亿韩元,业务利润23.4673万亿韩元,净利润19.7969万亿韩元,业务利润率达35%,净利润率30%,均创下汗青新高。这一成就不仅逾越2018年存储器市场繁荣期,还有凸显了SK海力士于AI半导体存储器范畴的强盛竞争力。模组年夜厂u-blox抛却蜂窝物联网营业
该部分拥有200多名员工,估计封闭后将有岗亭撤消。持续15年全世界第一!中国制造2024年成长成绩年夜揭秘
于全世界经济格式深刻调解的配景下,中国制造业依附连续的立异投入及转型进级,再次交出了一份使人瞩目的成就单。2024年,中国制造业于全世界舞台上继承连结领先职位地方,持续15年范围位居全世界第一,揭示出强劲的成长韧性及立异活气。移远通讯实控人仳离,“分手费”超11亿!
总市值最高靠近230亿元,成为本钱市场存眷的“黑马”。特朗普关税威逼下,传三星、LG思量将家电出产“年夜挪移”
特朗普周一正式就任美国新一届总统,并迅速签订了一系列商业政策文件,下令对于中国、加拿年夜及墨西哥等国度及地域睁开商业惯例及钱币政策查询拜访。新的关税政策激发了全世界市场的广泛存眷,特别是对于跨国制造企业的影响……强化嵌入式安全IP,EDA巨头Cadence收购Secure-IC
国际电子商情22日讯 全世界领先的电子设计主动化(EDA)公司Cadence于本地时间周二(1月21日开云kaiyun)于官网公布,已经经就收购嵌入式安全IP平台提供商Secure-IC告竣终极和谈。华为手机重回中国第一!
中国智能手机第四序度销量同比降落3.2%,为2024年独一一个同比下滑的季度。1.6亿元!南芯科技拟现金收购昇生微100%股权
2024年以来,A股市场芯片行业掀起并购热潮。特朗普上任即拔除拜登78项政策:高科技与半导体财产迎来
国际电子商情讯 美东时间2025年1月20日,美国总统唐纳德·特朗普于其就职首日签订了一系列行政令,拔除了前总统拜登当局的78项政策,此中包括对于人工智能的羁系政策。这一行为不仅激发了广泛的政治会商,也对于高科技行业及半导体财产孕育发生了深远影响……罗姆半导体换帅:新任CEO可否力挽狂澜?
国际电子商情21日讯,日本罗姆半导体公司近期宣布了一项主要人事变更决议。这次人事调解被罗姆视为增强治理系统、晋升企业价值的要害举措…… 为不变价格,NANDFlash厂商2025年团体重启减产计谋
按照TrendForce集邦咨询最新研究陈诉指出,NANDFlash财产2025年连续面对需求疲弱、供应多余的两重压力。
开端评估地动未造成台南晶圆厂庞大侵害,不外……据TrendForce集邦咨询查询拜访,1月21日嘉义地域芮氏范围6.4地动对于临近的晶圆代工场、面板厂影响环境,TSMC(台积电)和
非洲智能手机市场的强劲支柱竟然是……从拉各斯到内罗毕,从开罗到约翰内斯堡,线下零售渠道依然长短洲智能手机市场的中坚气力,于绝年夜大都地域孝敬了超
科学家乐成研发新工艺,可于室温下造出有序半导体质料荷兰特文特年夜学科学家开发出一种新工艺,能于室温下制造出晶体布局高度有序的半导体质料。
备货需求不变,1月电视面板价格上涨TrendForce集邦咨询宣布了1月下旬面板报价,2025年1月下旬,电视面板价格上涨;显示器、条记本面板价格持稳。
超600亿元!国度队重拳出击AI国度年夜基金步队之一年夜基金三期再次脱手,巨资结构人工智能(AI)。
突发!中国台湾地域0121地动,晶圆代工场受损环境开端评估按照TrendForce集邦咨询查询拜访1月21日嘉义地域芮氏范围6.4地动对于临近的晶圆代工场、面板厂影响环境,TSMC(台积电
到2029年激光雷达市场产值有望到达53.52亿美元按照Trend按照TrendForce集邦咨询最新《2025红外线感测运用市场与品牌计谋》陈诉,今朝激光雷达(LiDAR)于车用市
投资25.24亿元,MACOM扩建氮化镓晶圆厂1月14日,美国射频厂商MACOM公布拟投资3.45亿美元(折合人平易近币约25.28亿元),对于其位在马萨诸塞州及北卡罗来纳州的
晶圆代工年夜厂开释新旌旗灯号!全世界晶圆代工龙头台积电最新财报亮眼。
半导体年夜厂发生人事变更!继美光及三星两泰半导体厂商发生人事变更以后,近日,英特尔前首席架构师跳槽至高通的动静再次激发业界高度存眷
超11,467亿颗,一季度MLCC供给商出货总量季减3%按照TrendForce集邦咨询最新研究,美国2024年12月非农就业人数及制造业采购司理人指数(PMI)皆优在市场预期,美国
英飞凌于泰国新建后道工场,优化及富厚出产结构英飞凌位在曼谷南部沙没巴干府的新后道厂破土开工,该厂将扩展公司于亚洲的出产结构。
芯耀辉:从传统IP到IP2.0,AI时代国产IP机缘与挑战齐飞2024年,集成电路行业于厘革与机缘中连续成长。面临全世界经济的新常态、技能立异的加快以和市场需求的不停变化
艾睿电子与印尼草创协汇合作,撑持当地科技草创公司雅加达,印尼- 2025年1月14日 - 全世界技能解决方案供给商艾睿电子(Arrow Electronics)与印尼草创协汇合作(STARFIN
【凯新达科技】新年欢聚,共绘年会出色篇章!无畏挑战 共创将来祥龙回顾留名胜,金蛇起舞贺新程。于2025年元旦新年之际,深圳市凯新达科技有限公司(如下简
CES 2025新品:摩尔斯微电子推出Wi-Fi芯片MM8108最新Wi-Fi HaLow片上体系(SoC)为物联网的机能、效率、安全性与多功效性设立新尺度;配套USB网关,轻松实现Wi-
ST与彭水共绘可连续成长新篇章跟着与三安光电的碳化硅合资工场落地重庆,2024年6月,意法半导体与重庆市彭水自治县同步启动了可连续成长互助
【凯新达科技】2025年度游览勾当景点出色报导凯新达科技 自由之旅 征途偕行
超高性价比AI电脑:英伟达NVIDIA Jetson Orin Nano Super真喷鼻!iCEasNVIDIA Jetson Orin™ Nano Super 开发者套件是一款尺寸小巧且机能强盛的超等计较机,从头界说了小型边
TI推出新一代撑持边沿AI的雷达传感器及汽车音频处置惩罚器,改良车内驾德州仪器今日推出了全新的集成式汽车芯片,可以或许帮忙各个价位车辆的驾乘职员,实现更安全、更具沉浸感的驾驶体验
【原厂入驻】飞虹半导表现已经入驻iCEasy商城!广州飞虹半导体科技有限公司建立在广州越秀区,诚信谋划20多年。重要研发、出产、谋划:场效应管、三极管等半
联袂共进,江波龙与电子五地点中山睁开深度交流近日,半导体存储品牌企业江波龙与工业及信息化部电子第五研究所(中国赛宝试验室,如下简称“电子五所”)于江波龙
【原厂入驻】迈巨微电子现已经入驻iCEasy商城!深圳迈巨微电子有限公司深耕锂电池治理芯片范畴,缭绕电池康健及安全,电池电量计较二个焦点技能能力,提供完美的
-开云kaiyun