腾众软件科技有限公司腾众软件科技有限公司

95311怎么转人工服务,95311怎么转人工服务直接通

95311怎么转人工服务,95311怎么转人工服务直接通 新订单12月才能交付!英伟达GPU持续缺货涨价 客户“勒紧裤带”节约使用

  在持续已久的“AI热(rè)潮”中(zhōng),各家争相推(tuī)出的(de)大模型、AI应用,都进一步(bù)推升(shēng)了对算力狂热(rè)的需求。本周已有报道指(zhǐ)出英伟达后续对AI顶级规格(gé)芯片需(xū)求明(míng)显看增(zēng),紧急向台积电追加预订先(xiān)进封装(zhuāng)产(chǎn)能。

  需求飙涨下,英伟达GPU价(jià)格自然也是水涨(zhǎng)船高。据集(jí)微网消息,有代(dà95311怎么转人工服务,95311怎么转人工服务直接通i)理(lǐ)商透露(lù),英伟达A100价格从去年12月(yuè)开始上(shàng)涨,截(jié)至今年4月上半月,其5个月价格累(lèi)计涨幅达(dá)到37.5%;同期(qī)A800价格累计涨幅达20.0%。

  同(tóng)时,英伟达GPU交货周(zhōu)期也被拉长,之(zhī)前(qián)拿货周期大约为一个月,现在基本都(dōu)需要三个月或更长。甚至,部分新订单(dān)“可能(néng)要(yào)到(dào)12月(yuè)才能交付”。

  供需的巨大鸿沟(gōu)面(miàn)前,在这一情(qíng)形(xíng)之(zhī)下,众(zhòng)多客户也不得不“勒紧腰(yāo)带”。上述文章指出,国内可用于训练AI大模型的A100大约有4万-5万个,供应相当吃紧,一些云服务厂商已严格(gé)限制内(nèi)部使(shǐ)用这些(xiē)先进芯片,以将其(qí)保留至需要强力运算的(de)任务(wù)。

  值得一提的是,类似的事(shì)情在微软内部也(yě)早(zǎo)已发生。3月已有外媒报道(dào)指出,微软内部陷入AI服务(wù)器硬件短缺的窘(jiǒng)境,不(bù)得不(bù)对(duì)AI硬(yìng)件资源采取“配额供给”机制(zhì),限(xiàn)制公(gōng)司内部其他AI工(gōng)具开发团队的资源用量。

  拉长(zhǎng)时间(jiān)线来看,有(yǒu)GPU业内(nèi)人士(shì)指出,实际上从去年6月(yuè)起(qǐ),英伟(wěi)达就已宣布上调(diào)A100价格,涨幅20%左右,渠道商在加紧囤货。至于英伟达(dá)A800,在ChatGPT火爆之前就已出现涨价,但(dàn)反(fǎn)映到市(shì)场(chǎng)则有一定(dìng)的滞后(hòu)性,赶上ChatGPT爆火这(zhè)一时间点,更放大了这一(yī)现象。

  “英伟达GPU涨价与ChatGPT有一定的关联性,且(qiě)交(jiāo)货(huò)周期也受到了连(lián)带的(de)影响(xiǎng),导致市场(chǎng)上出(chū)现了众多炒卡的行为。”

  此外,在海外电商平台上,英伟达(dá)新旗舰级GPU H100的价格在4月中旬就(jiù)已炒(chǎo)到了超过4万美元(yuán)。

  随着如今各家科技巨头争相推出自家大模(mó)型,GPU需求(qiú)量仍(réng)在持续攀升。OpenAI指出,AI大(dà)模型要(yào)持续取得突破(pò),所需要消耗(hào)的(de)计算(suàn)资源每3~4个月就要翻一倍,资金也需(xū)要通过(guò)指(zhǐ)数(shù)级增长(zhǎng)获(huò)得匹配。

  据财通证券测算(suàn),2023/2024/2025年大模型有望(wàng)为(wèi)GPU市场贡(gòng)献69.88/166.2/209.95亿(yì)美元增(zēng)量。

  其中在训练(liàn)端(duān),以目前主流的训练(liàn)端GPU英(yīng)伟达A100测(cè)算(suàn),假设ASP为1万美元,2023/2024/2025年全球训(xùn)练端GPU需求市场规模预计分(fēn)别为0.74/2.00/4.07亿美(měi)元(yuán);

  在推理端,以(yǐ)目前(qián)英伟(wěi)达用于推理端(duān)计(jì)算的A10测95311怎么转人工服务,95311怎么转人工服务直接通(cè)算(suàn),假设ASP为2800美元(yuán),2023/2024/2025年(nián)全球推理端GPU需求(qiú)市场规(guī)模预(yù)计(jì)分别为69.14/164.2/205.88亿美元。

  业内(nèi)人士也表示,AI大模型(xíng)训(xùn)练(liàn)成(chéng)本之一(yī)是(shì)基础算力,大概需要384-3000块左右(yòu)的A100才能基本满足要求(qiú),如果价格持续(xù)上涨,无论是互联网、AI大厂、还是(shì)创(chuàng)业新贵,要追加的投(tóu)入都可(kě)能(néng)远超当初。

未经允许不得转载:腾众软件科技有限公司 95311怎么转人工服务,95311怎么转人工服务直接通

评论

5+2=