[Iċ-Ċina, Shenzhen, 14 ta' Lulju, 2023] Illum, Huawei żvelat is-soluzzjoni l-ġdida tagħha għall-ħażna tal-AI għall-era ta 'mudelli fuq skala kbira, li tipprovdi soluzzjonijiet ta' ħażna ottimali għal taħriġ bażiku ta 'mudelli, taħriġ ta' mudell speċifiku għall-industrija, u inferenza f'xenarji segmentati, b'hekk toħroġ kapaċitajiet AI ġodda.
Fl-iżvilupp u l-implimentazzjoni ta 'applikazzjonijiet ta' mudelli fuq skala kbira, l-intrapriżi jiffaċċjaw erba 'sfidi ewlenin:
L-ewwelnett, iż-żmien meħtieġ għall-preparazzjoni tad-dejta huwa twil, is-sorsi tad-dejta huma mferrxa, u l-aggregazzjoni hija bil-mod, u tieħu madwar 10 ijiem għall-ipproċessar minn qabel ta 'mijiet ta' terabytes ta 'dejta. It-tieni nett, għal mudelli kbar multi-modali b'settijiet ta 'dejta massivi ta' test u immaġni, il-veloċità attwali tat-tagħbija għal fajls żgħar massivi hija inqas minn 100MB/s, li tirriżulta f'effiċjenza baxxa għat-tagħbija tas-sett tat-taħriġ. It-tielet, aġġustamenti frekwenti tal-parametri għal mudelli kbar, flimkien ma 'pjattaformi ta' taħriġ instabbli, jikkawżaw interruzzjonijiet tat-taħriġ bejn wieħed u ieħor kull jumejn, li jeħtieġu li l-mekkaniżmu tal-Checkpoint jerġa 'jibda t-taħriġ, bl-irkupru jieħu f'idejh ġurnata. Fl-aħħar nett, limiti għoljin ta 'implimentazzjoni għal mudelli kbar, setup ta' sistema kumpless, sfidi ta 'skedar tar-riżorsi, u utilizzazzjoni tar-riżorsi tal-GPU ħafna drabi taħt l-40%.
Huawei qed tallinja mat-tendenza tal-iżvilupp tal-AI fl-era tal-mudelli fuq skala kbira, u toffri soluzzjonijiet imfassla għal industriji u xenarji differenti. Jintroduċi l-OceanStor A310 Deep Learning Data Lake Storage u l-Appliance Super-Converged Taħriġ/Inferenza FusionCube A3000. L-OceanStor A310 Deep Learning Data Lake Storage timmira kemm għal xenarji ta’ data lake ta’ mudell kbir bażiku kif ukoll fuq livell industrijali, u tikseb ġestjoni komprensiva tad-dejta AI mill-aggregazzjoni tad-dejta, proċessar minn qabel għal taħriġ tal-mudelli, u applikazzjonijiet ta’ inferenza. L-OceanStor A310, f'rack wieħed 5U, jappoġġja bandwidth ta '400GB/s li jwassal fl-industrija u sa 12-il miljun IOPS, bi skalabbiltà lineari sa 4096 nodi, li tippermetti komunikazzjoni trans-protokoll mingħajr saldatura. Is-Sistema Globali tal-Fajls (GFS) tiffaċilita l-insiġ intelliġenti tad-dejta bejn ir-reġjuni, u tissimplifika l-proċessi tal-aggregazzjoni tad-dejta. Il-kompjuters tal-ħażna qrib jirrealizzaw preproċessar qrib id-dejta, inaqqas il-moviment tad-dejta, u jtejjeb l-effiċjenza tal-ipproċessar minn qabel bi 30%.
L-Appliance Super-Converged Taħriġ/Inferenza FusionCube A3000, iddisinjat għal xenarji ta’ taħriġ/inferenza ta’ mudelli kbar fil-livell tal-industrija, jaħseb għal applikazzjonijiet li jinvolvu mudelli b’biljuni ta’ parametri. Tintegra nodi ta 'ħażna ta' prestazzjoni għolja OceanStor A300, nodi ta 'taħriġ/inferenza, tagħmir ta' swiċċjar, softwer ta 'pjattaforma AI, u softwer ta' ġestjoni u tħaddim, u jipprovdi sħab mudell kbar b'esperjenza ta 'skjerament plug-and-play għal kunsinna ta' waqfa waħda. Lest biex jintuża, jista 'jiġi skjerat fi żmien sagħtejn. Kemm in-nodi ta 'taħriġ/inferenza kif ukoll ta' ħażna jistgħu jiġu estiżi b'mod indipendenti u orizzontalment biex jaqblu ma 'diversi rekwiżiti ta' skala tal-mudell. Sadanittant, FusionCube A3000 juża kontenituri ta 'prestazzjoni għolja biex jippermetti taħriġ ta' mudelli multipli u kompiti ta 'inferenza biex jaqsmu l-GPUs, u jżidu l-utilizzazzjoni tar-riżorsi minn 40% għal aktar minn 70%. FusionCube A3000 jappoġġa żewġ mudelli ta 'negozju flessibbli: Huawei Ascend One-Stop Solution u s-soluzzjoni one-stop ta' sieħeb ta 'parti terza b'softwer tal-kompjuter miftuħ, netwerking, u pjattaforma AI.
Il-President ta 'Huawei tal-Linja tal-Prodotti tal-Ħażna tad-Data, Zhou Yuefeng, iddikjara, "Fl-era ta' mudelli fuq skala kbira, id-dejta tiddetermina l-għoli tal-intelliġenza tal-AI. Bħala l-ġarrier tad-dejta, il-ħażna tad-dejta ssir l-infrastruttura fundamentali ewlenija għall-mudelli tal-IA fuq skala kbira. Il-Ħżin tad-Data ta’ Huawei se jkompli jinnova, billi jipprovdi soluzzjonijiet u prodotti diversifikati għall-era ta’ mudelli kbar ta’ AI, u jikkollabora ma’ sħab biex imexxi l-emanċipazzjoni tal-AI f’firxa wiesgħa ta’ industriji.”
Ħin tal-post: Awissu-01-2023
