[Чин, Шенҷен, 14 июли соли 2023] Имрӯз, Huawei ҳалли нави нигаҳдории AI-и худро барои давраи моделҳои калонҳаҷм муаррифӣ кард, ки ҳалли оптималии нигоҳдорӣ барои омӯзиши модели асосӣ, омӯзиши модели мушаххаси соҳа ва хулоса дар сенарияҳои сегментӣ пешниҳод мекунад. кушодани қобилиятҳои нави AI.
Ҳангоми таҳия ва татбиқи барномаҳои модели миқёси калон корхонаҳо бо чор мушкилоти асосӣ рӯ ба рӯ мешаванд:
Аввалан, вақти зарурӣ барои омодасозии додаҳо тӯлонӣ аст, манбаъҳои додаҳо парокандаанд ва ҷамъоварӣ суст аст ва барои коркарди пешакии садҳо терабайт маълумот тақрибан 10 рӯзро мегирад. Сониян, барои моделҳои калони бисёрмодали бо маҷмӯаҳои азими матн ва тасвир, суръати ҷории боркунӣ барои файлҳои хурди азим камтар аз 100 МБ/с аст, ки дар натиҷа самаранокии пасти боркунии маҷмӯи таълим мешавад. Сеюм, танзими зуд-зуд параметрҳо барои моделҳои калон, дар баробари платформаҳои таълимии ноустувор, боиси қатъшавии омӯзишҳо тақрибан дар ҳар 2 рӯз мегардад, ки механизми Checkpoint барои дубора оғоз кардани омӯзиш ва барқароршавӣ зиёда аз як рӯзро талаб мекунад. Ниҳоят, ҳадди баланди татбиқ барои моделҳои калон, насби мураккаби система, мушкилоти банақшагирии захираҳо ва истифодаи захираҳои GPU одатан аз 40% камтар аст.
Huawei ба тамоюли рушди AI дар давраи моделҳои калонҳаҷм мувофиқат карда, қарорҳои барои соҳаҳо ва сенарияҳои гуногун мутобиқшударо пешниҳод мекунад. Он OceanStor A310 Deep Learning Data Storage Lake ва FusionCube A3000 Training/Inference Appliance Super Converged -ро муаррифӣ мекунад. OceanStor A310 Deep Learning Data Lake Storage ҳам сенарияҳои кӯли додаҳои модели калон ва ҳам дар сатҳи саноатро ҳадаф қарор дода, ба идоракунии ҳамаҷонибаи додаҳои AI аз ҷамъкунии маълумот, коркарди пешакӣ то омӯзиши моделҳо ва барномаҳои хулосабарорӣ ноил мегардад. OceanStor A310, дар як рахи ягонаи 5U, маҷрои пешбари 400 ГБ/с ва то 12 миллион IOPS-ро бо миқёси хаттӣ то 4096 гиреҳ дастгирӣ мекунад ва иртиботи бефосила байни протоколҳоро фароҳам меорад. Системаи Глобалии Файл (GFS) ба бофтани интеллектуалии додаҳо дар саросари минтақаҳо мусоидат намуда, равандҳои ҷамъкунии маълумотро ба тартиб медарорад. Компютерҳои наздики анбор коркарди пешакии додаҳоро амалӣ мегардонад, ҳаракати маълумотро коҳиш медиҳад ва самаранокии коркарди пешакиро то 30% беҳтар мекунад.
Таҷҳизоти омӯзишии FusionCube A3000 Super-Converged Training/Inference, ки барои омӯзиши модели/сенарияҳои баррасишавандаи сатҳи саноат тарҳрезӣ шудааст, ба замимаҳои марбут ба моделҳои дорои миллиардҳо параметрҳо мувофиқат мекунад. Он гиреҳҳои нигаҳдории баландсифати OceanStor A300, гиреҳҳои омӯзишӣ/интихоботӣ, таҷҳизоти коммутатсионӣ, нармафзори платформаи AI ва нармафзори идоракунӣ ва амалиётро муттаҳид мекунад, ки ба шарикони бузурги модел таҷрибаи густариши васл ва бозӣ барои таҳвили яквақта фароҳам меорад. Ба истифода омода, он метавонад дар давоми 2 соат ҷойгир карда шавад. Ҳарду гиреҳҳои таълимӣ/интихоботӣ ва нигоҳдорӣ метавонанд мустақилона ва ба таври уфуқӣ васеъ карда шаванд, то ба талаботҳои гуногуни миқёси модел мувофиқат кунанд. Дар ҳамин ҳол, FusionCube A3000 контейнерҳои баландсифатро истифода мебарад, то ба омӯзиши моделҳои сершумор ва вазифаҳои хулосабарорӣ барои мубодилаи GPU-ҳо имкон диҳад, ки истифодаи захираҳоро аз 40% то 70% афзоиш диҳад. FusionCube A3000 ду модели чандири тиҷоратиро дастгирӣ мекунад: Huawei Ascend One-Stop Solution ва ҳалли яктарафаи шарики сеюм бо компютерҳои кушод, шабакавӣ ва нармафзори платформаи AI.
Президенти ширкати Huawei оид ба нигоҳдории маълумот Чжоу Юэфэн изҳор дошт, ки “Дар давраи моделҳои калонҳаҷм, маълумот баландии иктишофии сунъиро муайян мекунад. Ҳамчун интиқолдиҳандаи маълумот, нигоҳдории маълумот инфрасохтори калидии бунёдии моделҳои миқёси AI мегардад. Huawei Data Storage инноватсияро идома дода, қарорҳо ва маҳсулоти диверсификатсияшуда барои давраи моделҳои бузурги AI пешниҳод мекунад ва бо шарикон барои таҳкими тавонмандсозии AI дар доираи васеи соҳаҳо ҳамкорӣ мекунад."
Вақти фиристодан: 01-01-2023
