北京2024年8月22日 /美通社/ -- 近日,浪潮信息AIStation人工智能平臺(tái)助力某省人工智能工程師競(jìng)賽,快速構(gòu)建了一站式部署的競(jìng)賽實(shí)操平臺(tái),實(shí)現(xiàn)了對(duì)計(jì)算資源的動(dòng)態(tài)、高效管理,讓眾多選手同臺(tái)訓(xùn)練大模型,助力高技能"數(shù)字工匠"培養(yǎng)。
本次競(jìng)賽共設(shè)置人工智能理論考試和實(shí)操技能競(jìng)賽兩個(gè)比賽科目,理論考試主要考察計(jì)算機(jī)視覺(jué)、自然語(yǔ)言處理等方面理論知識(shí),實(shí)操技能競(jìng)賽則要求參賽人員在競(jìng)賽平臺(tái)完成數(shù)據(jù)處理、業(yè)務(wù)分析、智能訓(xùn)練、智能系統(tǒng)設(shè)計(jì)等技能操作。
競(jìng)賽籌備過(guò)程中,在實(shí)操競(jìng)賽平臺(tái)構(gòu)建方面遇到較大挑戰(zhàn)。人工智能訓(xùn)練對(duì)算力資源需求大,涉及數(shù)據(jù)處理、開(kāi)發(fā)環(huán)境構(gòu)建、模型訓(xùn)練等多個(gè)環(huán)節(jié),特別是基礎(chǔ)AI開(kāi)發(fā)環(huán)境的構(gòu)建繁瑣且耗時(shí)。如何充分利用算力資源,滿足數(shù)十名參賽人員同時(shí)使用且保證無(wú)故障?如何快速構(gòu)建比賽環(huán)境,并降低競(jìng)賽平臺(tái)的學(xué)習(xí)成本,讓選手專注于比賽?如何保證參賽人員的數(shù)據(jù)安全并防止作弊?這些都是競(jìng)賽組織方需要解決的問(wèn)題。
對(duì)此,浪潮信息AI團(tuán)隊(duì)聯(lián)合競(jìng)賽組織方,借助AIStation將原有算力平臺(tái)快速改造為競(jìng)賽平臺(tái),實(shí)現(xiàn)了精細(xì)化資源管理、快速共享資源、秒級(jí)創(chuàng)建開(kāi)發(fā)環(huán)境、數(shù)據(jù)隔離。AIStation具備顯存隔離功能,最小支持申請(qǐng)1G顯存。競(jìng)賽期間,AIStation助力競(jìng)賽組織方在單節(jié)點(diǎn)8卡服務(wù)器上創(chuàng)建了56個(gè)開(kāi)發(fā)環(huán)境,滿足多人共享算力資源的訴求。
賽前,競(jìng)賽組織方通過(guò)AIStation統(tǒng)一構(gòu)建了PyTorch、TensorFlow等比賽鏡像。競(jìng)賽期間,參賽人員通過(guò)比賽鏡像創(chuàng)建開(kāi)發(fā)環(huán)境,在Jupyter交互工具完成語(yǔ)音數(shù)據(jù)處理、圖像分類、大模型微調(diào)等競(jìng)賽題目。
此外,AIStation通過(guò)精細(xì)化設(shè)置共享目錄權(quán)限,讓參賽人員可同時(shí)獲取競(jìng)賽題目,但無(wú)法共享數(shù)據(jù)到其他目錄,保證數(shù)據(jù)安全,并設(shè)置普通用戶不能同時(shí)登錄平臺(tái),防止作弊。競(jìng)賽結(jié)束后系統(tǒng)管理員可以同時(shí)登錄平臺(tái),快速閱卷。
競(jìng)賽組織方表示:"AIStation支持細(xì)粒度切分AI算力資源,僅用一臺(tái)服務(wù)器,就能支持多人多地競(jìng)賽,節(jié)約了賽事成本。AIStation自定義的AI開(kāi)發(fā)流程,非常簡(jiǎn)單易用,參賽人員可以快速上手,順利完成比賽。此外,AIStation的租戶權(quán)限管理和數(shù)據(jù)安全能力保障了比賽公平公正。"
浪潮信息AIStation是面向企業(yè)級(jí)訓(xùn)練與推理場(chǎng)景開(kāi)發(fā)的人工智能開(kāi)發(fā)平臺(tái),實(shí)現(xiàn)從模型開(kāi)發(fā)、訓(xùn)練、部署、測(cè)試、發(fā)布、服務(wù)的全流程一站式高效交付。通過(guò)統(tǒng)一管理計(jì)算資源、數(shù)據(jù)資源、深度學(xué)習(xí)軟件棧資源,以及支持大模型業(yè)務(wù)全鏈條,AIStation能夠?yàn)槠髽I(yè)用戶提供敏捷高效的一體化AI平臺(tái),加快AI開(kāi)發(fā)應(yīng)用創(chuàng)新落地。