Blog

歐盟推動AI新創:提供超級計算資源與專業支持

Blog Image
歐盟推動AI新創:提供超級計算資源與專業支持

December 21, 2023

重點摘要:
  1. 歐盟正在支持當地人工智慧新創企業,提供超級計算機資源以訓練AI模型。這項計劃旨在建立「卓越中心」,專門研發可在歐盟超級計算機上運行的AI算法。
  2. 歐盟官員強調,除了提供超級計算機訪問外,還需要提供專業支持,幫助新創企業更好地利用這些資源。這包括教育企業如何有效使用超級計算機和擴展他們的AI算法。
  3. 歐盟計劃將其超級計算資源用於激勵AI新創企業,並將投資專用的AI超級計算機,更加適合人工智慧模型訓練。該計劃還包括建立「人工智慧支持中心」,為中小企業和新創企業提供專門指導。



新聞內文:
歐盟計劃支持本土人工智慧新創企業,為其提供在該區塊超級計算機上進行模型訓練的處理能力。該計劃於去年9月宣布,並於上個月開始實施,法國的「Mistral AI」參與了早期試點階段。不過,一個早期的學習成果是,該計劃需要專門的支持來訓練人工智慧新創企業,使他們能夠更好地利用歐盟的高性能計算。

一位歐盟官員在今天的新聞發布會上表示:「我們看到的一個需求是,不僅要提供訪問,還要提供設施特別是我們在託管中心擁有的技能、知識和經驗。這樣不僅能夠便利使用,還能夠開發使用目前每個超級計算中心和我們機器中可用的最佳架構和計算能力的訓練算法」。

該計劃是為了建立「卓越中心」,以支持專門的人工智慧算法的開發,這些算法可以在歐盟的超級計算機上運行。

人工智慧新創企業更習慣於使用美國超級計算提供者提供的專用計算硬體來訓練其模型,而不是將超級計算機提供的處理能力作為訓練資源。因此,為人工智慧訓練提供高性能計算訪問的計劃正在與支持包裹進行增強,根據歐盟官員的說法,他們在西班牙巴塞羅那超級計算中心的「MareNostrum 5」(一台前超級計算機)的正式啟動前發表了背景。

一位委員會官員說:「我們正在為我們的中小企業發展設施,讓他們能夠理解如何最好地使用超級計算機,如何訪問超級計算機,以及如何平行化他們的算法,以便能夠開發他們的模型」。「從2024年開始,我們預計這種方法將比我們現在擁有的更多」。

他們補充說:「人工智慧現在被認為是聯盟的戰略優先事項」。「隨著人工智慧成為戰略優先事項,與人工智慧法案相鄰,我們正在提供創新能力。或者我們希望為我們的中小企業和新創企業提供一個廣泛的創新窗口,以便他們能夠最好地使用我們的機器和我們正在創造的這個公共基礎設施,這樣他們就可以在開發安全、可信和道德的人工智慧算法方面在國際上競爭」。

一位歐盟官員確認,「人工智慧支持中心」即將到來。他們說,這將為中小企業和新創企業提供「一個特殊的通道」,以獲得幫助,以最大限度地利用歐盟的超級計算資源。他們指出:「我們需要認識到的是,過去十年來,人工智慧社區沒有使用過超級計算機」。「他們對GPU並不陌生,但他們對如何與超級計算機接觸是新用戶,因此我們需要幫助他們」。

「在許多情況下,人工智慧社區來自於對於你能把多少GPU放進一個盒子的廣泛知識。他們在這方面做得很好。但我們在超級計算機上擁有的是許多帶有GPU的盒子,需要一些額外的技能和一些額外的幫助,以便擴展並使用超級計算機的全部潛力」。

該區域過去五年多來對超級計算機的投資大幅增加:將硬體擴展到該地區的八台機器,並計劃透過「兆比特網路」將其相互連接,以創造一個聯合的超級計算資源,該資源將可在雲端中使用,因此對整個歐洲的用戶都可使用。

歐盟的第一台超級計算機也將在未來幾年啟用。一台在德國(可能是明年)和法國(預計在2025年)的第二台機器。正如委員會所說,委員會還將量子計算投資納入計劃,計劃獲得一批量子模擬器,這些模擬器將與超級計算機共同設置,以提供結合兩種類型硬體的混合資源,因此量子計算機可以作為「加速器」用於傳統超級計算機。

正在歐盟的高性能計算硬體上開發的應用包括一個模擬地球生態系統的項目,以更好地模擬氣候變化和天氣系統,稱為地球目的地,以及另一個設計人體數字孿生體的項目。希望能夠透過支持藥物開發甚至實現個性化醫學來推進醫學。使用其超級計算資源來激發人工智慧新創企業特別是在歐盟主席宣布計算機訪問人工智慧模型訓練計劃後成為了一個較新的戰略優先事項。

上個月,該集團還宣布了一個被稱為「大型人工智慧大挑戰」的活動:這是一項針對歐洲人工智慧新創企業的比賽,旨在選擇多達四家有前途的本地新創企業,這些新創企業將獲得共計400萬小時的超級計算資源,以支持基礎模型的開發。委員會還為獲勝者撥出了100萬歐元的獎金池,預計這些獲勝者將通過開放原始碼授權非商業使用發布其開發的模型,或者透過發表其研究成果。

歐盟已經有一個計劃為行業用戶提供超級計算資源的核心小時,這是通過專案申請程序實現的。但是,該集團正在對商業人工智慧進行更多的關注,並提供專門的計劃和資源。看到將其日益增長的超級計算網路變成一個戰略性的動力源,用於擴展「歐洲製造」的通用人工智慧。因此,看起來法國的「Mistral」,一家旨在與美國基礎模型龍頭如OpenAI競爭的人工智慧新創企業,聲稱提供「開放資產」(即使不是完全開源)是歐盟超級計算機使用計劃的早期受益者,這並非偶然。(不過,可能會引起一些質疑,這樣一家剛剛從美國投資者那裡籌集到3.85億歐元的A輪資金,包括Andreessen Horowitz、General Catalyst和Salesforce在內,是歐盟計算免費排隊的首批受益者。但這是對「大型人工智慧」的高層戰略賭注的另一個跡象。)

對於歐盟的「人工智慧超級計算」計劃來說,現在仍處於早期階段,因此尚不清楚專用使用是否會帶來許多模型訓練的好處。

Mistral聯合創辦人兼執行長Arthur Mensch回應評論時表示:「我們在夏季使用了Leonardo(歐盟目前一代超級計算機之一,位於意大利博洛尼亞)進行了一些小型實驗,當時集群正在加速中。這是一次很好的合作,我們提供了很多反饋,並獲得了一些有趣的結果。不過,我們所有的模型都是在我們自己的集群上訓練的」。

很明顯,委員會的希望是,通過將支持引導到人工智慧新創企業,使其能夠利用其在高性能計算方面的投資,並建設出更多將以人工智慧模型訓練為考慮的超級計算機硬體,這將轉化為對當地人工智慧生態系統的競爭優勢,這個生態系統與依賴超級計算的美國人工智慧巨頭相比處於劣勢。

一位委員會官員指出:「由於我們沒有美國人在訓練這些基礎模型時擁有的大型超級計算,所以我們使用我們的超級計算機,並且將開發新一代更多符合人工智慧的超級計算機」。「不僅僅是我們現在擁有的,而且從2024年開始,我們將朝著這個方向發展,並且讓更多的中小企業使用超級計算機來開發這些基礎模型」。

他們補充說,這個計劃將包括購買「更多專用的人工智慧超級計算機,這些將更多基於加速器而不是標準的CPU」。

歐盟的人工智慧支持戰略是否與某些成員國培育國家人工智慧冠軍的雄心相契合或背離。這是我們在最近艱難的討論中聽到很多的事情,以制定該集團的人工智慧法規,法國在其中主導了針對基礎模型的監管豁免推動,這引起了中小企業的批評,這還有待觀察。但Mistral在歐盟超級計算機使用計劃中的早期存在可能表明思維上的一致性。

新聞原址: https://techcrunch.com/2023/12/19/eu-supercomputers-for-ai-training-support/