Blog

蘋果驚喜加入開源AI社區,發布多模態語言模型「Ferret」

Blog Image
蘋果驚喜加入開源AI社區,發布多模態語言模型「Ferret」

December 25, 2023

重點摘要:
  1. 蘋果公司與哥倫比亞大學於2023年10月低調發布了一個開源的多模態大型語言模型「Ferret」,原本僅供研究用途,但隨著對於本地大型語言模型(LLM)的興趣增長,Ferret的關注度也在提升。
  2. 蘋果最近發表了兩篇新研究論文,這些研究可能使視覺體驗更沉浸,並允許複雜的AI系統在消費者設備上運行,如iPhone和iPad。這被視為是蘋果對影響力大的AI研究的承諾,並鞏固了其在多模態AI領域的領先地位。
  3. 蘋果的這一舉動令業界驚訝,因為該公司一直被認為是「封閉的花園」。此外,這次發布可能標誌著蘋果與像ChatGPT這樣的模型競爭,以及對於其產品開源和本地化的ML發展。



新聞內文:
在2023年10月,蘋果公司和哥倫比亞大學的研究人員低調地發布了一個開源的多模態大型語言模型(LLM),名為「Ferret」。當時,這項發布包括了代碼和權重,但僅限於研究用途,而非商業授權,並未受到太多關注。但現在情況可能正在改變:隨著開源模型Mistral近期成為頭條新聞,以及Gooogle的「Gemini」模型即將登陸Pixel Pro,並最終應用於Android,關於在小型設備上部署本地LLM的討論也日益增加。

這種討論最近因為蘋果宣布在iPhone上部署LLM取得了關鍵突破而增加:該公司發布了兩篇新的研究論文,介紹了3D虛擬人物和高效語言模型推理的新技術。這些進展被讚譽為可能使視覺體驗更加沉浸,並允許複雜的AI系統在消費者設備上運行,例如iPhone和iPad。

許多AI界人士在稍後注意到Ferret的發布後,慶祝蘋果意外進入開源LLM領域,尤其是因為蘋果一直被認為是一個「封閉的花園」。

今天早上,一位歐洲非營利組織負責人Bart de Witte在X上發貼文說:「我不知怎的錯過了這個,蘋果在10月份加入了開源AI社區。Ferret的推出證明了蘋果對有影響力的AI研究的承諾,鞏固了它在多模態AI領域的領先地位...ps: 我期待有一天本地大型語言模型(LLLM)在我iPhone上以重新設計的iOS的一個整合服務運行」。



德國AI音樂藝術家兼顧問Tristan Behrens也發表了意見。他在LinkedIn上寫道:「明天就是聖誕節了,但你有沒有意識到蘋果最近發布了一個多模態大型語言模型?包括代碼和權重?」

技術博主兼VentureBeat撰稿人Ben Dickson在LinkedIn上寫道:「在2023年你最意想不到的AI發展是什麼?對我來說,是蘋果發布開源LLM(儘管有非商業許可)」。他補充說,蘋果「長期以來一直是封閉系統、封閉花園開發、保密、防彈的保密協議、零詳細訊息的典範,並對其產品的每一個部分進行專利申請」。

但他繼續說,「回過頭來看,蘋果(如同Meta)進入開源LLM市場是有意義的。要與像ChatGPT這樣的模型競爭,你不是需要是一個超大規模運算者,就是需要與一個合作夥伴合作。蘋果可能擁有大量資源,但其基礎設施並不是為大規模服務LLM而建。替代方案將是依賴像微軟或Google(都是死對頭)這
樣的雲端服務提供商,或者開始發布自己的開源模型,就像Meta那樣」。

有趣的是,蘋果關於開源和本地ML發展的新聞正值Anthropic和OpenAI據報導正在談判大規模新融資,以支持他們的專有LLM開發努力之際。路透社週三報導稱,Anthropic正在與Menlo Ventures談判籌集7.5億美元,而彭博社昨天報導稱,OpenAI「正在就以1千億美元或以上的估值進行新一輪融資的早期討論」。

新聞原址: https://venturebeat.com/ai/apple-quietly-released-an-open-source-multimodal-llm-in-october/