新聞視界時報
產業動態

蘋果推出兩款開源AI模型,迎接新一輪競爭!

2024/07/23

蘋果推出兩款開源AI模型,迎接新一輪競爭!

新聞視界時報 記者 李翌淳 整理報導

蘋果近期宣布推出兩款小規模開源人工智慧模型,分別擁有69億組和14億組參數。

這些模型隸屬於「DCLM」(DataComp for Language Models)發展項目,旨在與Mistral AI、Meta的Llama 3、Google的Gemma等競爭對手抗衡。

DCLM模型亮相

蘋果機器學習研究團隊的科學家Vaishaal Shankar在「X」平台上介紹了這兩款模型。

69億組參數版本基於OpenLM框架,使用2.5兆個詞元(tokens)進行訓練,支持前後文長度各2K組詞元。

在大規模多任務語言理解(MMLU, Massive Multitask Language Understanding)測試中,該模型取得了63.7%的成績。

超過了Mistral-7B-v0.3的62.7%,並接近Meta Llama3 8B的66.2%和Google Gemma的64.3%。

卓越性能與效率

除了性能表現,這些模型在運算效率上也有優勢。

69億組參數模型以更少的算力完成了相關測試,展示了蘋果在開源AI模型方面的強大實力。

{{AD21}}

與Toyota合作的14億組參數模型

14億組參數版本的模型由蘋果與Toyota研究團隊共同訓練,使用了2.6兆組詞元數量進行訓練。

在MMLU測試中,這個模型達到了41.9%的成績,超過了微軟Phi-1.5B的35.9%。

開源模型的新標杆

Vaishaal Shankar特別強調,「DCLM」模型是真正形式上的開源模型,這不僅提升了AI模型的透明度,也促進了研究社群的共同進步。

迎接AI發展新時代

蘋果的這一舉動不僅展示了其在AI領域的實力,也預示著未來更多創新和合作的可能性。

隨著這些開源模型的推出,蘋果將在AI技術的競爭中佔據更有利的位置,並為整個產業帶來更多的可能性和機遇。

讓我們期待這些模型在實際應用中的精彩表現,並見證AI技術的蓬勃發展!

 

你可能也想看

投資理財

迎戰轉型與電價壓力!屏東縣府舉辦住商服務業 ESCO 推廣說明會

為響應2050淨零轉型並協助住商部門降低用電成本。屏東縣政府於7月14日舉辦「屏東縣住商服務業ESCO推廣說明會」。邀請金屬工業研究發展中心、相關領域專家學者及節能成功案例分享實務經驗。

投資理財

屏東城市外交再添成果,周春米接見日本山口縣議會訪團,雙方共商農業、觀光及科技交流

日本山口縣「日台友好促進山口縣議會議員連盟」會長島田教明今(13)日率團拜會屏東縣政府。屏東縣雖近期正全力投入豪雨及風災復原工作,屏東縣長周春米仍特別調整行程接見。

投資理財

桃園智慧產業學院成果亮眼,攜手竹竹苗打造AI人才與智慧製造新基地

桃園市長張善政日前前往中壢區,出席「桃園市智慧產業學院成果發表暨財團法人成立記者會」。與產官學研各界代表共同見證桃園推動智慧產業轉型的重要成果。現場氣氛熱絡而溫馨,不僅展現桃園在AI、智慧製造與產業升級上的推動能量,也象徵區域產業合作邁向全新階段。

投資理財

日東電工高雄新廠正式啟用,45億元投資深耕前鎮科技產業園區

昨日台灣日東電工股份有限公司於前鎮科技產業園區舉行新廠竣工啟用典禮,現場貴賓雲集,氣氛隆重而溫馨。高雄市長陳其邁、副市長羅達生、臺灣日本關係協會會長謝長廷、經濟部產業園區管理局副局長劉繼傳。

加 LINE