新聞視界時報
產業動態

亞馬遜AWS推出Amazon SageMaker JumpStart平台上的Meta Llama 3語言模型

2024/04/21

新聞視界時報/記者林哲宇 報導

亞馬遜AWS推出Amazon SageMaker JumpStart平台上的Meta Llama 3語言模型

新聞視界時報 記者 李翌淳 整理報導

亞馬遜AWS宣布了一項重要消息:Amazon SageMaker JumpStart現已提供Meta Llama 3大型語言模型(LLM),使客戶能夠輕鬆進行部署和推論。

透過Amazon SageMaker JumpStart,客戶可以輕鬆地部署和運行Llama 3模型,無論是8B還是70B參數模型,且兩款模型的上下文長度均達到8k,可廣泛支援推論、程式碼生成和指令跟隨等應用。

AWS的客戶現在可以在美東(北維吉尼亞州)、美東(俄亥俄州)、美西(奧勒岡州)、歐洲(愛爾蘭)和亞太(東京)等區域輕鬆部署Llama 3模型。

他們可以透過點擊或使用SageMaker Python SDK進行部署,並利用SageMaker Pipelines、SageMaker Debugger或容器日誌等功能來提升模型的效能,並實施MLOps控制。

免費架站 - 點擊時代網頁設計,新聞視界時報嚴選推薦,AI 世代限時免費架設專屬網站,立即免費諮詢

{{AD21}}

此外,透過這種方式部署的模型始終處於AWS的安全環境下,由客戶的VPC(Virtual Private Cloud)控制,以確保資料的安全性。

亞馬遜AWS透露,Llama 3採用了僅含解碼器的Transformer架構,並搭配高達128k規模的新型分詞器,從而極大提升了模型的效能。

此外,Meta改進的訓練後處理常式大幅降低了誤拒率,進而提高了模型回應的一致性和多樣性。

值得一提的是,Llama 3的性能甚至在某些測試集項目中超越了Llama 2,即使是在Llama 3的8B參數模型也能勝過Llama 2的70B參數模型。

這項新發展將為客戶提供更多靈活性和效能,並進一步加強AWS在人工智慧領域的領先地位。

 

你可能也想看

創業理財

接案要不要設立 行號與公司的差別

個人接案做到一定規模,常會被問要不要設立。本文說明個人、行號與公司三種身分的差別、責任與稅務的不同、什麼時候該轉換,以及設立前要先準備的事。

創業理財

沒有加盟金的合作模式,在台灣服務業是怎麼運作的:錢從哪裡賺、風險換到誰身上

加盟要先付加盟金、權利金、保證金,公平交易法規定加盟業主須在締約前 10 日以書面揭露這些費用。近年服務業出現「零加盟金」的合作模式——不收前期費用,改用按件抽成、月租系統費或設備供給來營運。這篇拆解傳統加盟的四大費用與法定揭露義務、零加盟金模式錢從哪裡賺、風險如何從「加盟者先付」換成「業者後收」,以及不管哪種模式都該問清楚的三件事。

創業理財

家事服務平台興起之後,接案師傅的收入結構怎麼變:從月薪到「時薪 × 可計費時數 × 平台信用」

打工趣 2025 年調查顯示 73.1% 的家庭對彈性家事服務有興趣;潔客幫 2026 年價格表向客戶收每小時 450 到 650 元、招募頁寫時薪 265 起最高 470。平台把找客戶這件事從接案者手上拿走,代價是價差與規則。這篇拆解平台前後的收入結構、承攬者的法律位置、外送專法為什麼管不到家事平台,以及接案者該問的三個數字。

創業理財

外送、代駕、洗冷氣:零工經濟裡的技術型副業,跟純接單的零工差在哪

主計總處統計 2025 年非典型就業 79.9 萬人、占 6.86%,總量微降但組成在變:外送員三年增為三倍、月薪中位數 3.6 萬、經歷中位數不到一年。這篇用公開數據把外送、代駕與冷氣清洗放在同一張表上比:門檻、單價由誰決定、收入會不會隨時間累積、季節性與風險,以及 2026 年外送專法改變了什麼、沒改變什麼。