北京——2024年4月19日 亞馬遜云科技宣布，Meta剛剛發(fā)布的兩款Llama 3基礎模型Llama 3 8B和Llama 3 70B現(xiàn)已在Amazon SageMaker JumpStart中提供。這兩款模型是一系列經(jīng)過預訓練和微調(diào)的生成文本模型，上下文長度為8k，能夠支持廣泛的用例，并在推理、代碼生成和指令跟隨等方面有所改進?？蛻艨梢栽贏mazon SageMaker JumpStart中輕松發(fā)現(xiàn)、部署Llama 3基礎模型，并運行推理。
Llama 3提供兩種參數(shù)大小的模型——8B和70B，上下文長度為8k，能夠支持廣泛的用例。Llama 3使用了僅含解碼器的Transformer架構(gòu)，以及高達128k規(guī)模的新型分詞器，極大提升了模型的性能。此外，Meta改進的訓練后處理程序大幅降低了誤拒率，提高了模型響應的一致性和多樣性。
Amazon SageMaker JumpStart提供預訓練的模型、內(nèi)置算法和預構(gòu)建的解決方案，幫助客戶快速開始機器學習項目。Amazon SageMaker JumpStart能夠幫助客戶從廣泛的公開可用基礎模型中進行選擇，并將基礎模型部署到專用的SageMaker實例中，這些實例置于網(wǎng)絡隔離的環(huán)境，并可以使用SageMaker進行模型訓練和部署。
客戶現(xiàn)在可以在Amazon SageMaker Studio中通過幾次點擊或通過SageMaker Python SDK編程方式發(fā)現(xiàn)并部署Llama 3模型，還可以利用SageMaker Pipelines、SageMaker Debugger或容器日志等功能，提升模型性能并實施MLOps控制。此外，該方式部署的模型始終處在亞馬遜云科技的安全環(huán)境下，由客戶的VPC控制，以確保數(shù)據(jù)安全。
Meta Llama 3基礎模型現(xiàn)已在Amazon SageMaker Studio的美東(北弗吉尼亞州)、美東(俄亥俄州)、美西(俄勒岡州)、歐洲(愛爾蘭)和亞太(東京)區(qū)域提供部署和推理服務。
下載文檔
