MetaLlama 2模型自訂超參數 - Amazon Bedrock

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

MetaLlama 2模型自訂超參數

MetaLlama 213B 和 70B 型號支援下列模型自訂的超參數。如需詳細資訊,請參閱 自訂模型

有關微調Meta駱駝模型的信息,請參閱 https://ai.meta.com/llama/get-started/#fine-tuning 上的Meta文檔。

注意

epochCount配額是可調的。

超參數 (主控台) 超參數 (API) 定義 Type 下限 最大 預設
Epoch epochCount 整個訓練資料集的重複次數 integer 1 10 5
批次大小 batchSize 更新模型參數前處理的樣本數 integer 1 1 1
學習速率 learningRate 每個批次後更新模型參數的比率 float 5.00E-6 0.1 1.00E-4