モデル評価の開始方法 - Amazon Bedrock

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

モデル評価の開始方法

自動モデル評価ジョブ、またはヒューマンワーカーによるモデル評価ジョブのいずれかを作成できます。モデル評価ジョブを作成すると、使用するモデル、モデルの推論パラメーター、モデルが実行しようとするタスクのタイプ、およびジョブで使用されるプロンプトデータを定義できます。

モデル評価ジョブは、次のタスクタイプをサポートします。
  • 一般的なテキスト生成:テキストプロンプトに応答して、自然な人間の言語を生成します。

  • テキスト要約:プロンプトに入力されたテキストに基づいて要約を生成します。

  • 質問と回答:プロンプト内の質問に対する回答を生成します。

  • 分類: テキストの内容に基づいて、ラベルやスコアなどのカテゴリをテキストに正しく割り当てる。

  • カスタム:指標、説明、評価方法を定義します。

モデル評価ジョブを作成するには、Amazon Bedrock モデルへのアクセスが必要です。Amazon Bedrock ファンデーションモデルを使用したモデル評価ジョブサポート モデルへのアクセスの詳細については、「Amazon Bedrock 基盤モデルへのアクセスを管理する」を参照してください。

以下のトピックの手順では、Amazon Bedrock コンソールを使用してモデル評価ジョブを設定する方法について説明します。

AWSマネージドチームの助けを借りてモデル評価ジョブを作成するには、から [マネージド評価の作成 AWS ] を選択します。 AWS Management Console次に、リクエストフォームにモデル評価ジョブの要件の詳細を記入すると、 AWS チームのメンバーから連絡があります。