モデル評価ノートブックのチュートリアル

プロンプトのステレオタイプ化のために JumpStart モデルを評価する方法。

Amazon Bedrock モデルを評価してテキスト要約の精度を評価する方法。

bedrock-claude-factual-knowledge.ipnyb – Amazon Bedrock でホストされている Anthropic Claude 2 モデルを評価して、事実的な知識を得ます。

byo-model-outputs.ipynb – モデルに推論リクエストを送信する代わりに独自のモデル出力をもたらす事実上の知識 JumpStart を得るために、 でホストされている Falcon 7b モデルを評価します。

custom_model_runner_chat_gpt.ipnyb – でホストされているカスタムChatGPT 3.5モデルHugging Faceを評価して事実関係を把握します。