Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Inférence à l'aide de l'API Anthropic Messages
L'API Anthropic Messages fournit un accès natif aux modèles Claude à l'aide du format de requête et de réponse Anthropic. Vous pouvez utiliser l'API Messages à la fois sur les bedrock-runtime terminaux bedrock-mantle et sur les terminaux, ce qui vous permet de choisir le style d'authentification et d'intégration adapté à votre application.
| Point de terminaison | URL de base | Cas d'utilisation |
|---|---|---|
bedrock-mantle |
https://bedrock-mantle.{region}.api.aws/anthropic/v1/messages |
Recommandé pour les nouvelles applications. Supporte l'authentification par clé API et. Espaces de travail () Anthropic-compatible |
bedrock-runtime |
https://bedrock-runtime.{region}.amazonaws.com |
À utiliser avec les intégrations AWS SDK existantes et la journalisation des invocations. |
Régions prises en charge
L'API Messages est disponible sur le bedrock-mantle terminal dans toutes les régions qui le prennent en charge bedrock-mantle (voirRégions et points de terminaison pris en charge). Sur le bedrock-runtime terminal, il est disponible dans toutes les régions où les modèles Claude sont disponibles. Consultez Disponibilité régionale par modèle pour plus de détails.
Conditions préalables
Avant d'utiliser l'API Messages, assurez-vous de disposer des éléments suivants :
-
Accès aux modèles : demandez l'accès aux modèles Claude dans la console Amazon Bedrock. Consultez Demander l'accès aux modèles.
-
Authentification : dépend du terminal :
-
bedrock-mantle— Utilisez une clé d'API Amazon Bedrock (voirclés d’API) ou des informations d'identification AWS SIGv4. -
bedrock-runtime— Utilisez les informations d'identification AWS SIGv4 via le AWS SDK (boto3, etc.).
-
-
En-tête de version anthropique — Toutes les demandes nécessitent une version d'API :
-
bedrock-mantle: définianthropic-version: 2023-06-01comme en-tête HTTP. -
bedrock-runtime: défini"anthropic_version": "bedrock-2023-05-31"dans le corps de la demande.
-
Demande de base
Pour envoyer un message de base à un modèle Claude, choisissez l'onglet correspondant à votre méthode préférée, puis suivez les étapes suivantes :
Diffusez les réponses
Pour recevoir les jetons de réponse de manière incrémentielle au fur et à mesure de leur génération, choisissez l'onglet correspondant à votre méthode préférée, puis procédez comme suit :
Fonctionnalités prises en charge
Outre les sections Pensée étendue, Pensée adaptative, Sorties structurées, Compaction, Crédit de secours pour les demandes refusées (version bêta) et messages Mid-conversation système ci-dessus, l'API Messages prend en charge les fonctionnalités suivantes avec les modèles Claude :
-
Invitations système : définissez le comportement du modèle à l'aide d'un
systemparamètre. -
Multi-turn conversations — Passez des
assistantmessagesuseren alternance. -
Utilisation de l'outil : définissez les outils que le modèle peut appeler. Consultez Utilisation d’un outil pour compléter une réponse au modèle Amazon Bedrock.
-
Vision — Envoyez des images dans le
contenttableau à côté du texte. -
Mise en cache rapide : mettez en cache le contexte fréquemment utilisé pour réduire la latence et les coûts.
Pour la référence complète des champs de requête et de réponse de l'API Messages, consultezDemande et réponse.
Comptez les jetons
Pour compter le nombre de jetons d'entrée qu'une demande consommerait avant de l'envoyer pour inférence, utilisez le count_tokens chemin anthropique sur le bedrock-mantle point de terminaison. Il s'agit du seul chemin de comptage de jetons pris en charge pour les modèles Claude qui ne sont pas disponibles bedrock-runtime avec un Region-specific point de terminaison, y compris les modèles Claude qui se lancent uniquement avec l'inférence interrégionale (CRIS). Pour plus de détails et un exemple, reportez-vous à la section Comptez les jetons en utilisant le point de terminaison Bedrock-Mantle.