整合

安裝:

安裝必要的套件：

pip install strands-agents strands-agents-tools

執行此範例：

import asyncio
from strands.experimental.bidi.agent import BidiAgent
from strands.experimental.bidi.io.audio import BidiAudioIO
from strands.experimental.bidi.io.text import BidiTextIO
from strands.experimental.bidi.models.novasonic import BidiNovaSonicModel
from strands_tools import calculator

async def main():
    """Test the BidirectionalAgent API."""
    # Audio and Text input/output utility
    audio_io = BidiAudioIO(audio_config={})
    text_io = BidiTextIO()
    
    # Nova Sonic model
    model = BidiNovaSonicModel(region="us-east-1")
    
    async with BidiAgent(model=model, tools=[calculator]) as agent:
        print("New BidiAgent Experience")
        print("Try asking: 'What is 25 times 8?' or 'Calculate the square root of 144'")
        
        await agent.run(
            inputs=[audio_io.input()],
            outputs=[audio_io.output(), text_io.output()]
        )

if __name__ == "__main__":
    try:
        asyncio.run(main())
    except KeyboardInterrupt:
        print("\nConversation ended by user")
    except Exception as e:
        print(f"Error: {e}")
        import traceback
        traceback.print_exc()

from strands.experimental.bidi.agent import BidiAgent 
from strands.experimental.bidi.io.audio import BidiAudioIO 
from strands.experimental.bidi.io.text import BidiTextIO 
from strands.experimental.bidi.models.novasonic import BidiNovaSonicModel 
from strands_tools import calculator

audio_io = BidiAudioIO(audio_config={}) 
text_io = BidiTextIO()

BidiAudioIO 會管理麥克風輸入和喇叭輸出，而 BidiTextIO 會在主控台中顯示文字轉錄和回應。

model = BidiNovaSonicModel(region="us-east-1")

建立 Nova Sonic 模型執行個體。區域參數指定 AWS 部署模型的區域。

async with BidiAgent(model=model, tools=[calculator]) as agent: 
    await agent.run( 
        inputs=[audio_io.input()],  
        outputs=[audio_io.output(), text_io.output()] 
    )

代理程式的建立方式如下：

Amazon Bedrock AgentCore 提供受管執行期環境，用於部署具有企業級安全性和可擴展性的 Nova 2 Sonic 應用程式。AgentCore 透過處理基礎設施、身分驗證和 WebSocket 連線，簡化即時語音 AI 應用程式的部署。

主要功能：

架構顯示用戶端應用程式如何使用 SigV4 身分驗證透過 WebSocket 連線至 AgentCore 執行期。容器化環境包含您的 WebSocket 伺服器、應用程式邏輯和 Nova Sonic 用戶端，所有用戶端都透過雙向串流 API 與 Nova Sonic 通訊。

優點：

使用案例

如需使用 AgentCore 部署 Nova Sonic 的詳細文件，請參閱 Amazon Bedrock AgentCore 文件。

LiveKit 是用於建置即時音訊和視訊應用程式的開放原始碼平台。與 Amazon Nova 2 Sonic 整合可讓開發人員建置對話語音界面，而無需管理複雜的音訊管道或訊號通訊協定。

如需詳細的實作範例和程式碼範例，請參閱 LiveKit AWS 整合文件。

運作方式：

Pipecat 是建置語音和多模式對話式 AI 應用程式的架構。它提供模組化的管道型架構，可協調多個元件，以使用 Amazon Nova Sonic 和其他 AWS 服務建立智慧型語音應用程式。

如需詳細的實作範例和程式碼範例，請參閱 PipeCat AWS 整合文件。

主要功能：

架構包括：

透過 AWS CDK （雲端開發套件） 將 Nova Sonic 應用程式部署至 AWS 使用基礎設施做為程式碼。此方法提供可重複、版本控制的部署，並內建最佳實務。

部署選項

如需使用 AWS CDK 部署 Nova Sonic 的完整生產就緒範例，請參閱 GitHub Speech-to-Speech CDK 範例。此範例將示範：

多代理程式架構是廣泛使用的模式，用於設計處理複雜任務的 AI 助理。在採用 Nova 2 Sonic 技術的語音助理中，此架構會協調多個專門的代理程式，其中每個代理程式都會獨立運作，以啟用平行處理、模組化設計和可擴展的解決方案。

Nova Sonic 做為多代理程式系統中的協調器，執行兩個關鍵函數：

對話流程管理：確保在繼續對話的下一個步驟之前收集所有必要資訊。

目的分類：分析使用者查詢，並將其路由至適當的專業子代理程式。

上圖顯示使用多客服人員架構的銀行語音助理。對話流程從問候和收集使用者名稱開始，然後透過專業子代理處理與銀行或抵押貸款相關的查詢。

對話流程範例：

雖然此範例示範使用部署在 Amazon Bedrock AgentCore 上的 Strands Agents 架構的子代理程式，但架構具有彈性。您可以選擇：

優點：

如需更多詳細資訊和程式碼範例，請參閱此部落格。

如需實作範例，請參閱 Nova Sonic Workshop Multi-Agent Lab。

Amazon Nova 2 Sonic 與電話服務供應商整合，讓採用 AI 技術的語音應用程式可以透過電話進行存取。本指南涵蓋與 Twilio、Vonage 和其他以 SIP 為基礎的系統整合，用於建置聯絡中心解決方案和語音客服人員。

Twilio：具有可程式設計語音和媒體串流功能的雲端通訊平台。

Vonage：具有語音、WebSocket 音訊串流和 SIP 連線能力的全域通訊 APIs。

AWS 提供全方位的範例實作，在具有即時分析和電話整合的聯絡中心環境中示範 Nova Sonic。

儲存庫：使用電話的範例音波聯絡中心