View a markdown version of this page

在 Connect Customer 中建立評估表單 - Amazon Connect 客戶

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

在 Connect Customer 中建立評估表單

在 Connect Customer 中,您可以建立許多不同的評估表單。例如,每個業務單位和不同的佇列可能需要不同的評估表單。您也可以建立不同的評估表單來評估客服人員互動,以及與 Lex 機器人或 AI 客服人員的自助式互動。

每個表單可以包含多個部分和問題。

  • 您可以為每個問題和區段指派重,以指出其分數如何影響評估表單的整體分數。

  • 您可以在每個問題上設定自動化,以便使用 對話分析的洞見和指標自動填入這些問題的答案。

本主題說明如何使用 Connect Customer 管理員網站建立表單和設定自動化。若要以程式設計方式建立和管理表單,請參閱 Connect Customer API 參考中的評估動作

開始之前,請確定您擁有必要的安全性設定檔許可。如需詳細資訊,請參閱為效能評估和指導指派安全性設定檔許可

步驟 1:建立具有標題的評估表單

下列步驟說明如何建立或複製評估表單並設定標題。

  1. 使用具有下列安全性設定檔許可的使用者帳戶登入 Connect Customer:分析和最佳化 - 評估表單 - 管理表單定義 - 建立

  2. 選擇分析和最佳化,然後選擇評估表單

  3. 評估表單 頁面上,選擇 建立新表單

    —或—

    選取現有的表單,然後選擇複製

  4. 輸入表單的標題,例如銷售評估,或變更現有的標題。將任何標籤新增至表單以控制對表單的存取 (請參閱設定效能評估的tag-based-access) 完成後,選擇確定

    評估表單頁面,設定表單的標題區段。

    下列索引標籤會出現在評估表單頁面的頂端:

    • 區段和問題。在表單中新增區段、問題和答案。

    • 得分。啟用表單上的得分。您也可以將得分套用至區段或問題。

  5. 建立表單時,隨時選擇 儲存。儲存後,您可以離開頁面並稍後返回表單。

  6. 繼續執行下一個步驟,新增區段和問題。

從另一個執行個體匯入評估表單

您可以從一個 Connect Customer 執行個體 (例如測試執行個體) 匯出評估表單,並將其匯入另一個執行個體 (例如生產執行個體)。

從 JSON 匯入評估表單
  1. 檢視現有的評估表單時,請選擇動作匯出為 JSON

    評估表單頁面,匯出為 json 動作。
  2. 開啟您要匯入此表單的執行個體。

  3. 評估表單頁面上,選擇匯入表單。選擇選擇檔案以上傳先前匯出的 JSON,然後選擇匯入

    評估表單頁面,匯入表單動作。

表單的建立包括問題、指示、答案、評分和自動化組態。匯出的檔案中不存在規則類別和標籤等執行個體特定設定。

使用 AI 從 PDF 匯入評估表單

您可以上傳 PDF,從任何品質管理系統匯入評估表單。Connect Customer 使用 AI 從 PDF 擷取區段、問題、回答選項和評分,並建立您可以檢閱和編輯的評估表單草稿。

從 PDF 匯入評估表單
  1. 評估表單頁面上,選擇匯入表單,然後選擇從 PDF

    下圖顯示具有從 PDF 選項的匯入表單功能表。

    評估表單頁面顯示匯入表單按鈕,其中反白顯示「從 PDF」功能表選項。
  2. 使用 AI 匯入評估表單對話方塊中:

    • 評估表單 PDF – 選擇 PDF 檔案 (最多 2 MB)。

    • 評分方法 – 選擇以點為基礎、以百分比為基礎或未評分

    • 指示 (選用) – 提供引導擷取的內容,例如:「此表格適用於外撥銷售通話。專注於向上銷售問題。」

    使用 AI 匯入評估表單對話方塊,顯示評估表單 PDF、評分方法和指示的欄位。
  3. 選擇匯入。匯入通常會在一分鐘內完成。

  4. 匯入完成後,表單會顯示為草稿。開啟它來檢閱區段、問題和分數是否正確擷取。

  5. 視需要編輯表單,然後啟用。

步驟 2:新增區段和問題

  1. 區段和問題 標籤上,將標題新增至第 1 區段,例如 問候語

    評估表單頁面、區段和佇列標籤。
  2. 選擇 新增問題 以新增問題。

  3. 問題標題 方塊中,輸入將出現在評估表單上的問題。例如,客服人員是否說明自己的名字,並說名在此提供幫助?

    評估表單頁面,問題標題方塊。
  4. 給評估人員的指示方塊中,新增資訊以協助評估人員或生成式 AI 回答問題。

    例如,針對問題,客服人員是否嘗試驗證客戶身分? 您可以提供其他指示,例如,客服人員必須一律詢問客戶其成員 ID 和郵遞區號,才能解決客戶的問題

  5. 問題類型 方塊中,選擇下列其中一項選項以顯示在表單上:

    • 單一選項:評估人員可以從選項清單中進行選擇,例如 良好尚可

    • 多選:評估者可以從選項清單中選擇多個答案,例如客戶有興趣購買的產品清單,或不合規的客服人員行為。

    • 文字欄位:評估人員可以輸入任意格式的文字。

    • 編號:評估人員可以輸入指定範圍內的編號,例如 1-10。

    • 日期:評估者可以選擇日期作為答案。

  6. 繼續執行下一步,以新增答案。

步驟 3:新增答案

  1. 答案 標籤上,新增您要顯示給評估人員的答案選項,例如

  2. 若要新增更多答案,請選擇 新增選項

    下圖顯示 單一選項 問題的答案範例。

    答案索引標籤,「新增選項」命令。

    下圖顯示 數字 問題的答案範圍。

    答案索引標籤,最小值和最大值方塊。
  3. 您也可以將問題標示為選用。這可讓管理員在執行評估時略過問題 (或將其標示為不適用)。

    將問題標示為「不適用」的選項。

步驟 4:有條件地啟用問題

根據其他問題的答案,評估表單可能會有有條件地啟用或停用的問題。例如,您可以將後續問題設定為僅在需要時才在表單中顯示。

  1. 選擇需要後續問題的問題。問題類型必須是單一選擇多重選擇,而且不能是選用問題 (請勿選取選用問題核取方塊)。

    例如,在以下影像中,問題 1.1 是通話的原因是什麼?,且未選取選用問題核取方塊。

    問題類型為 [單一選擇題],且未選取 [選用問題] 核取方塊。
  2. 新增後續問題,然後選取選用問題核取方塊。

    在下圖中,後續問題是問題 1.2 客服人員是否檢查客戶嘗試線上註冊新帳戶?,並選取選用問題核取方塊。

    後續問題,並選取 [選用問題] 核取方塊。
  3. 選擇有條件地啟用問題索引標籤,然後開啟條件式問題。此切換如下圖所示。

    有條件地啟用問題索引標籤,條件式問題切換。
  4. 只有在回答問題 1.1 時,才將後續問題設定為啟用。通話的原因是什麼?新帳戶註冊。下圖顯示這些選項。

    條件式問題是其他問題之一。

    使用此組態,後續問題客服人員是否檢查客戶嘗試線上註冊新帳戶?只有在通話的原因是什麼?的答案是新帳戶註冊時,才會動態新增至表單。在所有其他情況下,此問題不會在表單中呈現,也不需要回答。

  5. 若要驗證此組態是否如預期運作,請使用預覽動作。

建立條件式問題時,請注意以下事項:

  • 當問題是有條件地啟用時,預設會停用。

  • 當問題是有條件地停用時,預設會啟用。

  • 您只能使用單一選取項目或多個選取項目問題來有條件地啟用或停用其他問題。問題不能是選用的。

  • 您可以選擇一或多個答案選項來觸發條件式問題的條件。

注意

如果在有條件啟用的問題上啟用生成式 AI 驅動的自動化,則在該問題上使用生成式 AI 會計入可以使用生成式 AI 在聯絡上評估的問題用量限制。即使問題是有條件地停用,也會計算在內。

如需可使用生成式 AI 在聯絡上自動回答的評估問題數量的預設限制,請參閱 對話分析服務配額

步驟 5:將分數和範圍指派給答案

  1. 前往表單的頂端。選擇得分索引標籤,然後選擇啟用得分

    評估表單頁面,得分索引標籤,啟用得分核取方塊。

    這會啟用整個表單的得分。您也可以使用它來新增數字問題類型的答案範圍。

  2. 針對評分模式,選擇下列其中一個選項:

    • 百分比 – 使用加權區段或問題以百分比計算分數。

    • 點為基礎 – 使用指派給回答選項的點來計算分數。

    重要

    我們建議您建立新的評估表單,而不是在現有表單上切換評分模式。變更評分模式會重設所有先前設定的評分值,而且使用先前評分模式完成的歷史評估無法直接與使用新模式的評估進行比較。

    顯示百分比和點型選項的評分方法區段。

步驟 5.1:以百分比為基礎的評分

如果您選取百分比評分模式,請依照下列步驟來設定評估表單的評分。

  1. 返回 區段與問題 索引標籤。您可以將分數指派給單一選取項目、多重選取項目,以及新增數字問題類型的範圍。

    區段和問題索引標籤,問題特定的得分索引標籤。
  2. 建立 數字 類型問題時,請在 得分 索引標籤上,選擇 新增範圍 以輸入值範圍。指出最差到最好的答案分數。

    下圖顯示 數字 問題類型的範圍和得分範例。

    問題特定的得分索引標籤,答案範圍。
    • 如果客服人員中斷客戶 0 次,他們得到的分數為 10 (最好)。

    • 如果客服人員中斷客戶 1-4 次,他們得到的分數為 5。

    • 如果客服人員中斷客戶 5-10 次,他們得到的分數為 1 (最差)。

  3. 對於多個選擇問題,為每個選項指派分數值 (0-10)。選取多個選項時,總分是所選選項分數的總和,上限為 10。

  4. (選用) 設定答案選項的自動失敗。您可以選擇將自動失敗套用至 區段、 子區段或整個表單。當評估者在評估期間選取此答案時,受影響範圍的分數會設為零。

    自動不合格選項。
  5. (選用) 排除個別問題或整個區段的分數。排除問題或區段時,會自動指派 0% 的權重,類似於不可計分的問題。剩餘的權重會重新分配到其他計分的項目。

    百分比評分模式顯示 0% 權重的排除問題。
  6. 將分數指派給所有答案後,請選擇 儲存

使用多個選擇問題更新現有表單

如果您有現有的評估表單,在新增評分支援之前使用多個選擇問題建立,則在建立新版本或啟用表單時,您將會收到驗證錯誤。若要解決此問題,請依照下列步驟進行:

  1. 開啟評估表單並導覽至多個選擇問題。

  2. 選擇問題的評分索引標籤。

  3. 執行以下任意一項:

    • 將分數值指派給每個答案選項 (0-10),或

    • 選取從得分排除核取方塊,從得分計算中移除問題。

  4. 選擇儲存,然後啟用表單。

步驟 5.2:以點為基礎的評分

如果您選擇以點為基礎的評分模式,請依照下列步驟來設定評估表單的評分。

  1. 返回 區段與問題 索引標籤。針對每個問題,選擇評分索引標籤,並將點值指派給每個答案選項。點值的範圍可以從 0 到 100

    下圖顯示指派給單一選取問題之點值的範例。

    具有點值 (0 到 100) 的單一選取問題分數索引標籤。
  2. 針對數字類型問題,選擇新增範圍以定義答案範圍,並為每個範圍指派點值。

    數值問題的分數索引標籤,其中包含指派給範圍的點值。
  3. 對於多個選擇問題,為每個選項指派點值。選取多個選項時,會加總其點值。或者,選取設定上限以設定問題的最大點值上限。

    具有點值和設定上限選項的多個選取問題分數索引標籤。
  4. (選用) 設定獎勵選項或獎勵問題。透過 獎勵點數,您可以授予額外點數,而不會增加可能的最高分數。

    • 獎勵選項 – 個別答案選項,除了問題的最大基本分數之外,還會授予額外分數。選取獎勵選項時,獲得的點數可能會超過問題的正常上限。只有單一選擇和數值問題才支援獎勵選項。

    • 額外問題 – 未造成最高可能分數的整個問題。從獎勵問題獲得的點數會加到總計中,但問題的最大點數不會計入基本總計中。額外問題不能有自動失敗選項。

    顯示答案選項的獎金核取方塊的評分索引標籤。
    顯示獎勵問題核取方塊的評分索引標籤。
  5. (選用) 設定自動失敗。在評估期間選取自動失敗選項時,受影響範圍的分數會設為零。您可以選擇將自動失敗套用至區段整個表單。單一選取項目、數值和多個選取項目問題都支援自動失敗。獎勵問題和獎勵選項無法自動失敗。

    自動失敗選項與範圍選擇。
  6. (選用) 排除個別問題或整個區段的分數。排除的項目不會計入總分或最高可能分數。

    問題上的從得分中排除核取方塊。
  7. 將分數指派給所有答案後,請選擇 儲存

  8. 當您完成指派分數時,請繼續下一個步驟,以自動回答特定問題,或繼續預覽評估表單

步驟 5.3:指派效能閾值

透過效能閾值,您可以根據分數閾值將評估結果分類為「需要改進」或「超出預期」等類別。以百分比為基礎和以點為基礎評分模式都支援此功能。

您可以在表單層級、區段層級或問題層級設定效能閾值。

效能閾值不會繼承。如果您在表單層級設定閾值,這些閾值僅適用於整體表單分數。區段和問題不會自動繼承表單層級閾值。您必須在要套用閾值的每個層級明確設定閾值。

具有閾值設定的效能類別區段。

步驟 6:啟用自動化評估

使用 Connect Customer,您可以在評估表單中自動回答問題 (例如,客服人員是否遵守問候語指令碼?) 使用對話式分析的洞察和指標。自動化可用於:

  • 協助評估者進行效能評估:評估者在執行評估時,會收到評估表單問題的自動解答。評估人員可以在提交之前覆寫自動化答案。

  • 自動填入和提交評估:管理員可以設定評估表單,以自動回應評估表單中的所有問題,並自動提交高達 100% 的客戶互動評估。評估人員可以編輯並重新提交評估 (如有需要)。

自動化的方式會因您是評估客服人員互動還是自動互動而有所不同 (例如,與 Lex 機器人或 AI 客服人員互動時的自助服務)。您可以在聯絡互動類型下選擇其他設定,以在客服人員和自動互動之間進行選擇。

您需要先在評估表單中針對個別問題設定自動化,以協助評估人員和自動提交評估。Connect Customer 提供三種自動化評估的方式:

  • 聯絡類別單一選擇問題 (例如,客服人員是否正確問候客戶 (是/否)) 和多個選擇問題 (例如,客服人員正確陳述了問候語指令碼的哪些部分?) 可以使用規則定義的聯絡類別自動接聽。如需詳細資訊,請參閱使用 Connect Customer 管理員網站建立對話分析規則

  • 生成式 AI單一選擇題文字欄位問題都可以使用生成式 AI 自動回答。

    如需自動化自助式 (自動化) 互動評估的資訊,請參閱 Connect Customer 中自助式互動的效能評估

  • 指標數值問題 (例如,客戶被保留的最長時間為何?) 可以使用最長保留時間、情緒分數等指標自動回答。

以下是每種問題類型的各個自動化範例。

使用對話分析類別的單一選取問題自動化範例
  • 下圖顯示對話分析已使用標籤 ProperGreeting 分類聯絡人時,評估問題的答案為是。若要將聯絡標記為 ProperGreeting,您必須先設定規則,以偵測在適當的問候語中預期的字詞或片語,例如,客服人員在互動的前 30 秒提到「感謝您的來電」。如需詳細資訊,請參閱自動分類聯絡

    問題區段,具有對話分析類別的自動化索引標籤。

    如需設定聯絡類別的資訊,請參閱 自動分類聯絡

使用聯絡類別的選用單一選取問題自動化範例
  • 下圖顯示選用單一選擇題問題的自動化範例。首先要檢查的是問題是否適用。系統會建立規則,以檢查聯絡是否與開設新帳戶有關。若是如此,聯絡會分類為 CallReasonNewAccountOpening。如果通話不是關於開設新帳戶,則問題會標示為不適用

    只有當問題適用時,後續條件才會執行。根據聯絡類別 NewAccountDisclosures,答案會標記為。此類別會檢查客服人員是否為客戶提供有關開設新帳戶的公開資訊。

    問題部分,自動化標籤。

    如需設定聯絡類別的資訊,請參閱 自動分類聯絡

使用生成式 AI 的選用單一選擇題問題自動化範例
  • 下圖顯示使用生成式 AI 的自動化範例。生成式 AI 會透過解譯評估問題指示中指定的問題標題和評估條件來自動回答評估問題,並使用它來分析對話文字記錄。使用完整的句子來表達評估問題,並在指示中明確指定評估條件,可提高生成式 AI 的準確性。如需相關資訊,請參閱使用生成式 AI 在 Connect Customer 中評估客服人員效能

    問題區段,生成式 AI 對話分析選項。
使用對話分析類別的多選問題自動化範例
  • 多個選取問題可用來擷取單一選取問題的答案推理。它也可以用來觸發條件式問題,方法是檢查客戶案例,例如通話原因。下列範例示範如何使用擷取客戶通話原因的規則,自動填入多個選擇問題的答案。與單一選取問題不同,所有條件都會依序執行,以回答多個選取問題。在下列範例中,如果聯絡人上同時存在 StatusCheck ChangeExistingRequest 類別,則答案會是「檢查現有服務請求的狀態」和「變更服務請求」。

    問題區段,具有對話分析類別的自動化索引標籤。

    如需設定聯絡類別的資訊,請參閱 自動分類聯絡

數字問題的自動化範例
  • 如果客服人員互動持續時間少於 30 秒,請將問題評分為 10。

    問題部分,得分索引標籤,數字問題。
  • 自動化 索引標籤上,選擇用來自動評估問題的量度。

    問題部分,自動化索引標籤,自動評估問題的量度。
  • 您可以使用對話分析指標 (例如客戶情緒分數、非通話時間百分比和中斷次數) 和聯絡指標 (例如最長保留持續時間、保留次數和客服人員互動持續時間),自動回應數值問題。

使用針對某些問題設定的自動化啟用評估表單後,當您從 Connect Customer 管理員網站開始評估時,您將收到這些問題的自動回應。

自動填入並提交評估
  1. 如前所述,在評估表單中的每個問題上設定自動化。

  2. 開啟啟用全自動化提交評估,再啟用評估表單。此切換如下圖所示。

    啟用全自動化評估切換設定為開啟。
  3. 啟用評估表單。

  4. 啟用時,系統會要求您在對話分析中建立規則,以提交自動評估。如需詳細資訊,請參閱在提交自動評估的對話分析中建立規則。使用 規則,您可以指定應使用評估表單自動評估哪些聯絡人。

步驟 7:預覽評估表單

只有在您為所有問題的答案指定得分後,預覽 按鈕才會處於作用中狀態。

評估表單頁面,預覽按鈕。

下圖顯示表單預覽。使用箭頭可以摺疊區段,並使表單更容易預覽。您可以在檢視預覽時編輯表單,如下圖所示。

評估表單的預覽。

步驟 8:指派最終分數的權重

為評估表單啟用以百分比為基礎的評分時,您可以將權重指派給區段或問題。權重會提高或降低區段或問題對評估最終分數的影響。此步驟僅適用於百分比評分模式。如果您選取以點為基礎的分數,則不會使用權重;而是從獲得的分數與可能的最大分數來計算分數。

評估表單頁面、得分索引標籤、分數權重區段、問題選項。

加權分配方式

使用 權重分配模式,您可以選擇是否要依區段或問題指派權重:

  • 按區段權重:您可以均勻分佈該區段中每個問題的權重。

  • 按問題權重:您可以降低或增加特定問題的權重。

當您變更區段或問題的權重時,會自動調整其他權重,因此總和永遠為 100%。

例如,在下圖中,問題 2.1 已手動設定為 50%。以斜體顯示自動調整的權重。此外,您可以開啟從得分中排除選用問題,這會將所有選用問題的權重指派為零,並在其餘問題之間重新分配權重。

問題的分數權重。

步驟 9:驗證評估表單

選擇儲存並驗證以儲存評估表單,並透過驗證管道執行。結果會顯示在側邊面板中。驗證分兩個階段進行。首先,驗證管道會根據管理啟用的相同結構和組態規則來檢查表單,例如區段和問題限制、權重和評分一致性,以及唯一識別符。管道會將此處發現的任何問題報告為錯誤,因為它們會阻止表單啟用,而且您必須先解決它們才能繼續。

如果管道找不到結構錯誤,且表單包含 Gen AI 自動化的問題,則驗證會移至第二個階段。此階段會根據 Gen AI 自動化的最佳實務來評估這些問題的內容。管道會報告此處識別為警告的任何項目。警告不會封鎖啟用,但建議您解決這些問題,以提高自動答案的品質和可靠性。

驗證會根據下列最佳實務檢查每個 Gen AI 自動化的問題:

  • 問題措辭 – 問題標題讀取為完整問題 (以問號結尾),而不是陳述式或標題。

  • 說明 – 每個代 AI 回答的問題都包含指示 AI 如何評估和回答。

  • 答案選項語言 – 答案選項使用簡單的日常語言,沒有縮寫或縮寫。

  • 答案選項簡潔 – 答案選項僅為簡短標籤,沒有額外的評論或條件。

  • 文字記錄可回答性 – 問題可以單獨從文字記錄和指示中回答,無需外部資料或系統查詢。

  • 正面動作架構 – 問題詢問客服人員執行的動作,而不是要求 AI 偵測缺少動作。

  • 純語言 – 避免縮寫、縮寫和公司特定術語的指示。

  • 拼寫 – 問題標題、指示和回答選項沒有拼寫錯誤。

  • 沒有外部系統參考 – 說明不會參考 AI 在文字記錄中看不到的外部系統中的動作或狀態。

  • 沒有非文字提示 – 問題不需要評估純音訊品質 (音量、音調、說話速度、音調)。文字可評估的品質,例如專業素質或同情。

  • 無 PII 參考 – 問題和指示不包含特定的 PII 值。評估客服人員的 PII 處理行為沒有問題。

注意

Gen AI 驗證是每個 Connect Customer 執行個體的速率限制:不超過 3 個 Gen AI 驗證可以平行執行,並且每小時不超過 30 個。如果您超過任一限制,則側邊面板中會出現錯誤訊息。請稍後再試。這些限制不會影響結構驗證。

驗證評估表單
  1. 選擇儲存儲存和驗證

    儲存功能表中的儲存和驗證選項。
  2. 驗證完成時,結果會出現在表單頂端:

    • 如果找不到建議,表單頂端會顯示綠色橫幅,確認已通過驗證。

    • 如果找到建議,它們會列在側邊面板中,分組為錯誤警告

    驗證結果側邊面板顯示錯誤和警告。
  3. 您可以隨時關閉側邊面板。若要重新開啟,請選擇問題旁的問題清單按鈕,或選擇儲存並再次驗證

    問題旁邊的問題清單按鈕。
  4. 在側邊面板上,您可以在解決每個問題清單之後,將問題清單標記為已解決。選擇待定解析篩選條件,以專注於仍需要注意的問題清單。

    具有問題清單和待定解析篩選條件的側邊面板。
注意

將問題清單標記為已解決只會以視覺化方式隱藏在面板上,讓您可以清楚查看要解決的問題清單。它不會重新執行驗證或變更表單的啟用狀態。

步驟 10:啟用評估表單

選擇 啟用,讓評估人員可以使用表單。開始新的評估時,評估人員將無法再從下拉式清單中選擇先前版本的表單。對於使用先前版本完成的任何評估,您仍然可以檢視評估依據的表單版本。

重要

啟用新版本之後,評估者就無法再使用先前的版本開始新的評估。

如果您仍在設定評估表單,並且想要隨時儲存工作,您可以選擇儲存儲存草稿

如果您想要檢查表單是否已正確設定,但不要啟用,請選取儲存儲存和驗證