条件付き人口統計格差 (CDD) - Amazon SageMaker

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

条件付き人口統計格差 (CDD)

属性格差メトリクス (DD) は、ファセットが、データセット内の拒否された結果の割合が承認された結果の割合よりも大きいかどうかを決定します。例えば、男性と女性の 2 つのファセットがデータセットを構成する二項ケースでは、不利なファセットには facet d というラベルが付けられ、有利なファセットには facet a というラベルが付けられます。例えば、大学入試の場合、女性の不合格者が 46% で、合格者が 32% しかいないとすると、不合格者の割合が合格者の割合を上回っているため、属性格差があると言えます。この場合、女性の応募者にはファセット d というラベルが付けられます。男性の志願者が、不合格となった志願者の 54%、合格した志願者の 68% を占めていた場合、不合格率は合格率よりも低いため、このファセットには属性格差はないと言えます。この場合、男性の志願者にはファセット a というラベルが付けられます。

有利でないファセット d の属性格差の計算式は次のとおりです。

        DDd = nd(0)/n(0) - nd(1)/n(1) = PdR(y0) - PdA(y1)

コードの説明は以下のとおりです。

  • n(0) = na(0) + nd(0) は、有利なファセット a と不利なファセット d のデータセットのうち拒否された結果の総数です。

  • n(1) = na(1) + nd(1) は、有利なファセット a と不利なファセット d のデータセットのうち拒否された結果の総数です。

  • PdR(y0) は、ファセット d で拒否された結果 (値 0) の割合です。

  • PdA(y1) は、ファセット d で承認された結果 (値 1) の割合です。

大学入試の例では、属性格差は DDd = 0.46 - 0.32 = 0.14 です。男性の場合 DDa = 0.54 - 0.68 = - 0.14 です。

Simpson のパラドックスを除外するには、データセット上のサブグループの階層を定義する属性に DD を条件付ける条件付き属性格差 (CDD) メトリクスが必要です。再グループ化により、有利でないファセットの明らかな属性格差の原因についてインサイトを得ることができます。典型的な例は、バークレー校の入試で、男性の方が女性よりも全体的に合格率が高かったというものです。この場合の統計量は DD の計算例で使用されました。しかし、学科別のサブグループを調べると、学科別に条件付けするとは女性の方が男性よりも高い合格率であることが示されました。その説明は、女性は男性よりも合格率の低い学科に志願していたということでした。サブグループ別の合格率を調べると、合格率の低い学科では、実際に女性の方が男性よりも高い合格率であることがわかりました。

CDD メトリクスは、データセットの属性によって定義されるサブグループで見つかったすべての格差を、平均化して 1 つの測定を提供します。これは、各サブグループの属性格差 (DDi) の加重平均として定義され、各サブグループの格差は、含まれる観測値の数に比例して重み付けされます。条件付き属性格差の計算式は次のとおりです。

        CDD = (1/n)*i∑ni *DDi

コードの説明は以下のとおりです。

  • ini = n は、観測値の総数であり、niは、各サブグループの観測値の数です。

  • DDi = ni(0)/n(0) - ni(1)/n(1) = PiR(y0) - PiA(y1) は、i 番目のサブグループの属性格差です。

サブグループの属性格差 (DDi) は、各サブグループの拒否された結果の割合と承認された結果の割合の差です。

データセット全体の DDd またはその条件付きサブグループ DDi の二項結果の DD 値の範囲は [-1, +1] です。

  • +1: ファセット a またはサブグループに拒否がなく、ファセット d またはサブグループに承認がない場合

  • 正の値は、データセット内のファセット d として属性格差がないことを示します。つまり、データセット内のサブグループで、拒否された結果の割合が、承認された結果の割合よりも大きいことを示します。値が高くなるほどファセットは不利になり、不均衡が大きくなります。

  • 負の値は、データセット内のファセット d として属性格差がないことを示します。つまり、データセット内のサブグループで、承認された結果の割合が、拒否された結果の割合よりも大きいことを示します。値が低いほど、ファセットは有利になります。

  • -1: ファセット d またはサブグループに拒否がなく、ファセット a またはサブグループに承認がない場合

何も条件付けない場合、 CDDは 0 で、 DPLは 0 です。

このメトリクスは、EU および英国の非差別法および法学における直接差別、間接差別、客観的正当化の概念を調査するのに有用です。詳細については、「公平性を自動化できない理由」を参照してください。この論文には、学部の入学率サブグループに基づく条件付けがシンプソンのパラドックスをどのように示しているかを示す、バークレー大学の入学事例に関する関連データと分析も含まれています。