View a markdown version of this page

Metrik objektif - Amazon SageMaker AI

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Metrik objektif

Autopilot menghasilkan metrik akurasi untuk mengevaluasi kandidat model dan membantu Anda memilih mana yang akan digunakan untuk menghasilkan perkiraan. Anda dapat membiarkan Autopilot mengoptimalkan prediktor untuk Anda, atau Anda dapat secara manual memilih algoritma untuk prediktor Anda. Secara default, Autopilot menggunakan Average Weighted Quantile Loss.

Daftar berikut berisi nama-nama metrik yang saat ini tersedia untuk mengukur kinerja model untuk perkiraan deret waktu.

RMSE

Root mean squared error (RMSE) — Mengukur akar kuadrat dari perbedaan kuadrat antara nilai prediksi dan aktual, dan dirata-ratakan di atas semua nilai. Ini adalah metrik penting untuk menunjukkan adanya kesalahan model yang besar dan outlier. Nilai berkisar dari nol (0) hingga tak terhingga, dengan angka yang lebih kecil menunjukkan kecocokan model yang lebih baik dengan data. RMSE bergantung pada skala, dan tidak boleh digunakan untuk membandingkan kumpulan data dengan ukuran berbeda.

wQL

Weighted Quantile Loss (wQL) — Menilai keakuratan perkiraan dengan mengukur perbedaan absolut tertimbang antara kuantil P10, P50, dan P90 yang diprediksi dan aktual dengan nilai yang lebih rendah menunjukkan kinerja yang lebih baik.

Average wQL (default)

Average Weighted Quantile Loss (Average wQL) — Mengevaluasi perkiraan dengan merata-ratakan akurasi pada kuantil P10, P50, dan P90. Nilai yang lebih rendah menunjukkan model yang lebih akurat.

MASE

Rata-rata Absolute Scaled Error (MASE) — Kesalahan absolut rata-rata dari perkiraan yang dinormalisasi dengan kesalahan absolut rata-rata dari metode peramalan dasar sederhana. Nilai yang lebih rendah menunjukkan model yang lebih akurat, di mana < 1 is estimated to be better than the baseline and MASE > MASE 1 diperkirakan lebih buruk daripada baseline.

MAPE

Rata-rata Kesalahan Persen Mutlak (MAPE) - Kesalahan persentase (perbedaan persen dari nilai perkiraan rata-rata versus nilai aktual) dirata-ratakan selama semua titik waktu. Nilai yang lebih rendah menunjukkan model yang lebih akurat, di mana MAPE = 0 adalah model tanpa kesalahan.

WAPE

Kesalahan Persen Mutlak Tertimbang (WAPE) — Jumlah kesalahan absolut yang dinormalisasi dengan jumlah target absolut, yang mengukur deviasi keseluruhan dari nilai yang diperkirakan dari nilai yang diamati. Nilai yang lebih rendah menunjukkan model yang lebih akurat.