View a markdown version of this page

CloudWatch jaringan pipa - Amazon CloudWatch
Komponen pipaHargaKetersediaan wilayah

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

CloudWatch jaringan pipa

CloudWatch pipelines adalah pengumpul data yang dikelola sepenuhnya yang menyerap, mengubah, dan merutekan data telemetri—termasuk log dan metrik—dari layanan, aplikasi pihak ketiga, dan sumber AWS kustom ke. CloudWatch Built-in prosesor memungkinkan Anda memperkaya, memfilter, dan menstandarisasi log ke dalam format seperti OCSF—tanpa mengelola infrastruktur atau alat pihak ketiga. Untuk metrik, CloudWatch pipeline memproses dan memperkaya metrik OpenTelemetry (OTel) sebaris selama konsumsi ke dalam. CloudWatch

CloudWatch pipelines sepenuhnya terintegrasi dengan pengalaman manajemen log, memungkinkan Anda untuk secara konsisten memproses dan memperkaya data log di seluruh grup log terkait melalui spesifikasi sumber data dan tipe data. Ini membuka kasus penggunaan seperti:

  • Kategorisasi log otomatis — Log yang diproses melalui saluran pipa secara otomatis ditandai dengan informasi sumber data, memungkinkan penemuan dan kueri yang berpusat pada layanan di seluruh infrastruktur Anda

  • Memperluas dukungan pihak ketiga — Mengumpulkan dan menormalkan log dari pustaka sumber pihak ketiga yang berkembang untuk analisis dan kepatuhan terpadu

Untuk metrik, CloudWatch pipeline memungkinkan kasus penggunaan berikut:

  • Pengayaan — Tambahkan konteks bisnis seperti tim, pusat biaya, atau lingkungan ke metrik dari sumber yang tidak dapat Anda modifikasi

  • Optimalisasi biaya — Strip atribut kardinalitas tinggi untuk mengurangi biaya penyimpanan

  • Standardisasi — Ubah nama metrik dan atribut untuk menegakkan konvensi penamaan

Output dari pipeline sepenuhnya kompatibel dengan fitur CloudWatch Log termasuk kueri Wawasan Log, Deteksi Anomali Log, dan Live Tail. CloudWatch pipelines bekerja dengan kelas log Akses Standar dan Jarang dan kompatibel dengan Log Transformers.

Untuk pipeline metrik, metrik yang diproses sepenuhnya dapat dikueri melalui PromQL di Query Studio dan kompatibel dengan Alarm dan Deteksi Anomali. CloudWatch

Untuk memulai dengan CloudWatch saluran pipa, kunjungi saluran pipa di dalam halaman CloudWatch konsumsi di konsol. CloudWatch

catatan

Waspadai batas-batas berikut yang berlaku untuk CloudWatch jaringan pipa

  • Saluran pipa log per akun: 330

    • Hingga 300 saluran pipa untuk mengumpulkan data dari CloudWatch Log

    • Hingga 30 saluran pipa untuk mengumpulkan data dari sumber lain

  • Pipeline metrik per akun: hingga 300

  • Hingga 20 prosesor per pipeline (log dan metrik)

  • Jalur pipa metrik mendukung jalur konsumsi: Hanya OTLP

Komponen pipa

Setiap pipa terdiri dari komponen-komponen berikut:

  • Sumber - Menentukan dari mana data berasal (bucket Amazon S3 CloudWatch , Log, Metrik (OTel) CloudWatch , integrasi pihak ketiga). Setiap pipa harus memiliki tepat satu sumber. Pipeline metrik memproses metrik OTel pada jalur konsumsi OTLP.

  • Prosesor (opsional) — Mengubah, mengurai, dan memperkaya data telemetri saat mengalir melalui pipeline. Prosesor diterapkan secara berurutan dalam urutan yang ditentukan. Pipeline metrik mendukung serangkaian prosesor berbeda yang dioptimalkan untuk atribut metrik OTel.

  • Sink — Mendefinisikan tujuan di mana data yang diproses dikirim. Jenis wastafel yang didukung termasuk cloudwatch_logs dancloudwatch_metrics. Setiap pipa harus memiliki tepat satu wastafel.

  • Ekstensi (opsional) - Menyediakan fungsionalitas tambahan seperti integrasi AWS Secrets Manager untuk manajemen kredensi.

Di seluruh pipeline, data Anda tetap terlindungi dengan enkripsi lapisan transport sehingga data Anda memenuhi persyaratan keamanan dan kepatuhan.

catatan

Definisi saluran pipa tidak dienkripsi dengan kunci yang disediakan pelanggan dan tidak boleh menyertakan data sensitif, seperti kata sandi, kunci API, atau informasi identitas pribadi (PII).

catatan

Menambahkan prosesor menyebabkan mutasi peristiwa log dan log asli (mentah) tidak dipertahankan.

Harga

CloudWatch jaringan pipa sudah termasuk dengan CloudWatch Log tanpa biaya tambahan. Tingkat konsumsi log standar berdasarkan kelas log (vended atau custom) dan kelas penyimpanan (Akses Standar atau Jarang) masih berlaku. Pengukuran terjadi pada saat konsumsi pertama ke dalam. CloudWatch CloudWatch Sumber log diukur sebelum pemrosesan pipa. Third-party dan sumber bucket S3 diklasifikasikan sebagai log Kustom dan diukur setelah diproses. Untuk detail harga, lihat CloudWatch Harga.

Untuk jaringan pipa metrik, biaya konsumsi dan CloudWatch penyimpanan metrik OTel standar berlaku. Tidak ada biaya tambahan untuk pemrosesan pipa.

Ketersediaan wilayah

CloudWatch jaringan pipa tersedia di AWS Wilayah berikut:

  • Timur AS (N. Virginia)

  • AS Timur (Ohio)

  • AS Barat (California Utara)

  • AS Barat (Oregon)

  • Afrika (Cape Town)

  • Asia Pasifik (Hong Kong)

  • Asia Pasifik (Hyderabad)

  • Asia Pasifik (Jakarta)

  • Asia Pasifik (Malaysia)

  • Asia Pacific (Melbourne)

  • Asia Pasifik (Mumbai)

  • Asia Pasifik (Selandia Baru)

  • Asia Pasifik (Osaka)

  • Asia Pasifik (Seoul)

  • Asia Pasifik (Singapura)

  • Asia Pasifik (Sydney)

  • Asia Pasifik (Taipei)

  • Asia Pasifik (Thailand)

  • Asia Pasifik (Tokyo)

  • (Canada (Central)

  • Kanada Barat (Calgary)

  • Eropa (Frankfurt)

  • Eropa (Irlandia)

  • Eropa (London)

  • Eropa (Milan)

  • Eropa (Paris)

  • Eropa (Spanyol)

  • Eropa (Stockholm)

  • Eropa (Zürich)

  • Israel (Tel Aviv)

  • Meksiko (Tengah)

  • Amerika Selatan (Sao Paulo)

catatan

Third-party pengumpulan sumber data tersedia di wilayah di mana OpenSearch Ingestion memiliki titik akhir API.

Untuk detail selengkapnya, lihat CloudWatch titik akhir dan kuota Amazon di. Referensi Umum AWS