Menguji aliran Firehose dengan data sampel - Amazon Data Firehose
PrasyaratUji dengan Amazon S3Uji dengan Amazon RedshiftUji dengan OpenSearch LayananUji dengan SplunkTes dengan Apache Iceberg Tables

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Menguji aliran Firehose dengan data sampel

Anda dapat menggunakan data ticker saham simulasi AWS Management Console untuk menelan. Konsol menjalankan skrip di browser Anda untuk menempatkan catatan sampel di aliran Firehose Anda. Ini memungkinkan Anda untuk menguji konfigurasi aliran Firehose Anda tanpa harus menghasilkan data pengujian Anda sendiri.

Berikut ini adalah contoh dari data simulasi:

{"TICKER_SYMBOL":"QXZ","SECTOR":"HEALTHCARE","CHANGE":-0.05,"PRICE":84.51}

Perhatikan bahwa biaya Firehose Data Amazon standar berlaku saat aliran Firehose Anda mentransmisikan data, tetapi tidak dikenakan biaya saat data dihasilkan. Untuk berhenti menimbulkan biaya ini, Anda dapat menghentikan aliran sampel dari konsol kapan saja.

Prasyarat

Sebelum Anda mulai, buat aliran Firehose. Untuk informasi selengkapnya, lihat Tutorial: Membuat aliran Firehose dari konsol.

Uji dengan Amazon S3

Gunakan prosedur berikut untuk menguji aliran Firehose Anda dengan Amazon Simple Storage Service (Amazon S3) sebagai tujuan.

Untuk menguji aliran Firehose menggunakan Amazon S3

  1. Buka konsol Firehose di. https://console.aws.amazon.com/firehose/

  2. Pilih aliran Firehose yang aktif. Aliran Firehose harus dalam status Aktif sebelum Anda dapat mulai mengirim data.

  3. Di bawah Uji dengan data demo, pilih Mulai mengirim data demo untuk menghasilkan sampel data ticker saham.

  4. Ikuti petunjuk di layar untuk memverifikasi bahwa data tersebut sedang dikirim ke bucket S3 Anda. Perhatikan bahwa mungkin diperlukan beberapa menit hingga objek baru muncul di bucket Anda, berdasarkan konfigurasi buffering bucket Anda.

  5. Saat pengujian selesai, pilih Berhenti mengirim data demo untuk berhenti menimbulkan biaya penggunaan.

Uji dengan Amazon Redshift

Gunakan prosedur berikut untuk menguji aliran Firehose Anda dengan Amazon Redshift sebagai tujuannya.

Untuk menguji aliran Firehose menggunakan Amazon Redshift

  1. Aliran Firehose Anda mengharapkan tabel hadir di klaster Amazon Redshift Anda. Hubungkan ke Amazon Redshift melalui SQL antarmuka dan jalankan pernyataan berikut untuk membuat tabel yang menerima data sampel.

    create table firehose_test_table
(
	TICKER_SYMBOL varchar(4),
	SECTOR varchar(16),
	CHANGE float,
	PRICE float
);

  2. Buka konsol Firehose di. https://console.aws.amazon.com/firehose/

  3. Pilih aliran Firehose yang aktif. Aliran Firehose harus dalam status Aktif sebelum Anda dapat mulai mengirim data.

  4. Edit detail tujuan aliran Firehose Anda untuk mengarah ke tabel yang baru dibuatfirehose_test_table.

  5. Di bawah Uji dengan data demo, pilih Mulai mengirim data demo untuk menghasilkan sampel data ticker saham.

  6. Ikuti petunjuk di layar untuk memverifikasi bahwa data tersebut sedang dikirim ke tabel Anda. Perhatikan bahwa mungkin diperlukan beberapa menit hingga baris baru muncul di tabel Anda, berdasarkan konfigurasi buffering.

  7. Saat pengujian selesai, pilih Berhenti mengirim data demo untuk berhenti menimbulkan biaya penggunaan.

  8. Edit detail tujuan untuk aliran Firehose Anda untuk mengarah ke tabel lain.

  9. (Opsional) Hapus tabel firehose_test_table.

Uji dengan OpenSearch Layanan

Gunakan prosedur berikut untuk menguji aliran Firehose Anda menggunakan OpenSearch Layanan Amazon sebagai tujuan.

Untuk menguji aliran Firehose menggunakan Service OpenSearch

  1. Buka konsol Firehose di. https://console.aws.amazon.com/firehose/

  2. Pilih aliran Firehose yang aktif. Aliran Firehose harus dalam status Aktif sebelum Anda dapat mulai mengirim data.

  3. Di bawah Uji dengan data demo, pilih Mulai mengirim data demo untuk menghasilkan sampel data ticker saham.

  4. Ikuti petunjuk di layar untuk memverifikasi bahwa data sedang dikirimkan ke domain OpenSearch Layanan Anda. Untuk informasi selengkapnya, lihat Mencari Dokumen di Domain OpenSearch Layanan di Panduan Pengembang OpenSearch Layanan Amazon.

  5. Saat pengujian selesai, pilih Berhenti mengirim data demo untuk berhenti menimbulkan biaya penggunaan.

Uji dengan Splunk

Gunakan prosedur berikut untuk menguji aliran Firehose Anda menggunakan Splunk sebagai tujuan.

Untuk menguji aliran Firehose menggunakan Splunk

  1. Buka konsol Firehose di. https://console.aws.amazon.com/firehose/

  2. Pilih aliran Firehose yang aktif. Aliran Firehose harus dalam status Aktif sebelum Anda dapat mulai mengirim data.

  3. Di bawah Uji dengan data demo, pilih Mulai mengirim data demo untuk menghasilkan sampel data ticker saham.

  4. Periksa apakah data tersebut sedang dikirim ke indeks Splunk Anda. Contoh istilah pencarian di Splunk adalah sourcetype="aws:firehose:json" dan index="name-of-your-splunk-index". Untuk informasi selengkapnya tentang cara mencari peristiwa di Splunk, lihat Cari Manual dalam dokumentasi Splunk.

    Jika data pengujian tidak muncul dalam indeks Splunk Anda, periksa peristiwa yang gagal di bucket Amazon S3 Anda. Lihat juga Data Tidak Terkirim ke Splunk.

  5. Saat pengujian selesai, pilih Berhenti mengirim data demo untuk berhenti menimbulkan biaya penggunaan.

Tes dengan Apache Iceberg Tables

Gunakan prosedur berikut untuk menguji aliran Firehose Anda dengan Apache Iceberg Tables sebagai tujuan.

Untuk menguji aliran Firehose menggunakan Apache Iceberg Tables

  1. Buka konsol Firehose di. https://console.aws.amazon.com/firehose/

  2. Pilih aliran Firehose yang aktif. Aliran Firehose harus dalam status Aktif sebelum Anda dapat mulai mengirim data.

  3. Di bawah Uji dengan data demo, pilih Mulai mengirim data demo untuk menghasilkan sampel data ticker saham.

  4. Ikuti petunjuk di layar untuk memverifikasi bahwa data sedang dikirim ke Tabel Gunung Es Apache Anda. Perhatikan bahwa mungkin perlu beberapa menit agar objek baru muncul di bucket Anda, berdasarkan konfigurasi buffering-nya.

  5. Jika data pengujian tidak muncul di Tabel Gunung Es Apache, periksa bucket Amazon S3 untuk mengetahui kejadian yang gagal.

  6. Saat pengujian selesai, pilih Berhenti mengirim data demo untuk berhenti menimbulkan biaya penggunaan.