Mengelola aliran data di AWS IoT Greengrass core - AWS IoT Greengrass

AWS IoT Greengrass Version 1 memasuki fase umur panjang pada 30 Juni 2023. Untuk informasi selengkapnya, lihat kebijakan AWS IoT Greengrass V1 pemeliharaan. Setelah tanggal ini, tidak AWS IoT Greengrass V1 akan merilis pembaruan yang menyediakan fitur, penyempurnaan, perbaikan bug, atau patch keamanan. Perangkat yang berjalan AWS IoT Greengrass V1 tidak akan terganggu dan akan terus beroperasi dan terhubung ke cloud. Kami sangat menyarankan Anda bermigrasi ke AWS IoT Greengrass Version 2, yang menambahkan fitur baru yang signifikan dan dukungan untuk platform tambahan.

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Mengelola aliran data di AWS IoT Greengrass core

AWS IoT Greengrass pengelola pengaliran membuatnya lebih mudah dan lebih dapat diandalkan untuk mentransfer data IoT volume tinggi ke AWS Cloud. Pengelola pengaliran memproses pengaliran data secara lokal dan mengekspornya ke AWS Cloud secara otomatis. Fitur ini terintegrasi dengan skenario edge umum, seperti inferensi machine learning (ML), di mana data diproses dan dianalisis secara lokal sebelum diekspor ke AWS Cloud atau tujuan penyimpanan lokal.

Pengelola pengaliran memudahkan pengembangan aplikasi. Aplikasi IoT Anda dapat menggunakan mekanisme standar untuk memproses volume tinggi pengaliran dan mengelola kebijakan penyimpanan data lokal bukannya membangun fungsionalitas manajemen pengaliran kustom. Aplikasi IoT dapat membaca dan menulis ke aliran. Mereka dapat menentukan kebijakan untuk jenis penyimpanan, ukuran, dan retensi data per pengaliran untuk mengontrol cara pengelola pengaliran memproses dan mengekspor pengaliran.

Pengelola pengaliran dirancang untuk bekerja di lingkungan dengan konektivitas intermiten atau terbatas. Anda dapat menentukan penggunaan bandwidth, perilaku timeout, dan cara aliran data ditangani ketika core terhubung atau terputus. Untuk data penting, Anda dapat menetapkan prioritas untuk mengontrol urutan pengaliran yang diekspor ke AWS Cloud.

Anda dapat mengonfigurasi ekspor otomatis ke AWS Cloud untuk penyimpanan atau pemrosesan dan analisis lebih lanjut. Pengelola pengaliran mendukung mengekspor ke AWS Cloud tujuan.

  • Saluran di AWS IoT Analytics. AWS IoT Analytics mengizinkan Anda melakukan analisis lanjutan pada data Anda untuk membantu membuat keputusan bisnis dan meningkatkan model machine learning. Untuk informasi lebih lanjut, lihat Apa AWS IoT Analytics? dalam AWS IoT Analytics Panduan Pengguna.

  • Aliran di Kinesis Data Streams. Kinesis Data Streams umumnya digunakan untuk mengumpulkan data volume tinggi dan memuatnya ke dalam gudang data atau klaster map-reduce. Untuk informasi lebih lanjut, lihat Apa itu Amazon Kinesis Data Streams? dalam Panduan Developer Amazon Kinesis.

  • Properti aset di AWS IoT SiteWise. AWS IoT SiteWise mengizinkan Anda mengumpulkan, mengatur, dan menganalisis data dari peralatan industri dalam menskalakan. Untuk informasi lebih lanjut, lihat Apa AWS IoT SiteWise? dalam AWS IoT SiteWise Panduan Pengguna.

  • Objek dalam Amazon S3. Anda dapat menggunakan Amazon S3 untuk menyimpan dan mengambil data dalam jumlah besar. Untuk informasi lebih lanjut, lihat Apa Amazon S3? dalam Panduan Developer Amazon Simple Storage Service.

alur kerja manajemen pengaliran

Aplikasi IoT Anda berinteraksi dengan pengelola pengaliran melalui AWS IoT Greengrass Core SDK. Dalam alur kerja yang sederhana, fungsi Lambda yang ditetapkan pengguna berjalan pada core Greengrass mengonsumsi data IoT, seperti suhu time-series dan tekanan metrik. Fungsi Lambda mungkin memfilter atau mengompres data lalu memanggil AWS IoT Greengrass Core SDK untuk menulis data ke pengaliran di pengelola pengaliran. Pengelola pengaliran dapat mengekspor pengaliran ke AWS Cloud secara otomatis, berdasarkan kebijakan yang ditetapkan untuk pengaliran. Fungsi Lambda yang ditetapkan pengguna juga dapat mengirim data langsung ke basis data lokal atau repositori penyimpanan.

Aplikasi IoT Anda dapat mencakup beberapa fungsi Lambda yang ditetapkan pengguna yang membaca atau menulis ke pengaliran. Ini fungsi Lambda lokal dapat membaca dan menulis ke pengaliran untuk memfilter, agregat, dan menganalisis data lokal. Hal ini mengizinkan untuk merespons dengan cepat peristiwa lokal dan mengekstraksi informasi berharga sebelum data ditransfer dari core ke cloud atau tujuan lokal.

Contoh alur kerja seperti yang ditunjukkan dalam diagram berikut.

Diagram alur kerja pengelola pengaliran.

Untuk menggunakan pengelola pengaliran, mulai dengan mengonfigurasi parameter pengelola pengaliran untuk menentukan pengaturan waktu aktif tingkat grup yang berlaku untuk semua pengaliran pada core Greengrass. Pengaturan yang dapat disesuaikan ini mengizinkan Anda mengontrol cara pengelola pengaliran menyimpan, memproses, dan mengekspor pengaliran berdasarkan kebutuhan bisnis dan kendala lingkungan Anda. Untuk informasi lebih lanjut, lihat Konfigurasikan manajer pengaliran AWS IoT Greengrass.

Setelah Anda mengonfigurasi pengelola pengaliran, Anda dapat membuat dan men-deploy aplikasi IoT Anda. Ini biasanya ditetapkan pengguna fungsi Lambda yang menggunakan StreamManagerClient di AWS IoT Greengrass Core SDK untuk membuat dan berinteraksi dengan pengaliran. Selama pembuatan pengaliran, fungsi Lambda mendefinisikan kebijakan per-pengaliran, seperti tujuan ekspor, prioritas, dan ketekunan. Untuk informasi lebih lanjut, termasuk cuplikan kode untuk StreamManagerClient operasi, lihat Gunakan StreamManagerClient untuk bekerja dengan aliran.

Untuk tutorial yang mengonfigurasi alur kerja sederhana, lihat Ekspor aliran data ke AWS Cloud (konsol) atau Ekspor aliran data ke AWS Cloud (CLI).

Persyaratan

Persyaratan berikut berlaku untuk menggunakan pengelola pengaliran:

  • Anda harus menggunakan AWS IoT Greengrass perangkat lunak Core v1.10 atau yang lebih baru, dengan pengelola pengaliran diaktifkan. Untuk informasi selengkapnya, lihat Konfigurasikan manajer pengaliran AWS IoT Greengrass.

    Pengelola pengaliran tidak didukung pada OpenWrt distribusi.

  • Waktu aktif Java 8 (JDK 8) harus diinstal pada core.

    • Untuk distribusi berbasis Debian (termasuk Raspbian) atau distribusi berbasis Ubuntu, jalankan perintah berikut:

      sudo apt install openjdk-8-jdk
    • Untuk distribusi berbasis Red Hat (termasuk Amazon Linux), jalankan perintah berikut:

      sudo yum install java-1.8.0-openjdk

      Untuk informasi lebih lanjut, lihat Cara mengunduh dan menginstal paket OpenJDK prebuilt dalam dokumentasi OpenJDK.

     

  • Pengelola pengaliran membutuhkan RAM minimal 70 MB selain basis Anda AWS IoT Greengrass perangkat Core. Kebutuhan memori total Anda tergantung pada beban kerja Anda.

     

  • Fungsi Lambda yang ditetapkan pengguna harus menggunakan AWS IoT Greengrass Core SDK untuk berinteraksi dengan pengelola pengaliran. Core SDK AWS IoT Greengrass tersedia dalam beberapa bahasa, tetapi hanya versi berikut yang mendukung operasi pengelola pengaliran:

    • Java SDK (v1.4.0 atau yang lebih baru)

    • Python SDK (v1.5.0 atau yang lebih baru)

    • Node.js SDK (v1.6.0 atau yang lebih baru)

    Unduh versi SDK yang sesuai dengan fungsi waktu aktif Lambda Anda dan memasukkannya ke dalam paket deployment fungsi Lambda Anda.

    catatan

    Core SDK for Python AWS IoT Greengrass membutuhkan Python 3.7 atau yang lebih baru dan memiliki dependensi paket lainnya. Untuk informasi lebih lanjut, lihat Buat paket deployment fungsi Lambda (konsol) atau Buat paket deployment fungsi Lambda (CLI).

  • Jika Anda menentukan AWS Cloud ekspor tujuan untuk pengaliran, Anda harus membuat target ekspor Anda dan memberikan izin mengakses dalam peran grup Greengrass. Tergantung pada tujuan, persyaratan lain mungkin juga berlaku. Untuk informasi selengkapnya, lihat:

    Anda bertanggung jawab untuk menjaga sumber daya AWS Cloud ini.

Keamanan data

Bila Anda menggunakan stream manager, perhatikan pertimbangan keamanan berikut ini.

Keamanan data lokal

AWS IoT Greengrass tidak mengenkripsi data at rest pengaliran atau transit secara lokal antara komponen pada perangkat core.

  • Data at rest. Data pengaliran disimpan secara lokal dalam direktori penyimpanan pada core Greengrass. Untuk keamanan data, AWS IoT Greengrass bergantung pada izin file Unix dan enkripsi disk penuh, jika diaktifkan. Anda dapat menggunakan parameter opsional STREAM_MANAGER_STORE_ROOT_DIR untuk menentukan direktori penyimpanan. Jika Anda mengubah parameter ini nanti untuk menggunakan direktori penyimpanan yang berbeda, AWS IoT Greengrass tidak menghapus direktori penyimpanan sebelumnya atau isinya.

     

  • Data dalam transit lokal. AWS IoT Greengrass tidak mengenkripsi data pengaliran dalam transit lokal pada core antara sumber data, fungsi Lambda, AWS IoT Greengrass Core SDK, dan pengelola pengaliran.

     

  • Data dalam transit ke AWS Cloud. Aliran data yang diekspor oleh pengelola pengaliran ke AWS Cloud gunakan standar AWS layanan enkripsi klien dengan Transport Layer Security (TLS).

Untuk informasi selengkapnya, lihat Enkripsi data.

Autentikasi klien

Klien pengelola pengaliran menggunakan AWS IoT Greengrass core SDK untuk berkomunikasi dengan pengelola pengaliran. Ketika autentikasi klien diaktifkan, hanya fungsi Lambda dalam grup Greengrass dapat berinteraksi dengan pengaliran di pengelola pengaliran. Ketika autentikasi klien dinonaktifkan, setiap proses yang berjalan pada core Greengrass (seperti kontainer Docker) dapat berinteraksi dengan pengaliran di pengelola pengaliran. Anda harus menonaktifkan autentikasi hanya jika kasus bisnis Anda memerlukannya.

Anda menggunakan STREAM_MANAGER_AUTHENTICATE_CLIENT parameter untuk mengatur mode autentikasi klien. Anda dapat mengonfigurasi parameter ini dari konsol atau AWS IoT Greengrass API. Perubahan berlaku setelah grup di-deploy.

  Diaktifkan Dinonaktifkan

Nilai parameter

true (default dan disarankan)

false

Klien yang diizinkan

Fungsi Lambda yang ditetapkan pengguna dalam grup Greengrass

Fungsi Lambda yang ditetapkan pengguna dalam grup Greengrass

Proses lain yang berjalan di perangkat core Greengrass

Lihat juga