Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Tutorial Kueri Kustom
Tutorial ini menunjukkan cara membuat, melatih, mengevaluasi, menggunakan, dan mengelola adaptor.
Dengan adaptor, Anda dapat meningkatkan akurasi operasi Amazon Textract API, menyesuaikan perilaku model agar sesuai dengan kebutuhan dan kasus penggunaan Anda sendiri. Setelah Anda membuat adaptor dengan tutorial ini, Anda dapat menggunakannya saat menganalisis dokumen Anda sendiri dengan operasi AnalyzeDocumentAPI, dan juga melatih kembali adaptor untuk perbaikan di masa mendatang.
Dalam tutorial ini Anda akan belajar bagaimana untuk:
Buat adaptor menggunakan file Konsol Manajemen AWS.
Buat kumpulan data untuk melatih adaptor Anda.
Beri anotasi data pelatihan Anda.
Latih adaptor Anda pada dataset pelatihan Anda.
Tinjau kinerja adaptor Anda.
Latih kembali adaptor Anda.
Gunakan adaptor Anda untuk analisis dokumen.
Hapus adaptor Anda.
Prasyarat
Sebelum Anda mulai, kami sarankan Anda membacaMembuat adaptor.
Anda juga harus mengatur AWS akun Anda dan menginstal dan mengkonfigurasi AWS SDK. Untuk petunjuk penyiapan SDK, lihatLangkah 2: Siapkan AWS CLI and AWS SDK.
Buat adaptor
Sebelum Anda dapat melatih atau menggunakan adaptor, Anda harus membuatnya. Untuk membuat adaptor:
Masuk ke Konsol Manajemen AWS dan buka konsol Amazon Textract
. -
Di panel kiri, pilih Kueri Kustom. Halaman landing Kueri Kustom Amazon Textract ditampilkan.
-
Halaman landing Kueri Kustom menunjukkan daftar semua adaptor Anda, dan ada juga tombol untuk membuat adaptor. Pilih Buat adaptor untuk membuat adaptor Anda. Jumlah pelatihan yang berhasil yang dapat dilakukan per bulan dibatasi per AWS akun. Lihat Mengatur Kuota di Amazon Texttract untuk informasi lebih lanjut mengenai batasan.
-
Pada halaman berikut, masukkan nama adaptor, pilih apakah akan memperbarui adaptor Anda secara otomatis, dan secara opsional menambahkan tag ke dalamnya. Kemudian, pilih Buat adaptor. Saat Anda memilih 'pembaruan otomatis' Amazon Textract akan secara otomatis memperbarui adaptor Anda saat fitur Kueri yang telah dilatih sebelumnya diperbarui.
Setelah Anda membuat adaptor, Anda akan dapat melihat detail untuk adaptor itu, termasuk nama adaptor dan ID Adaptor. Kehadiran detail ini memverifikasi bahwa adaptor telah berhasil dibuat.
Anda sekarang dapat membuat kumpulan data yang akan digunakan untuk melatih dan menguji adaptor Anda.
Pembuatan dataset
Pada langkah ini, Anda membuat kumpulan data pelatihan dan kumpulan data pengujian dengan mengunggah gambar dari komputer lokal atau dari bucket Amazon S3. Untuk informasi selengkapnya tentang kumpulan data, lihat Mendeteksi Teks Mempersiapkan kumpulan data pelatihan dan pengujian
Saat mengunggah gambar dari komputer lokal Anda, Anda dapat mengunggah hingga 30 gambar sekaligus. Jika Anda memiliki banyak gambar untuk diunggah, pertimbangkan untuk membuat kumpulan data dengan mengimpor gambar dari bucket Amazon S3.
-
Untuk mulai membuat kumpulan data Anda, pilih adaptor Anda dari daftar adaptor, lalu pilih Buat kumpulan data.
-
Di bagian konfigurasi Dataset, pilih Pemisahan manual atau Autosplit. Dengan pemisahan manual, Anda dapat menentukan gambar individual sebagai bagian dari kumpulan data pelatihan dan pengujian Anda. Jika Anda memilih Autosplit, itu akan menentukan set pelatihan dan pengujian Anda secara otomatis saat Anda mengunggah semua gambar Anda. Pemisahan manual direkomendasikan untuk orang yang melatih adaptor untuk pertama kalinya. Untuk saat ini, pilih Autosplit.
-
Di bagian Detail kumpulan data pelatihan, Anda dapat memilih Unggah dokumen dari komputer atau Impor dokumen dari bucket S3. Jika Anda memilih untuk mengimpor dokumen dari bucket Amazon S3, berikan jalur ke bucket dan folder yang berisi gambar pelatihan Anda. Jika Anda mengunggah dokumen langsung dari komputer Anda, perhatikan bahwa Anda hanya dapat mengunggah 30 dokumen sekaligus. Untuk keperluan tutorial ini, pilih Unggah dokumen dari komputer Anda.
-
Di bagian Uji detail kumpulan data, Anda dapat memilih Unggah dokumen dari komputer atau Impor dokumen dari bucket S3. Untuk keperluan tutorial ini, pilih Unggah dokumen dari komputer Anda.
-
Pilih Buat kumpulan data.
-
Setelah membuat kumpulan data, Anda akan dibawa ke halaman detail Dataset. Halaman detail kumpulan data menunjukkan kepada Anda daftar semua dokumen di seluruh kumpulan data Anda, dan bagian mana dari kumpulan data (melatih atau menguji) dokumen Anda telah ditetapkan. Lihat ini di bawah Dataset yang ditetapkan ke kolom. Anda juga dapat melihat yang berikut ini:
-
Nama dokumen
-
Status dokumen
-
Jumlah halaman dalam dokumen
-
Jenis dokumen
-
Ukuran dokumen
-
Jika dokumen merupakan bagian dari set pelatihan atau set pengujian
-
-
Pilih Tambahkan dokumen ke kumpulan data dan tambahkan setidaknya lima dokumen ke kumpulan data pelatihan dan pengujian Anda. Jika sebelumnya Anda memilih Autosplit, Anda dapat menambahkan semua dokumen sekaligus.
-
Jika Anda ingin menambahkan lebih banyak dokumen ke kumpulan data Anda, gunakan menu Tambahkan dokumen untuk melakukannya.
Sebelum Anda dapat mulai melatih adaptor Anda, Anda perlu membubuhi keterangan dokumen pelatihan Anda dengan Kueri. Ini diperlukan untuk membuat entri “annotations-ref” dari file manifes Anda. Setelah Anda menambahkan semua dokumen Anda ke set pelatihan atau pengujian, Anda dapat memulai proses anotasi.
Anotasi dan verifikasi
Pada langkah ini, Anda menetapkan Kueri dan label untuk setiap dokumen yang Anda unggah ke kumpulan data pelatihan dan pengujian Anda. Anda menautkan Kueri ke jawaban yang relevan pada halaman dokumen dengan alat Konsol Manajemen AWS anotasi.
Untuk menetapkan pertanyaan dan jawaban atas dokumen Anda:
-
Pilih Buat kueri dari halaman landing Adapter.
-
Tambahkan kueri dengan memasukkannya ke dalam kotak teks.
-
Untuk menambahkan kueri lainnya, pilih Tambahkan kueri baru. Kueri dapat memiliki respons 'teks mentah' atau respons 'biner - '. Yes/No Untuk membuat kueri dengan respons biner gunakan pengaturan lanjutan.
-
Setelah membuat kueri, Anda harus menetapkan label ke dokumen Anda. Untuk menetapkan label untuk dokumen Anda, pilih Auto-labelingatau Pelabelan manual. Auto-labeling direkomendasikan untuk pertama kalinya melatih adaptor. Pilih Auto-labellingopsi, lalu pilih Mulai pelabelan otomatis.
-
Proses pelabelan otomatis akan membutuhkan waktu untuk diselesaikan. Setelah selesai, Anda diberi tahu bahwa “sekarang Auto-labeling selesai.” Setelah proses pelabelan selesai, Anda harus memverifikasi keakuratan pelabelan. Pilih Verifikasi dokumen di panel Detail adaptor di halaman Detail, lalu pilih Mulai meninjau dari halaman Dataset.
-
Di alat anotasi, Anda dapat memilih dokumen individual dan melihat halaman individual dalam dokumen tersebut. Di bagian “Tinjau tanggapan”, pilih kueri yang ditetapkan ke halaman dokumen Anda. Jika jawaban atas kueri salah, Anda dapat mengedit respons dengan mengklik tombol Edit untuk kueri.
Untuk pertanyaan dengan Yes/No jawaban, pilih Ya, Tidak, atau Kosong. Kemudian, pilih Terapkan.
Saat mengedit OCR untuk label yang ditetapkan ke kueri, pilih respons yang disediakan dan kemudian gambar kotak pembatas di sekitar bagian gambar dokumen. Untuk melakukannya, gunakan tombol pintas “B” atau alat kotak pembatas pada bilah alat di bagian bawah alat anotasi. Kemudian, pilih Terapkan.
Jika kueri harus memiliki lebih dari satu elemen respons (jawaban), Anda dapat menambahkan tanggapan tambahan. Untuk melakukannya, pilih kueri dan kemudian pilih Tambahkan respons. Anda kemudian diminta untuk menggambar kotak pembatas di area dokumen yang memiliki jawabannya. Konfirmasikan bahwa label untuk kotak pembatas Anda sudah benar.
Untuk menambahkan kueri baru untuk halaman dokumen, pilih Tambahkan kueri. Jika Anda menambahkan kueri, Anda harus menentukan kueri yang ingin Anda tambahkan dan kemudian menggambar kotak pembatas untuk label kueri.
Setelah selesai, pilih Kirim dan selanjutnya untuk melanjutkan ke dokumen berikutnya dan kumpulan kueri dan tanggapan berikutnya. Ulangi sampai Anda meninjau semua pertanyaan dan tanggapan Anda.
Setelah Anda meninjau dan mengevaluasi semua pertanyaan dan tanggapan Anda, pilih Kirim dan tutup.
Pelatihan
Setelah menambahkan semua dokumen ke set pelatihan atau set pengujian dan meninjau respons yang dihasilkan untuk kueri, Anda dapat melatih adaptor.
Untuk melatih adaptor:
-
Mulailah dengan mengklik Latih adaptor di halaman Manajemen Dataset.
-
Saat memulai proses pelatihan, Anda dapat menentukan bucket Amazon S3 yang akan berisi output dari pekerjaan pelatihan adaptor Anda. Jika Anda menentukan lokasi bucket Amazon S3 yang belum ada, jalur bucket akan dibuat untuk Anda. Anda juga dapat menambahkan tag ke adaptor Anda untuk melacaknya, dan menyesuaikan pengaturan enkripsi Anda. Sesuaikan pelatihan adaptor agar sesuai dengan kebutuhan Anda dan kemudian pilih Adaptor Kereta.
-
Pada halaman berikut, pilih Adaptor Kereta untuk mengonfirmasi bahwa Anda ingin memulai proses pelatihan. Ini akan membuat versi pertama adaptor Anda.
Setelah proses pelatihan dimulai, Anda dapat memantau status proses pelatihan di halaman landing Adapter.
Anda diberi tahu saat proses pelatihan selesai. Kemudian, Anda dapat mengevaluasi kinerja adaptor dengan memeriksa metrik.
Mengevaluasi kinerja adaptor
Untuk mengevaluasi kinerja model, gunakan panel navigasi kiri untuk memilih versi adaptor yang akan dievaluasi.
Dengan memeriksa metrik adaptor, Anda dapat menentukan kinerja adaptor pada dokumen dalam kumpulan data dan kueri yang telah Anda tentukan. Anda dapat melihat Skor F1, Presisi, dan Ingat untuk adaptor Anda di berbagai elemen data pelatihan: kueri, dokumen, dan halaman. Untuk beralih di antara kinerja elemen ini, pilih tab yang berbeda di bawah panel tampilan metrik.
Anda juga dapat melihat metrik dasar kapan saja dengan mengaktifkan sakelar Beralih ke metrik dasar.
Ringkasan kinerja versi adaptor Anda juga berisi beberapa tips tentang cara meningkatkan kinerja adaptor Anda. Anda dapat meninjau tips ini kapan saja untuk meningkatkan adaptor Anda. Untuk informasi selengkapnya tentang cara mengelola dan meningkatkan adaptor Anda, lihatMengevaluasi dan meningkatkan adaptor Anda.
Untuk mendemonstrasikan adaptor Anda dan melihat kinerjanya pada dokumen:
-
Pilih Coba Adaptor.
-
Pada halaman Coba adaptor, Anda dapat memilih dokumen untuk dianalisis dengan adaptor Anda. Pilih tombol Pilih dokumen dan telusuri ke lokasi dokumen di perangkat Anda. Atau, seret dan lepas dokumen ke panel Unggah dokumen.
Setelah mengunggah dokumen, halaman Coba Adaptor akan diperbarui untuk menampilkan hasil analisis adaptor, termasuk kueri, jawaban kueri, dan tingkat kepercayaan. Jika Anda puas dengan kinerja adaptor Anda, Anda dapat melanjutkan ke inferensi, menggunakan adaptor Anda dalam panggilan ke AnalyzeDocumentatau StartDocumentAnalysis. Jika tidak, Anda dapat meningkatkan kinerja adaptor dengan melatih ulang adaptor Anda dengan dokumen tambahan.
Meningkatkan adaptor
Untuk meningkatkan kinerja adaptor Anda:
-
Pilih Ubah kumpulan data di halaman Detail adaptor.
-
Pada halaman Ikhtisar kumpulan data, pilih Tambahkan dokumen. Untuk melatih ulang adaptor Anda, tambahkan setidaknya lima dokumen lagi ke kumpulan data pelatihan.
Anda diberi tahu bahwa dokumen ditambahkan ke kumpulan data. Pilih Mulai meninjau untuk meninjau hasil proses pelabelan otomatis.
Tinjau pertanyaan dan tanggapan. Setelah Anda meninjau dan menyetujui semua anotasi untuk dokumen yang Anda tambahkan, pilih Kirim dan tutup.
Pada halaman manajemen kumpulan data, pilih Adaptor kereta untuk mulai melatih adaptor Anda tentang semua data dalam kumpulan data pelatihan Anda, termasuk dokumen pelatihan baru.
Setiap pekerjaan pelatihan yang Anda jalankan membuat versi baru adaptor. Perhatikan nama versi adaptor baru untuk memastikan bahwa Anda mengevaluasi kinerja versi adaptor yang tepat.
Inferensi
Setelah membuat adaptor, Anda diberikan ID untuk adaptor khusus Anda. Anda dapat memberikan ID ini ke AnalyzeDocumentoperasi untuk analisis dokumen sinkron, atau StartDocumentAnalysisoperasi untuk analisis asinkron.
Menyediakan ID Adaptor secara otomatis mengintegrasikan adaptor ke dalam proses analisis dan menggunakannya untuk meningkatkan prediksi untuk dokumen Anda. Dengan cara ini, Anda dapat memanfaatkan kemampuan AnalyzeDocument sambil menyesuaikannya agar sesuai dengan kebutuhan Anda.
Untuk contoh cara menjalankan inferensi menggunakan adaptor dan operasi AnalyzeDocument API, lihatMenganalisis Teks Dokumen dengan Amazon Textract.
Ketika beberapa adaptor harus diterapkan ke halaman yang berbeda dalam dokumen yang sama, Anda dapat menentukan satu atau beberapa adaptor dan versi adaptor masing-masing sebagai bagian dari permintaan API. Anda dapat menggunakan parameter Halaman untuk menentukan halaman mana yang akan menerapkan adaptor.
Perhatikan hal-hal berikut:
Ini mirip dengan cara kerja Page parameter untuk Kueri. Perhatikan hal-hal berikut:
-
Jika halaman tidak ditentukan, itu diatur ke secara
["1"]default. -
Karakter berikut valid dalam string parameter:
1 2 3 4 5 6 7 8 9 - *. Spasi kosong tidak valid. -
Saat menggunakan* untuk menunjukkan semua halaman, itu harus menjadi satu-satunya elemen dalam daftar.
-
PageParameter tidak tumpang tindih di seluruh adaptor. Sebuah halaman hanya dapat memiliki satu adaptor yang diterapkan padanya.
Manajemen adaptor
Langkah-langkah berikut diulang secara iteratif (setelah pelatihan awal adaptor Anda):
Pilih Ubah kumpulan data di halaman Detail Adapter di konsol Amazon Textract.
Pilih Tambahkan dokumen.
Tambahkan setidaknya lima dokumen lagi ke kumpulan data pelatihan untuk melatih kembali adaptor Anda.
Anda diberi tahu bahwa dokumen telah ditambahkan ke kumpulan data. Pilih Mulai meninjau untuk meninjau hasil proses pelabelan otomatis.
Tinjau pertanyaan dan tanggapan. Setelah Anda meninjau dan menyetujui semua anotasi untuk dokumen baru, pilih Adaptor kereta.
Tunggu hingga adaptor menyelesaikan babak baru pelatihan, lalu periksa metrik kinerja untuk versi adaptor baru Anda.
Setelah Anda melatih model Anda ke tingkat kinerja target Anda, Anda dapat menggunakan adaptor Anda untuk inferensi dalam aplikasi Anda.
Pastikan untuk menghapus versi adaptor yang tidak lagi Anda butuhkan. Untuk menghapus adaptor:
Buka halaman landing Adapters, pilih adaptor, dan pilih Hapus.
Ketik Hapus ke dalam kotak teks, lalu pilih Hapus.
