Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Konfigurasikan penyimpanan untuk digunakan dengan AWS Transfer Family

Topik ini menjelaskan opsi penyimpanan yang dapat Anda gunakan AWS Transfer Family. Anda dapat menggunakan Amazon S3 atau Amazon EFS sebagai penyimpanan untuk server Transfer Family Anda.

Konfigurasikan bucket Amazon S3

AWS Transfer Family mengakses bucket Amazon S3 untuk melayani permintaan transfer pengguna, jadi Anda perlu menyediakan bucket Amazon S3 sebagai bagian dari pengaturan server yang mendukung protokol transfer file Anda. Anda dapat menggunakan bucket yang sudah ada, atau Anda dapat membuat yang baru.

Saat Anda mengatur pengguna, Anda menetapkan masing-masing peran IAM kepada mereka. Peran ini menentukan tingkat akses yang mereka miliki ke bucket Amazon S3 Anda.

Untuk informasi tentang cara membuat bucket baru, lihat Bagaimana cara membuat bucket S3? di Panduan Pengguna Layanan Penyimpanan Sederhana Amazon.

Titik akses Amazon S3

AWS Transfer Family mendukung Poin Akses Amazon S3, fitur Amazon S3 yang memungkinkan Anda mengelola akses granular ke kumpulan data bersama dengan mudah. Anda dapat menggunakan alias S3 Access Point di mana pun Anda menggunakan nama bucket S3. Anda dapat membuat ratusan titik akses di Amazon S3 untuk pengguna yang memiliki izin berbeda untuk mengakses data bersama di bucket Amazon S3.

Misalnya, Anda dapat menggunakan titik akses untuk memungkinkan tiga tim berbeda memiliki akses ke kumpulan data bersama yang sama di mana satu tim dapat membaca data dari S3, tim kedua dapat menulis data ke S3, dan tim ketiga dapat membaca, menulis, dan menghapus data dari S3. Untuk menerapkan kontrol akses granular seperti yang disebutkan di atas, Anda dapat membuat titik akses S3 yang berisi kebijakan yang memberikan akses asimetris ke tim yang berbeda. Anda dapat menggunakan titik akses S3 dengan server Transfer Family Anda untuk mencapai kontrol akses yang halus, tanpa membuat kebijakan bucket S3 kompleks yang mencakup ratusan kasus penggunaan. Untuk mempelajari lebih lanjut tentang cara menggunakan titik akses S3 dengan server Transfer Family, lihat Tingkatkan kontrol akses data dengan AWS Transfer Family dan posting blog Amazon S3.

Perilaku Amazon S3 HeadObject

Di Amazon S3, bucket dan objek adalah sumber daya utama, dan objek disimpan dalam bucket. Amazon S3 dapat meniru sistem file hierarkis, tetapi terkadang dapat berperilaku berbeda dari sistem file biasa. Misalnya, direktori bukan konsep kelas satu di Amazon S3 tetapi didasarkan pada kunci objek. AWS Transfer Family menyimpulkan jalur direktori dengan memisahkan kunci objek dengan karakter garis miring maju (/), memperlakukan elemen terakhir sebagai nama file, lalu mengelompokkan nama file yang memiliki awalan yang sama bersama-sama di bawah jalur yang sama. Objek nol-byte dibuat untuk mewakili jalur folder saat Anda membuat direktori kosong menggunakan mkdir atau dengan menggunakan konsol Amazon S3. Kunci untuk benda-benda ini berakhir dengan garis miring ke depan. Objek nol-byte ini dijelaskan dalam Mengatur objek di konsol Amazon S3 menggunakan folder di Panduan Pengguna Amazon S3.

Saat Anda menjalankan ls perintah, dan beberapa hasilnya adalah objek zero-byte Amazon S3 (objek ini memiliki kunci yang diakhiri dengan karakter garis miring ke depan), Transfer Family mengeluarkan HeadObject permintaan untuk masing-masing objek ini (lihat di Referensi API Layanan Penyimpanan Sederhana Amazon untuk HeadObjectdetailnya). Hal ini dapat mengakibatkan masalah berikut saat menggunakan Amazon S3 sebagai penyimpanan Anda dengan Transfer Family.

Memberikan kemampuan untuk hanya menulis dan daftar file

Dalam beberapa kasus, Anda mungkin hanya ingin menawarkan akses tulis ke objek Amazon S3 Anda. Misalnya, Anda mungkin ingin menyediakan akses untuk menulis (atau mengunggah) dan mencantumkan objek dalam ember, tetapi tidak untuk membaca (mengunduh) objek. Untuk melakukan ls dan mkdir memerintahkan dengan menggunakan klien transfer file, Anda harus memiliki Amazon S3 ListObjects dan PutObject izin. Namun, ketika Transfer Family perlu melakukan HeadObject panggilan untuk menulis atau mencantumkan file, panggilan gagal dengan kesalahan Akses ditolak, karena panggilan ini memerlukan GetObject izin.

Dalam hal ini, Anda dapat memberikan akses dengan menambahkan kondisi kebijakan AWS Identity and Access Management (IAM) yang menambahkan GetObject izin hanya untuk objek yang diakhiri dengan garis miring ()/. Kondisi ini mencegah GetObject panggilan pada file (sehingga tidak dapat dibaca), tetapi memungkinkan pengguna untuk membuat daftar dan melintasi folder. Kebijakan contoh berikut hanya menawarkan akses tulis dan daftar ke bucket Amazon S3 Anda. Untuk menggunakan kebijakan ini, ganti DOC-EXAMPLE-BUCKET dengan nama bucket Anda.

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "AllowListing",
            "Effect": "Allow",
            "Action": "s3:ListBucket",
            "Resource": "arn:aws:s3:::DOC-EXAMPLE-BUCKET"
        },
        {
            "Sid": "AllowReadWrite",
            "Effect": "Allow",
            "Action": [
                "s3:PutObject",
                "s3:GetObject",
                "s3:GetObjectVersion"
            ],
            "Resource": [
                "arn:aws:s3:::DOC-EXAMPLE-BUCKET/*"
            ]
         },
      {
            "Sid": "DenyIfNotFolder",
            "Effect": "Deny",
            "Action": [
                "s3:GetObject",
                "s3:GetObjectVersion"
            ],
            "NotResource": [
                "arn:aws:s3:::DOC-EXAMPLE-BUCKET/*/"
            ]
         }
      ]
}

Sejumlah besar objek nol-byte menyebabkan masalah latensi

Jika bucket Amazon S3 Anda berisi sejumlah besar objek nol-byte ini, Transfer Family mengeluarkan banyak panggilan, yang dapat mengakibatkan HeadObject penundaan pemrosesan. Solusi yang disarankan untuk masalah ini adalah mengaktifkan Direktori yang Dioptimalkan untuk mengurangi latensi.

Misalnya, Anda masuk ke direktori home Anda, dan Anda memiliki 10.000 subdirektori. Dengan kata lain, bucket Amazon S3 Anda memiliki 10.000 folder. Dalam skenario ini, jika Anda menjalankan perintah ls (daftar), operasi daftar memakan waktu antara enam dan delapan menit. Namun, jika Anda mengoptimalkan direktori Anda, operasi ini hanya membutuhkan beberapa detik. Anda mengatur opsi ini di layar Konfigurasikan detail tambahan selama pembuatan server atau prosedur pembaruan. Prosedur-prosedur ini dirinci di bawah Mengkonfigurasi titik akhir server SFTP, FTPS, atau FTP topik.

Jika Anda tidak atau tidak dapat mengoptimalkan direktori Anda, solusi alternatif untuk masalah ini adalah menghapus semua objek zero-byte Anda. Perhatikan hal berikut:

Terakhir, satu lagi solusi yang mungkin adalah membatasi jumlah objek yang terlihat melalui kondisi kebijakan untuk mengurangi jumlah HeadObject panggilan. Agar ini menjadi solusi yang bisa diterapkan, Anda harus menerima bahwa Anda mungkin hanya dapat melihat sekumpulan terbatas semua sub-direktori Anda.

Konfigurasikan sistem file Amazon EFS

AWS Transfer Family mengakses Amazon Elastic File System (Amazon EFS) untuk melayani permintaan transfer pengguna Anda. Jadi, Anda harus menyediakan sistem file Amazon EFS sebagai bagian dari pengaturan server yang mendukung protokol transfer file Anda. Anda dapat menggunakan sistem file yang ada, atau Anda dapat membuat yang baru.

Perhatikan hal berikut:

Untuk detail selengkapnya tentang cara AWS Transfer Family dan Amazon EFS bekerja sama, lihat Menggunakan AWS Transfer Family untuk mengakses file di sistem file Amazon EFS Anda di Panduan Pengguna Amazon Elastic File System.

Kepemilikan file Amazon EFS

Amazon EFS menggunakan model izin file Portable Operating System Interface (POSIX) untuk mewakili kepemilikan file.

Di POSIX, pengguna dalam sistem dikategorikan ke dalam tiga kelas izin yang berbeda: Ketika Anda mengizinkan pengguna untuk mengakses file yang disimpan dalam sistem file Amazon EFS menggunakan AWS Transfer Family, Anda harus menetapkan mereka “profil POSIX.” Profil ini digunakan untuk menentukan akses mereka ke file dan direktori di sistem file Amazon EFS.

Dalam model izin POSIX, setiap objek sistem file (file, direktori, tautan simbolis, pipa bernama, dan soket) dikaitkan dengan tiga set izin yang disebutkan sebelumnya. Objek Amazon EFS memiliki mode gaya Unix yang terkait dengannya. Nilai mode ini mendefinisikan izin untuk melakukan tindakan pada objek tersebut.

Selain itu, pada sistem bergaya Unix, pengguna dan grup dipetakan ke pengidentifikasi numerik, yang digunakan Amazon EFS untuk mewakili kepemilikan file. Untuk Amazon EFS, objek dimiliki oleh satu pemilik dan satu grup. Amazon EFS menggunakan ID numerik yang dipetakan untuk memeriksa izin saat pengguna mencoba mengakses objek sistem file.

Menyiapkan pengguna Amazon EFS untuk Transfer Family

Sebelum mengatur pengguna Amazon EFS, Anda dapat melakukan salah satu hal berikut:

Konfigurasikan pengguna Transfer Family di Amazon EFS

Transfer Family memetakan pengguna ke UID/GID dan direktori yang Anda tentukan. Jika UID/GID/direktori belum ada di EFS, maka Anda harus membuatnya sebelum menetapkannya di Transfer ke pengguna. Detail untuk membuat pengguna Amazon EFS dijelaskan dalam Bekerja dengan pengguna, grup, dan izin di Tingkat Sistem File Jaringan (NFS) di Panduan Pengguna Amazon Elastic File System.

Anda dapat mengotomatiskan proses, dengan menggunakan CloudWatch aturan dan fungsi Lambda. Misalnya fungsi Lambda yang berinteraksi dengan EFS, lihat Menggunakan Amazon EFS untuk AWS Lambda aplikasi tanpa server Anda.

Selain itu, Anda dapat mengonfigurasi direktori logis untuk pengguna Transfer Family Anda. Untuk detailnya, lihat Konfigurasikan direktori logis untuk Amazon EFS bagian dalam Menggunakan direktori logis untuk menyederhanakan struktur direktori Transfer Family topik.

Buat pengguna root Amazon EFS

Jika organisasi Anda merasa nyaman bagi Anda untuk mengaktifkan akses pengguna root melalui SFTP/FTPS untuk konfigurasi pengguna Anda, Anda dapat membuat pengguna yang UID dan GID adalah 0 (pengguna root), kemudian gunakan pengguna root itu untuk membuat folder dan menetapkan pemilik ID POSIX untuk pengguna lainnya. Keuntungan dari opsi ini adalah tidak perlu memasang sistem file Amazon EFS.

Lakukan langkah-langkah yang dijelaskan dalamMenambahkan pengguna yang dikelola layanan Amazon EFS, dan untuk ID Pengguna dan ID Grup, masukkan 0 (nol).

Perintah Amazon EFS yang didukung

Perintah berikut didukung untuk Amazon EFS untuk AWS Transfer Family.