STL_LOAD_COMMITS - Amazon Redshift

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

STL_LOAD_COMMITS

Mengembalikan informasi untuk melacak atau memecahkan masalah beban data.

Tampilan ini mencatat kemajuan setiap file data saat dimuat ke dalam tabel database.

STL_ LOAD _ COMMITS dapat dilihat oleh semua pengguna. Pengguna super dapat melihat semua baris; pengguna biasa hanya dapat melihat data mereka sendiri. Untuk informasi selengkapnya, lihat Visibilitas data dalam tabel dan tampilan sistem.

catatan

STL_ LOAD _ COMMITS hanya berisi kueri yang dijalankan di cluster utama. Itu tidak berisi kueri yang dijalankan pada cluster penskalaan konkurensi. Untuk mengakses kueri yang dijalankan pada kluster penskalaan utama dan konkurensi, sebaiknya gunakan tampilan pemantauan. SYS SYS_LOAD_DETAIL Data dalam tampilan SYS pemantauan diformat agar lebih mudah digunakan dan dipahami.

Kolom tabel

Nama kolom Jenis data Deskripsi
userid integer ID pengguna yang membuat entri.
kueri integer ID kueri. Kolom kueri dapat digunakan untuk bergabung dengan tabel dan tampilan sistem lainnya.
mengiris integer Slice dimuat untuk entri ini.
name karakter (256) Nilai yang ditentukan sistem.
nama berkas karakter (256) Nama file yang dilacak.
byte_offset integer Informasi ini hanya untuk penggunaan internal.
lines_scanned integer Jumlah baris yang dipindai dari file beban. Nomor ini mungkin tidak cocok dengan jumlah baris yang benar-benar dimuat. Misalnya, beban dapat memindai tetapi mentolerir sejumlah catatan buruk, berdasarkan MAXERROR opsi dalam COPY perintah.
kesalahan integer Informasi ini hanya untuk penggunaan internal.
jam malam timestamp Waktu entri ini terakhir diperbarui.
status integer Informasi ini hanya untuk penggunaan internal.
file_format karakter (16) Format file pemuatan. Kemungkinan nilainya adalah sebagai berikut:
  • Avro

  • JSON

  • ORC

  • Parquet

  • Teks

adalah_sebagian integer Nilai bahwa jika benar (1) menunjukkan file input dibagi menjadi rentang selama COPY operasi. Jika nilai ini salah (0), file input tidak dibagi.
start_offset bigint Nilai itu, jika file input dibagi selama COPY operasi, menunjukkan nilai offset dari split (dalam byte). Setiap pemisahan file dicatat sebagai catatan terpisah dengan nilai start_offset yang sesuai. Jika file tidak dibagi, nilai ini adalah 0.
copy_job_id bigint Pengidentifikasi pekerjaan salinan. A 0 menunjukkan tidak ada pengenal pekerjaan.

Kueri Sampel

Contoh berikut mengembalikan rincian untuk COPY operasi terakhir.

select query, trim(filename) as file, curtime as updated from stl_load_commits where query = pg_last_copy_id(); query | file | updated -------+----------------------------------+---------------------------- 28554 | s3://dw-tickit/category_pipe.txt | 2013-11-01 17:14:52.648486 (1 row)

Kueri berikut berisi entri untuk beban baru tabel dalam TICKIT database:

select query, trim(filename), curtime from stl_load_commits where filename like '%tickit%' order by query;
query | btrim | curtime -------+---------------------------+---------------------------- 22475 | tickit/allusers_pipe.txt | 2013-02-08 20:58:23.274186 22478 | tickit/venue_pipe.txt | 2013-02-08 20:58:25.070604 22480 | tickit/category_pipe.txt | 2013-02-08 20:58:27.333472 22482 | tickit/date2008_pipe.txt | 2013-02-08 20:58:28.608305 22485 | tickit/allevents_pipe.txt | 2013-02-08 20:58:29.99489 22487 | tickit/listings_pipe.txt | 2013-02-08 20:58:37.632939 22593 | tickit/allusers_pipe.txt | 2013-02-08 21:04:08.400491 22596 | tickit/venue_pipe.txt | 2013-02-08 21:04:10.056055 22598 | tickit/category_pipe.txt | 2013-02-08 21:04:11.465049 22600 | tickit/date2008_pipe.txt | 2013-02-08 21:04:12.461502 22603 | tickit/allevents_pipe.txt | 2013-02-08 21:04:14.785124 22605 | tickit/listings_pipe.txt | 2013-02-08 21:04:20.170594 (12 rows)

Fakta bahwa catatan ditulis ke file log untuk tampilan sistem ini tidak berarti bahwa beban dilakukan dengan sukses sebagai bagian dari transaksi yang berisi. Untuk memverifikasi komit pemuatan, kueri UTILITYTEXT tampilan STL _ dan cari COMMIT catatan yang sesuai dengan COPY transaksi. Misalnya, kueri ini bergabung dengan STL _ LOAD _ COMMITS dan STL _ QUERY berdasarkan subkueri terhadap STL _: UTILITYTEXT

select l.query,rtrim(l.filename),q.xid from stl_load_commits l, stl_query q where l.query=q.query and exists (select xid from stl_utilitytext where xid=q.xid and rtrim("text")='COMMIT'); query | rtrim | xid -------+---------------------------+------- 22600 | tickit/date2008_pipe.txt | 68311 22480 | tickit/category_pipe.txt | 68066 7508 | allusers_pipe.txt | 23365 7552 | category_pipe.txt | 23415 7576 | allevents_pipe.txt | 23429 7516 | venue_pipe.txt | 23390 7604 | listings_pipe.txt | 23445 22596 | tickit/venue_pipe.txt | 68309 22605 | tickit/listings_pipe.txt | 68316 22593 | tickit/allusers_pipe.txt | 68305 22485 | tickit/allevents_pipe.txt | 68071 7561 | allevents_pipe.txt | 23429 7541 | category_pipe.txt | 23415 7558 | date2008_pipe.txt | 23428 22478 | tickit/venue_pipe.txt | 68065 526 | date2008_pipe.txt | 2572 7466 | allusers_pipe.txt | 23365 22482 | tickit/date2008_pipe.txt | 68067 22598 | tickit/category_pipe.txt | 68310 22603 | tickit/allevents_pipe.txt | 68315 22475 | tickit/allusers_pipe.txt | 68061 547 | date2008_pipe.txt | 2572 22487 | tickit/listings_pipe.txt | 68072 7531 | venue_pipe.txt | 23390 7583 | listings_pipe.txt | 23445 (25 rows)

Contoh berikut menyoroti is_partial dan start_offset nilai kolom.

-- Single large file copy without scan range SELECT count(*) FROM stl_load_commits WHERE query = pg_last_copy_id(); 1 -- Single large uncompressed, delimited file copy with scan range SELECT count(*) FROM stl_load_commits WHERE query = pg_last_copy_id(); 16 -- Scan range offset logging in the file at 64MB boundary. SELECT start_offset FROM stl_load_commits WHERE query = pg_last_copy_id() ORDER BY start_offset; 0 67108864 134217728 201326592 268435456 335544320 402653184 469762048 536870912 603979776 671088640 738197504 805306368 872415232 939524096 1006632960