Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Connessione a Netezza con AWS Schema Conversion Tool
Puoi utilizzarlo AWS SCT per convertire schemi, oggetti di codice e codice applicativo da Netezza ad Amazon Redshift.
Privilegi per Netezza come fonte
I seguenti privilegi sono necessari per utilizzare Netezza come fonte:
-
seleziona nella vista system.definition_schema.system
-
seleziona nella tabella system.definition_schema.system
-
seleziona nella tabella system.definition_schema.management
-
elenco su
<database_name>
-
elenco su
<schema_name>
-
elenco su
<database_name>
.all.table -
elenco su
<database_name>
.all.tabella esterna -
elenco su
<database_name>
.all.view -
elenco su
<database_name>
.all.vista materializzata -
elenco su
<database_name>
.all. procedura -
elenco su
<database_name>
.all.sequenza -
elenco su
<database_name>
.all.function -
elenco su
<database_name>
.all.aggregate
Nell'esempio precedente, sostituite i segnaposto come segue:
-
Replace (Sostituisci)
database_name
con il nome del database di origine. -
Replace (Sostituisci)
schema_name
con il nome dello schema di origine.
AWS SCT richiede l'accesso alle seguenti tabelle e viste di sistema. È possibile concedere l'accesso a questi oggetti anziché concedere l'accesso a system.definition_schema.system view
e system.definition_schema.system tables
nell'elenco precedente.
selezionate su system.definition_schema. _t_aggregate
seleziona su system.definition_schema. _t_class
seleziona su system.definition_schema. _t_constraint
seleziona su system.definition_schema. _t_const_relattr
seleziona su system.definition_schema. _t_database
seleziona su system.definition_schema. _t_grobj_priv
seleziona system.definition_schema. _t_groupsr
seleziona su system.definition_schema. _t_hist_config
seleziona su system.definition_schema. _t_object
seleziona su system.definition_schema. _t_object_classes
seleziona su system.definition_schema. _t_proc
seleziona su system.definition_schema. _t_type
seleziona su system.definition_schema. _t_user
seleziona su system.definition_schema. _t_usrobj_priv
seleziona system.definition_schema. _vt_sequence
seleziona su system.definition_schema. _v_aggregate
seleziona su system.definition_schema. _v_constraint_depends
seleziona su system.definition_schema. _v_database
seleziona su system.definition_schema. _v_datatype
seleziona system.definition_schema. _v_dslice
seleziona su system.definition_schema. _v_function
seleziona su system.definition_schema. _v_group
seleziona su system.definition_schema. _v_obj_relation
seleziona su system.definition_schema. _v_obj_relation_xdb
seleziona su system.definition_schema. _v_procedura
seleziona su system.definition_schema. _v_relation_column
seleziona su system.definition_schema. _v_relation_keydata
seleziona system.definition_schema. _v_relobjclasses
seleziona su system.definition_schema. _v_schema_xdb
seleziona su system.definition_schema. _v_sequenza
seleziona su system.definition_schema. _v_synonym
seleziona su system.definition_schema. _v_system_info
seleziona system.definition_schema. _v_sys_constraint
seleziona system.definition_schema. _v_sys_object_dslice_info
seleziona su system.definition_schema. _v_sys_user
seleziona su system.definition_schema. _v_table
seleziona su system.definition_schema. _v_table_constraint
seleziona system.definition_schema. _v_table_dist_map
seleziona su system.definition_schema. _v_table_organize_column
seleziona system.definition_schema. _v_table_storage_stat
seleziona system.definition_schema. _v_user
seleziona su system.definition_schema. _v_view
seleziona su system.information_schema. _v_relation_column
seleziona su system.information_schema. _v_table
seleziona su $hist_column_access_*
Connessione a Netezza come sorgente
Utilizza la seguente procedura per connetterti al database di origine Netezza con AWS Schema Conversion Tool.
Per connetterti a un database di origine Netezza
-
Nel AWS Schema Conversion Tool, scegli Aggiungi fonte.
-
Scegli Netezza, quindi scegli Avanti.
Viene visualizzata la finestra di dialogo Aggiungi sorgente.
-
Per Nome connessione, inserisci un nome per il tuo database. AWS SCT visualizza questo nome nell'albero nel pannello di sinistra.
-
Usa le credenziali del database da AWS Secrets Manager o inseriscile manualmente:
-
Per utilizzare le credenziali del database di Secrets Manager, utilizzare le seguenti istruzioni:
-
Per AWS Segreto, scegli il nome del segreto.
-
Scegli Popola per inserire automaticamente tutti i valori nella finestra di dialogo di connessione al database di Secrets Manager.
Per informazioni sull'utilizzo delle credenziali del database da Secrets Manager, vedereConfigurazione in AWS Secrets ManagerAWS Schema Conversion Tool.
-
-
Per inserire manualmente le informazioni di connessione al database di origine Netezza, utilizzate le seguenti istruzioni:
Parametro Azione Server name (Nome del server) Immettete il nome Domain Name System (DNS) o l'indirizzo IP del server del database di origine.
Porta del server Immetti la porta utilizzata per la connessione al server del database di origine.
User name (Nome utente) e Password (Password) Immettete le credenziali del database per connettervi al server del database di origine.
AWS SCT utilizza la password per connettersi al database di origine solo quando si sceglie di connettersi al database in un progetto. Per evitare di esporre la password del database di origine, per impostazione predefinita AWS SCT non memorizza la password. Se chiudi il tuo progetto AWS SCT e lo riapri, ti viene richiesta la password per la connessione al database di origine in base alle necessità.
Memorizza la password AWS SCT crea un archivio sicuro per archiviare SSL certificati e password del database. Attivando questa opzione, è possibile memorizzare la password del database e connettersi rapidamente al database senza dover inserire la password.
Percorso del driver Netezza Immetti il percorso al driver da utilizzare per la connessione al database di origine. Per ulteriori informazioni, consulta Installazione JDBC dei driver per AWS Schema Conversion Tool.
Se archivi il percorso del driver nelle impostazioni globali del progetto, il percorso del driver non viene visualizzato nella finestra di dialogo della connessione. Per ulteriori informazioni, consulta Memorizzazione dei percorsi dei conducenti nelle impostazioni globali.
-
-
Scegli Test Connection per verificare che sia AWS SCT possibile connettersi al database di origine.
-
Scegli Connect per connetterti al tuo database di origine.
Configurazione della replica continua dei dati
Dopo aver convertito gli schemi del database Netezza e averli applicati al database Amazon Redshift, puoi migrare i dati con agenti di estrazione dei dati AWS SCT . L'agente estrae i tuoi dati e li carica nel tuo bucket Amazon S3. Puoi quindi utilizzarli AWS SCT per copiare i dati da Amazon S3 ad Amazon Redshift.
Se i dati nel database di origine cambiano durante il processo di migrazione, puoi acquisire le modifiche in corso con AWS SCT i tuoi agenti di estrazione dei dati. È quindi possibile replicare queste modifiche in corso nel database di destinazione dopo aver completato la migrazione iniziale dei dati. Questo processo è denominato replica continua dei dati o acquisizione dei dati relativi alle modifiche ()CDC.
Per configurare la replica continua dei dati per le migrazioni da Netezza ad Amazon Redshift
-
Nel tuo database di origine, crea un database di cronologia. È possibile utilizzare il seguente esempio di codice nell'interfaccia a riga di comando di Netezza (CLI).
nzhistcreatedb -d
history_database_name
-t query -v 1 -uload_user
-ohistdb_owner
-pyour_password
Nell'esempio precedente, sostituisci
history_database_name
con il nome del database della cronologia. Quindi, sostituisciload_user
con il nome dell'utente che avete definito per caricare i dati della cronologia nel database. Quindi, sostituiscihistdb_owner
con il nome dell'utente che hai definito come proprietario del database di cronologia. Assicurati di aver già creato questo utente e di aver concesso l'CREATE DATABASE
autorizzazione. Infine, sostituisciyour_password
con una password sicura. -
Configura la registrazione della cronologia. A tale scopo, utilizzate il seguente esempio di codice.
CREATE HISTORY CONFIGURATION
history_configuration_name
HISTTYPE QUERY DATABASEhistory_database_name
USERload_user
PASSWORDyour_password
COLLECT PLAN, COLUMN LOADINTERVAL 1 LOADMINTHRESHOLD 0 LOADMAXTHRESHOLD 0 STORAGELIMIT 25 LOADRETRY 2 VERSION 1;Nell'esempio precedente, sostituisci
history_configuration_name
ehistory_database_name
con i nomi della configurazione della cronologia e del database della cronologia. Quindi, sostituisciload_user
con il nome dell'utente che avete definito per caricare i dati della cronologia nel database. Quindi, sostituisciyour_password
con una password sicura. -
Concedi le autorizzazioni di lettura per tutte le tabelle nel database di cronologia. È possibile utilizzare il seguente esempio di codice per concedere l'
SELECT
autorizzazione.GRANT SELECT ON
history_database_name
.ALL.TABLE TOyour_user
;Nell'esempio precedente, sostituisci
history_database_name
con il nome del database della cronologia. Quindi, sostituisciyour_user
con il nome dell'utente con autorizzazioni minime per lavorare con il database Netezza. Utilizzi le credenziali di questo utente del database in. AWS SCT -
Raccogli statistiche per ogni tabella del tuo schema di origine per ottenere informazioni sulla cardinalità delle colonne. È possibile utilizzare il seguente comando per generare statistiche nel database della cronologia.
GENERATE STATISTICS on "
schema_name
"."table_name
";Nell'esempio precedente, sostituisci
schema_name
etable_name
con il nome dello schema e della tabella del database. -
Assicurati di aver completato i prerequisiti eseguendo la seguente query:
SELECT COUNT(*) FROM
history_database_name
.history_schema_name
."$hist_column_access_N
";Nell'esempio precedente, sostituisci
history_database_name
ehistory_schema_name
con il nome del database di cronologia e dello schema. Quindi, sostituisciN
con il numero di versione del database della cronologia. Per ulteriori informazioni sulle versioni del database di cronologia, consulta la documentazione di IBM Netezza. -
Installa i tuoi agenti di estrazione dei dati. Per ulteriori informazioni, consulta Installazione degli agenti di estrazione.
Assicurati che il
{working.folder}
parametro nelsettings.properties
file per tutte le istanze dell'estrattore punti alla stessa cartella. In questo caso, i tuoi estrattori possono coordinare la CDC sessione e utilizzare un unico punto di transazione per tutte le sottoattività. -
Registra il tuo agente di estrazione dati. Per ulteriori informazioni, consulta Registrazione degli agenti di estrazione con AWS Schema Conversion Tool.
-
Crea la tua CDC attività. Per ulteriori informazioni, consulta Creazione, esecuzione e monitoraggio di qualsiasi AWS SCT attività.
-
Apri il tuo progetto in AWS SCT. Nel riquadro a sinistra, scegli la tabella di origine. Apri il menu contestuale (fai clic con il pulsante destro del mouse) e scegli Crea attività locale.
-
In Nome attività, inserisci un nome descrittivo per l'attività di migrazione dei dati.
-
Per la modalità di migrazione, scegli Estrai, carica e copia.
-
Selezionare Enable (Abilita)CDC.
-
Scegli la scheda CDCdelle impostazioni e definisci l'ambito e la pianificazione delle CDC sessioni.
-
Scegli Test task per verificare che sia possibile connettersi alla cartella di lavoro, al bucket Amazon S3 e al data warehouse Amazon Redshift.
-
Scegli Crea per creare la tua attività.
-
Scegli la scheda Attività, scegli l'attività dall'elenco e scegli Avvia.
-
-
L' AWS SCT attività mantiene la coerenza transazionale nel database di destinazione. L'agente di estrazione dei dati replica le transazioni dall'origine nell'ordine degli ID delle transazioni.
Se interrompi una delle sessioni di migrazione o se la procedura fallisce, anche l'CDCelaborazione si interrompe.
Impostazioni di conversione da Netezza ad Amazon Redshift
Per modificare le impostazioni di conversione da Netezza ad Amazon Redshift, scegli Impostazioni AWS SCT in, quindi scegli Impostazioni di conversione. Dall'elenco superiore, scegli Netezza, quindi scegli Netezza — Amazon Redshift. AWS SCT mostra tutte le impostazioni disponibili per la conversione da Netezza ad Amazon Redshift.
Le impostazioni AWS SCT di conversione da Netezza ad Amazon Redshift includono le seguenti opzioni:
-
Per limitare il numero di commenti con azioni nel codice convertito.
Per Aggiungi commenti nel codice convertito per le azioni di gravità selezionata o superiore, scegli la gravità delle azioni. AWS SCT aggiunge commenti nel codice convertito per le azioni con la gravità selezionata o superiore.
Ad esempio, per ridurre al minimo il numero di commenti nel codice convertito, scegli Solo errori. Per includere commenti per tutti gli elementi d'azione nel codice convertito, scegli Tutti i messaggi.
-
Per impostare il numero massimo di tabelle applicabili AWS SCT al cluster Amazon Redshift di destinazione.
Per Il numero massimo di tabelle per il cluster Amazon Redshift di destinazione, scegli il numero di tabelle da AWS SCT applicare al tuo cluster Amazon Redshift.
Amazon Redshift dispone di quote che limitano l'utilizzo delle tabelle per diversi tipi di nodo cluster. Se scegli Auto, AWS SCT determina il numero di tabelle da applicare al cluster Amazon Redshift di destinazione in base al tipo di nodo. Facoltativamente, scegli il valore manualmente. Per ulteriori informazioni, consulta Quote e limiti in Amazon Redshift nella Guida alla gestione di Amazon Redshift.
AWS SCT converte tutte le tabelle di origine, anche se è superiore a quella che il cluster Amazon Redshift può archiviare. AWS SCT memorizza il codice convertito nel progetto e non lo applica al database di destinazione. Se raggiungi la quota del cluster Amazon Redshift per le tabelle quando applichi il codice convertito, viene AWS SCT visualizzato un messaggio di avviso. Inoltre, AWS SCT applica le tabelle al cluster Amazon Redshift di destinazione fino a quando il numero di tabelle raggiunge il limite.
-
Per applicare la compressione alle colonne delle tabelle di Amazon Redshift. Per farlo, seleziona Usa la codifica di compressione.
AWS SCT assegna automaticamente la codifica di compressione alle colonne utilizzando l'algoritmo Amazon Redshift predefinito. Per ulteriori informazioni, consulta le codifiche di compressione nella Amazon Redshift Database Developer Guide.
Per impostazione predefinita, Amazon Redshift non applica la compressione alle colonne definite come chiavi di ordinamento e distribuzione. Puoi modificare questo comportamento e applicare la compressione a queste colonne. Per farlo, seleziona Usa la codifica di compressione per KEY le colonne. È possibile selezionare questa opzione solo quando si seleziona l'opzione Usa codifica di compressione.
Impostazioni di ottimizzazione delle conversioni da Netezza ad Amazon Redshift
Per modificare le impostazioni di ottimizzazione delle conversioni da Netezza ad Amazon Redshift, scegli Impostazioni AWS SCT in, quindi scegli Impostazioni di conversione. Dall'elenco superiore, scegli Netezza, quindi scegli Netezza — Amazon Redshift. Nel riquadro di sinistra, scegli Strategie di ottimizzazione. AWS SCT visualizza le impostazioni di ottimizzazione della conversione per la conversione da Netezza ad Amazon Redshift.
Le impostazioni AWS SCT di ottimizzazione della conversione da Netezza ad Amazon Redshift includono opzioni per quanto segue:
-
Per utilizzare l'ottimizzazione automatica delle tabelle. A tale scopo, seleziona Usa l'ottimizzazione automatica delle tabelle di Amazon Redshift.
L'ottimizzazione automatica delle tabelle è un processo di ottimizzazione automatica in Amazon Redshift che ottimizza automaticamente la progettazione delle tabelle. Per ulteriori informazioni, consulta Lavorare con l'ottimizzazione automatica delle tabelle nella Amazon Redshift Database Developer Guide.
Per fare affidamento solo sull'ottimizzazione automatica delle tabelle, scegli Nessuno per la strategia iniziale di selezione delle chiavi.
-
Per scegliere le chiavi di ordinamento e distribuzione utilizzando la tua strategia.
Puoi scegliere le chiavi di ordinamento e distribuzione utilizzando i metadati di Amazon Redshift, le informazioni statistiche o entrambe le opzioni. Per la strategia di selezione delle chiavi iniziale nella scheda Strategie di ottimizzazione, scegli una delle seguenti opzioni:
Usa i metadati, ignora le informazioni statistiche
Ignora i metadati, usa le informazioni statistiche
Usa metadati e informazioni statistiche
A seconda dell'opzione scelta, puoi selezionare strategie di ottimizzazione. Quindi, per ogni strategia, inserisci il valore (0—100). Questi valori definiscono il peso di ogni strategia. L'utilizzo di questi valori di peso AWS SCT definisce in che modo ciascuna regola influisce sulla scelta delle chiavi di distribuzione e ordinamento. I valori predefiniti si basano sulle best practice di AWS migrazione.
È possibile definire la dimensione delle tabelle piccole per la strategia Find small tables. Per Numero minimo di righe nella tabella e Numero massimo di righe nella tabella, inserisci il numero minimo e massimo di righe in una tabella per definirla come una tabella piccola. AWS SCT applica lo stile
ALL
di distribuzione alle tabelle di piccole dimensioni. In questo caso, una copia dell'intera tabella viene distribuita su ogni nodo. -
Per configurare i dettagli della strategia.
Oltre a definire il peso per ogni strategia di ottimizzazione, puoi configurare le impostazioni di ottimizzazione. Per farlo, scegli Ottimizzazione delle conversioni.
Per il limite delle colonne chiave di ordinamento, inserisci il numero massimo di colonne nella chiave di ordinamento.
Per Valore di soglia asimmetrico, inserite la percentuale (0—100) di un valore distorto per una colonna. AWS SCT esclude le colonne con un valore di inclinazione superiore alla soglia dall'elenco dei candidati per la chiave di distribuzione. AWS SCT definisce il valore inclinato di una colonna come rapporto percentuale tra il numero di occorrenze del valore più comune e il numero totale di record.
Per le prime N interrogazioni della tabella della cronologia delle interrogazioni, immettete il numero (da 1 a 100) delle interrogazioni utilizzate più di frequente da analizzare.
Per Seleziona utente statistico, scegli l'utente del database per il quale desideri analizzare le statistiche delle query.
Inoltre, nella scheda Strategie di ottimizzazione, puoi definire la dimensione delle piccole tabelle per la strategia Trova tabelle piccole. Per Numero minimo di righe nella tabella e Numero massimo di righe nella tabella, inserisci il numero minimo e massimo di righe in una tabella per considerarla come una tabella piccola. AWS SCT applica lo stile
ALL
di distribuzione a tabelle di piccole dimensioni. In questo caso, una copia dell'intera tabella viene distribuita su ogni nodo.