Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Preaddestramento continuo (CPT)
Il pre-training continuo (CPT) è una tecnica di formazione che estende la fase preliminare di un modello base esponendolo a testo aggiuntivo senza etichetta proveniente da domini o corpora specifici. A differenza della messa a punto supervisionata, che richiede coppie input-output etichettate, il CPT si allena su documenti grezzi per aiutare il modello ad acquisire una conoscenza più approfondita di nuovi domini, apprendere la terminologia e i modelli di scrittura specifici del dominio e adattarsi a particolari tipi di contenuto o aree tematiche.
Questo approccio è particolarmente utile quando si dispone di grandi volumi (decine di miliardi di token) di dati di testo specifici del dominio, come documenti legali, letteratura medica, documentazione tecnica o contenuti aziendali proprietari, e si desidera che il modello sviluppi una fluidità nativa in quel dominio. In genere, dopo la fase CPT, il modello deve essere sottoposto a ulteriori fasi di ottimizzazione delle istruzioni per consentire al modello di utilizzare le nuove conoscenze acquisite e completare attività utili.
Quando usare il CPT
Usa il CPT quando devi insegnare al modello conoscenze specifiche del dominio che non sono ben rappresentate nei suoi dati di addestramento originali. Il CPT è ideale quando:
-
Hai grandi volumi di testo specifico del dominio (contenuti legali, medici, tecnici o proprietari)
-
Desiderate che il modello sviluppi una padronanza nativa della terminologia e dei modelli di scrittura specializzati
-
Il tuo caso d'uso richiede una comprensione del linguaggio standard senza ragionamenti avanzati
Modelli supportati
Il CPT è disponibile per i seguenti modelli Amazon Nova:
-
Nova 1.0 (Micro, Lite, Pro)
-
Nova 2.0 (Lite)
Quando usare Nova 1.0 rispetto a Nova 2.0
La famiglia di modelli Amazon Nova offre diversi punti operativi in termini di rapporto prezzo/prestazioni per ottimizzare precisione, velocità e costi.
Scegli Nova 2.0 quando hai bisogno di quanto segue:
-
Capacità di ragionamento avanzate per attività analitiche complesse
-
Prestazioni superiori in termini di codifica, matematica e risoluzione di problemi scientifici
-
Supporto per una maggiore lunghezza del contesto
-
Migliori prestazioni multilingue
Scegli Nova 1.0 quando:
-
Desideri ottimizzare per ridurre i costi di formazione e inferenza
-
Il tuo caso d'uso richiede una comprensione del linguaggio standard senza ragionamenti avanzati
-
Hai già convalidato le prestazioni su Nova 1.0 e non hai bisogno di funzionalità aggiuntive
Nota
Il modello più grande non è sempre migliore. Quando scegli tra i modelli Nova 1.0 e Nova 2.0, considera il compromesso tra costi e prestazioni e i tuoi requisiti aziendali specifici.
