Histórico do documento - AWS Data Pipeline

AWS Data Pipeline não está mais disponível para novos clientes. Os clientes existentes do AWS Data Pipeline podem continuar usando o serviço normalmente. Saiba mais

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Histórico do documento

Esta documentação está associada à versão 2012-10-29 do. AWS Data Pipeline

Alteração Descrição Data de lançamento
AWS Data Pipeline não está mais disponível para novos clientes

AWS Data Pipeline não está mais disponível para novos clientes. Os clientes existentes do AWS Data Pipeline podem continuar usando o serviço normalmente. Saiba mais

 25 de julho de 2025
Foi adicionada documentação para realizar determinados procedimentos usando a AWS CLI. Procedimentos relacionados ao AWS Data Pipeline console removidos.

Para ter mais informações, consulte Clonar o pipeline, Visualizar logs de pipeline e Crie pipelines a partir de modelos de Data Pipeline usando a CLI.

 26 de maio de 2023
Foram adicionados mais conteúdo e amostras para AWS Data Pipeline migrar de outros serviços alternativos.

Atualizou o tópico para migrar AWS Data Pipeline para AWS Step Functions ou Amazon MWAA com mais informações sobre cada alternativa, mapeamentos conceituais entre os serviços e amostras. AWS Glue Para obter mais informações, consulte Migração de cargas de trabalho do AWS Data Pipeline.

 31 de março de 2023
Foram adicionadas informações sobre AWS Data Pipeline o suporte do IMDSv2.

AWS Data Pipeline suporta IMDSv2 recursos do Amazon EMR e da Amazon EC2 . Para ter mais informações, consulte Proteção de dados em AWS Data Pipeline, EmrCluster e Ec2Resource.

 16 de dezembro de 2022
Foi adicionado um tópico para AWS Data Pipeline migrar de outros serviços alternativos.

Agora existem outros AWS serviços que oferecem aos clientes uma melhor experiência de integração de dados. Você pode migrar casos de uso típicos AWS Data Pipeline para AWS Step Functions ou Amazon MWAA. AWS Glue Para obter mais informações, consulte Migração de cargas de trabalho do AWS Data Pipeline.

 16 de dezembro de 2022

Atualizou as listas de instâncias compatíveis da Amazon EC2 e do Amazon EMR.

Atualizou a lista IDs do HVM (Hardware Virtual Machine) AMIs usado para as instâncias.

Atualizou as listas de instâncias compatíveis da Amazon EC2 e do Amazon EMR. Para obter mais informações, consulte Tipos de instância com suporte para as atividades de trabalho do pipeline.

Atualizou a lista IDs do HVM (Hardware Virtual Machine) AMIs usado para as instâncias. Para obter mais informações, consulte Sintaxe e pesquise imageId.

 9 de novembro de 2018
Adição de configuração para anexar volumes do Amazon EBS aos nós de cluster e executar um cluster do Amazon EMR em uma sub-rede privada.

Adição de opções de configuração a um objeto EMRcluster. Você pode usar essas opções nos pipelines que usam clusters do Amazon EMR.

Use os campos coreEbsConfiguration, masterEbsConfiguration e TaskEbsConfiguration para configurar anexos de volumes do Amazon EBS como nós core, principal e de tarefa no cluster do Amazon EMR. Para obter mais informações, consulte Anexe os volumes do EBS aos nós de cluster.

Use os campos emrManagedMasterSecurityGroupId, emrManagedSlaveSecurityGroupId e ServiceAccessSecurityGroupId para configurar um cluster do Amazon EMR em uma sub-rede privada. Para obter mais informações, consulte Configurar um cluster do Amazon EMR em uma sub-rede privada.

Para mais informações sobre sintaxe de EMRcluster, consulte EmrCluster.

 19 de abril de 2018
Foi adicionada a lista de instâncias compatíveis da Amazon EC2 e do Amazon EMR.

Foi adicionada a lista de instâncias que são AWS Data Pipeline criadas por padrão, caso você não especifique um tipo de instância na definição do pipeline. Foi adicionada uma lista de instâncias compatíveis da Amazon EC2 e do Amazon EMR. Para obter mais informações, consulte Tipos de instância com suporte para as atividades de trabalho do pipeline.

 22 de março de 2018
Adição do suporte aos pipelines sob demanda

  • Mais suporte aos pipelines sob demanda, o que permite que você execute novamente um pipeline ao reativá-lo.

 22 de fevereiro de 2016
Suporte adicional para bancos de dados do RDS

  • rdsInstanceId, region e jdbcDriverJarUri adicionados a RdsDatabase.

  • database atualizado em SqlActivity para oferecer suporte a RdsDatabase também.

 17 de agosto de 2015
Suporte adicional a JDBC
7 de julho de 2015
HadoopActivity, Availability Zone e Spot Support

  • Suporte adicionado para enviar trabalhos paralelos aos clusters do Hadoop. Para obter mais informações, consulte HadoopActivity.

  • Capacidade de solicitar instâncias spot com Ec2Resource e EmrCluster.

  • Capacidade de iniciar recursos EmrCluster em uma zona de disponibilidade específica.

1 de junho de 2015
Desativar pipelines

Suporte adicional à desativação de pipelines ativos. Para obter mais informações, consulte Desativar o pipeline.

 7 de abril de 2015
Modelos e console atualizados

Adição de novos modelos. O capítulo Introdução foi atualizado para usar o ShellCommandActivity modelo Introdução. Para obter mais informações, consulte Crie pipelines a partir de modelos de Data Pipeline usando a CLI.

 25 de novembro de 2014
Suporte à VPC

Suporte adicionado para a iniciar recursos em uma nuvem privada virtual (VPC).

 12 de março de 2014
Suporte de região

Suporte adicionado para várias regiões de serviços. Além deus-east-1, AWS Data Pipeline é suportado em eu-west-1 ap-northeast-1ap-southeast-2,, us-west-2 e.

 20 de fevereiro de 2014
Suporte a Amazon Redshift

Foi adicionado suporte para o Amazon Redshift em AWS Data Pipeline, incluindo um novo modelo de console (Copy to Redshift) e um tutorial para demonstrar o modelo. Para ter mais informações, consulte Copiar dados para o Amazon Redshift usando AWS Data Pipeline, RedshiftDataNode, RedshiftDatabase e RedshiftCopyActivity.

 6 de novembro de 2013
PigActivity

Adicionado PigActivity, que fornece suporte nativo para o Pig. Para obter mais informações, consulte PigActivity.

 15 de outubro de 2013
Modelo, atividade e formato de dados novos do console

Foi adicionado o novo CrossRegion modelo de console do DynamoDB Copy, incluindo o novo e o Dynamo HiveCopyActivity . DBExport DataFormat

 21 de agosto de 2013
Falhas e novas execuções em cascata

Foram adicionadas informações sobre falha AWS Data Pipeline em cascata e comportamento de reexecução. Para obter mais informações, consulte Falhas e novas execuções em cascata.

8 de agosto de 2013
Vídeo sobre a solução de problemas

Foi adicionado o vídeo de solução de problemas AWS Data Pipeline básicos. Para obter mais informações, consulte Solução de problemas.

17 de julho de 2013
Editar pipelines ativos

Mais informações adicionadas sobre como editar pipelines ativos e executar novamente os componentes do pipeline. Para obter mais informações, consulte Editar o pipeline.

17 de julho de 2013
Usar recursos em diferentes regiões

Mais informações adicionadas sobre como usar recursos em diferentes regiões. Para obter mais informações, consulte Usar um pipeline com recursos em várias regiões.

17 de junho de 2013
Status WAITING_ON_DEPENDENCIES

Status CHECKING_PRECONDITIONS alterado para WAITING_ON_DEPENDENCIES e adicionado o campo de tempo de execução @waitingOn para objetos do pipeline.

 20 de maio de 2013
Formato Dynamo DBData

Modelo de DBData formato Dynamo adicionado.

 23 de abril de 2013
Vídeo Processar logs da web e suporte a instâncias spot

Apresentou o vídeo “Process Web Logs with AWS Data Pipeline, Amazon EMR e Hive” e o suporte para Amazon EC2 Spot Instances.

 21 de fevereiro de 2013

A versão inicial do Guia do AWS Data Pipeline Desenvolvedor.

20 de dezembro de 2012