As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Este projeto de exemplo demonstra como usar o Step Functions e a API de dados do Amazon Redshift para executar um fluxo de trabalho ETL/ELT que carrega dados no data warehouse do Amazon Redshift.
Neste projeto, o Step Functions usa uma AWS Lambda função e a API Amazon Redshift Data para criar os objetos de banco de dados necessários e gerar um conjunto de dados de exemplo e, em seguida, executa dois trabalhos em paralelo que executam o carregamento de tabelas de dimensões, seguidos por uma tabela de fatos. Quando as duas tarefas de carregamento de dimensões terminam com sucesso, o Step Functions executa o trabalho de carregamento da tabela de fatos, executa a tarefa de validação e, em seguida, pausa o cluster do Amazon Redshift.
nota
Você pode modificar a lógica do ETL para receber dados de outras fontes, como o Amazon S3, que pode usar o comando COPY para copiar dados do Amazon S3 para uma tabela do Amazon Redshift.
Para obter mais informações sobre as integrações dos serviços Amazon Redshift e Step Functions, consulte os seguintes guias:
Para obter mais informações sobre as políticas do IAM para Lambda e Amazon Redshift, consulte os seguintes guias:
nota
Este projeto de exemplo pode incorrer em cobranças.
Para novos AWS usuários, um nível de uso gratuito está disponível. Neste nível, os serviços são gratuitos abaixo de um determinado nível de uso. Para obter mais informações sobre os custos da AWS
e o Nível Gratuito, consulte a AWS Step Functions Definição de preço
Etapa 1: Criar a máquina de estado
-
Abra o console do Step Functions
e clique em Criar máquina de estado. -
Encontre e escolha o modelo inicial com o qual você deseja trabalhar. Escolha Próximo para continuar.
-
Escolha Executar uma demonstração para criar um ready-to-deploy fluxo de trabalho e somente leitura, ou escolha Criar nele para criar uma definição de máquina de estado editável na qual você possa criar e implantar posteriormente.
-
Escolha Usar modelo para continuar com a seleção.
As próximas etapas dependem da escolha anterior:
-
Faça uma demonstração — Você pode revisar a máquina de estado antes de criar um projeto somente para leitura com recursos implantados pelo AWS CloudFormation seu. Conta da AWS
É possível visualizar a definição da máquina de estado e, quando estiver tudo pronto, escolher Implantar e executar para implantar o projeto e criar os recursos.
A implantação pode demorar até dez minutos para criar recursos e permissões. É possível usar o link do ID da pilha para monitorar o andamento no AWS CloudFormation.
Após a conclusão da implantação, você deverá ver a nova máquina de estado no console.
-
Comece a criar: é possível revisar e editar a definição do fluxo de trabalho. Talvez seja necessário definir valores para espaços reservados no projeto de exemplo antes de tentar executar o fluxo de trabalho personalizado.
nota
Cobranças padrão podem ser aplicadas aos serviços implantados na conta.
Etapa 2: Executar a máquina de estado
Na página Máquinas de estado, escolha seu projeto de exemplo.
Na página do projeto de exemplo, escolha Iniciar execução.
Na caixa de diálogo Iniciar execução, faça o seguinte:
-
(Opcional) Insira um nome de execução personalizado para substituir o padrão gerado.
Nomes e registro em log não ASCII
O Step Functions aceita nomes de máquina de estado, execuções, atividades e rótulos que contenham caracteres não ASCII. Como esses caracteres não funcionarão com a Amazon CloudWatch, recomendamos usar somente caracteres ASCII para que você possa acompanhar as métricas. CloudWatch
-
(Opcional) Na caixa Entrada, insira os valores de entrada como JSON. É possível ignorar essa etapa se estiver executando uma demonstração.
-
Selecione Iniciar execução.
O console do Step Functions direcionará você para uma página Detalhes da execução, na qual você pode escolher estados em Visualização do gráfico para explorar informações relacionadas no painel Detalhes da etapa.
-
Parabéns!
Agora você deve ter uma demonstração em execução ou uma definição de máquina de estado que possa ser personalizada.
