Classificação de imagens do TensorFlow Lite - AWS IoT Greengrass

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Classificação de imagens do TensorFlow Lite

O componente de classificação de imagens do TensorFlow Lite (aws.greengrass.TensorFlowLiteImageClassification) contém um código de inferência de amostra para realizar a inferência de classificação de imagens usando o runtime do TensorFlow Lite e um modelo de amostra MobileNet 1.0 quantizado e pré-treinado. Esse componente usa a variante Armazenamento de modelos de classificação de imagens do TensorFlow Lite e os componentes Runtime do TensorFlow Lite como dependências para fazer download do runtime do TensorFlow Lite e do modelo de amostra.

Para usar esse componente de inferência com um modelo do TensorFlow Lite especificamente treinado, crie uma versão personalizada do componente de armazenamento de modelos dependente. Para usar o próprio código de inferência personalizado, você pode utilizar a fórmula desse componente como modelo para criar um componente de inferência personalizado.

Versões

Esse componente tem as seguintes versões:

  • 2.1.x

Tipo

Esse é um componente genérico (aws.greengrass.generic). O núcleo do Greengrass executa os scripts do ciclo de vida do componente.

Para ter mais informações, consulte Tipos de componente.

Sistema operacional

Esse componente pode ser instalado em dispositivos principais que executam os seguintes sistemas operacionais:

  • Linux

  • Windows

Requisitos

Esse componente tem os seguintes requisitos:

  • Nos dispositivos principais do Greengrass que executam o Amazon Linux 2 ou o Ubuntu 18.04, a Biblioteca do GNU C (glibc) versão 2.27 ou posterior está instalada no dispositivo.

  • Em dispositivos Armv7l, como o Raspberry Pi, as dependências do OpenCV-Python estão instaladas no dispositivo. Execute o seguinte comando para instalar as dependências.

    sudo apt-get install libopenjp2-7 libilmbase23 libopenexr-dev libavcodec-dev libavformat-dev libswscale-dev libv4l-dev libgtk-3-0 libwebp-dev
  • Os dispositivos Raspberry Pi que executam o Raspberry Pi OS Bullseye devem atender aos seguintes requisitos:

    • NumPy 1.22.4 ou superior instalado no dispositivo. O Raspberry Pi OS Bullseye inclui uma versão anterior do NumPy, portanto você pode executar o comando a seguir para atualizar o NumPy no dispositivo.

      pip3 install --upgrade numpy
    • A pilha de câmeras antiga habilitada no dispositivo. O Raspberry Pi OS Bullseye inclui uma nova pilha de câmeras que está habilitada por padrão e não é compatível, portanto você precisa habilitar a pilha de câmeras antiga.

      Para habilitar a pilha de câmeras antiga
      1. Execute o comando abaixo para abrir a ferramenta de configuração do Raspberry Pi.

        sudo raspi-config
      2. Selecione Opções de interface.

      3. Selecione Câmera antiga para habilitar a pilha de câmeras antiga.

      4. Reinicie o Raspberry Pi.

Dependências

Quando você implanta um componente, o AWS IoT Greengrass também implanta versões compatíveis das dependências dele. Isso significa que é preciso atender aos requisitos do componente e de todas as dependências dele para implantá-lo com êxito. Nesta seção, há uma lista de todas as dependências das versões lançadas desse componente e as restrições de versão semântica que definem as versões dos componentes para cada dependência. Também é possível visualizar as dependências de cada versão do componente no console do AWS IoT Greengrass. Na página de detalhes do componente, procure a lista de dependências.

2.1.11 and 2.1.12

A tabela a seguir lista as dependências das versões 2.1.11 e 2.1.12 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.13.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.10

A tabela a seguir lista as dependências da versão 2.1.10 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.12.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.9

A tabela a seguir lista as dependências da versão 2.1.9 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.11.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.8

A tabela a seguir lista as dependências da versão 2.1.8 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.10.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.7

A tabela a seguir lista as dependências da versão 2.1.7 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.9.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.6

A tabela a seguir lista as dependências da versão 2.1.6 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.8.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.5

A tabela a seguir lista as dependências da versão 2.1.5 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.7.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.4

A tabela a seguir lista as dependências da versão 2.1.4 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.6.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.3

A tabela a seguir lista as dependências da versão 2.1.3 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.5.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.2

A tabela a seguir lista as dependências da versão 2.1.2 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.4.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.1

A tabela a seguir lista as dependências da versão 2.1.1 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.3.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido
2.1.0

A tabela a seguir lista as dependências da versão 2.1.0 desse componente.

Dependência Versões compatíveis Tipo de dependência
Núcleo do Greengrass >=2.0.0 <2.2.0 Flexível
Armazenamento de modelos de classificação de imagens do TensorFlow Lite >=2.1.0 <2.2.0 Rígido
TensorFlow Lite >=2.5.0 <2.6.0 Rígido

Configuração

Esse componente fornece os seguintes parâmetros de configuração que podem ser personalizados ao implantar o componente.

accessControl

(Opcional) O objeto que contém a política de autorização que permite que o componente publique mensagens no tópico de notificações padrão.

Padrão:

{ "aws.greengrass.ipc.mqttproxy": { "aws.greengrass.TensorFlowLiteImageClassification:mqttproxy:1": { "policyDescription": "Allows access to publish via topic ml/tflite/image-classification.", "operations": [ "aws.greengrass#PublishToIoTCore" ], "resources": [ "ml/tflite/image-classification" ] } } }
PublishResultsOnTopic

(Opcional) O tópico no qual você deseja publicar os resultados da inferência. Se você modificar esse valor, também deverá modificar o valor de resources no parâmetro accessControl para corresponder ao nome do tópico personalizado.

Padrão: ml/tflite/image-classification

Accelerator

O acelerador que você deseja usar. Os valores compatíveis são cpu e gpu.

Os modelos de amostra no componente de modelo dependente oferecem suporte somente à aceleração de CPU. Para usar a aceleração de GPU com outro modelo personalizado, crie um componente de modelo personalizado para substituir o componente de modelo público.

Padrão: cpu

ImageDirectory

(Opcional) O caminho da pasta no dispositivo em que os componentes de inferência leem as imagens. Você pode modificar esse valor para qualquer local em seu dispositivo ao qual tenha acesso de leitura/gravação.

Padrão: /greengrass/v2/packages/artifacts-unarchived/component-name/image_classification/sample_images/

nota

Se você definir o valor de UseCamera como true, esse parâmetro de configuração será ignorado.

ImageName

(Opcional) O nome da imagem que o componente de inferência usa como entrada para fazer uma previsão. O componente procura a imagem na pasta especificada em ImageDirectory. Por padrão, o componente usa a imagem de amostra no diretório de imagens padrão. O AWS IoT Greengrass é compatível com os seguintes formatos de imagem: jpeg, jpg, png e npy.

Padrão: cat.jpeg

nota

Se você definir o valor de UseCamera como true, esse parâmetro de configuração será ignorado.

InferenceInterval

(Opcional) O tempo em segundos entre cada previsão feita pelo código de inferência. O código de inferência de amostra é executado indefinidamente e repete as previsões no intervalo de tempo especificado. Por exemplo, é possível alterar isso para um intervalo menor se você quiser usar as imagens capturadas por uma câmera para previsão em tempo real.

Padrão: 3600

ModelResourceKey

(Opcional) Os modelos usados no componente de modelo público dependente. Modifique esse parâmetro somente se você substituir o componente de modelo público por um componente personalizado.

Padrão:

{ "model": "TensorFlowLite-Mobilenet" }
UseCamera

(Opcional) O valor de string que define se as imagens de uma câmera conectada ao dispositivo principal do Greengrass devem ser usadas. Os valores compatíveis são true e false.

Quando você define esse valor como true, o código de inferência de amostra acessa a câmera do seu dispositivo e executa a inferência localmente na imagem capturada. Os valores dos parâmetros ImageName e ImageDirectory são ignorados. Certifique-se de que o usuário que executa esse componente tenha acesso de leitura/gravação ao local onde a câmera armazena as imagens capturadas.

Padrão: false

nota

Quando você visualiza a fórmula desse componente, o parâmetro de configuração UseCamera não aparece na configuração padrão. No entanto, você pode modificar o valor desse parâmetro em uma atualização de mesclagem da configuração ao implantar o componente.

Ao definir UseCamera como true, você também deve criar um link simbólico para permitir que o componente de inferência acesse sua câmera do ambiente virtual criado pelo componente de runtime. Para obter mais informações sobre como usar uma câmera com os componentes de inferência de amostra, consulte Atualizar configurações do componente.

Arquivo de log local

Esse componente usa o arquivo de log abaixo.

Linux
/greengrass/v2/logs/aws.greengrass.TensorFlowLiteImageClassification.log
Windows
C:\greengrass\v2\logs\aws.greengrass.TensorFlowLiteImageClassification.log
Para exibir os logs desse componente
  • Execute o comando a seguir no dispositivo principal para visualizar o arquivo de log desse componente em tempo real. Substitua /greengrass/v2 ou C:\greengrass\v2 pelo caminho para a pasta raiz do AWS IoT Greengrass.

    Linux
    sudo tail -f /greengrass/v2/logs/aws.greengrass.TensorFlowLiteImageClassification.log
    Windows (PowerShell)
    Get-Content C:\greengrass\v2\logs\aws.greengrass.TensorFlowLiteImageClassification.log -Tail 10 -Wait

Changelog

A tabela a seguir descreve as alterações em cada versão do componente.

Version (Versão)

Alterações

2.1.12

Versão atualizada para o núcleo do Greengrass 2.12.5.

2.1.11

Versão atualizada para o núcleo do Greengrass 2.12.0.

2.1.10

Versão atualizada para o lançamento da versão 2.11.0 do núcleo do Greengrass.

2.1.9

Versão atualizada para o lançamento da versão 2.10.0 do núcleo do Greengrass.

2.1.8

Versão atualizada para o núcleo do Greengrass 2.9.0.

2.1.7

Versão atualizada para o lançamento da versão 2.8.0 do núcleo do Greengrass.

2.1.6

Versão atualizada para o lançamento da versão 2.7.0 do núcleo do Greengrass.

2.1.5

Versão atualizada para o lançamento da versão 2.6.0 do núcleo do Greengrass.

2.1.4

Versão atualizada para o lançamento da versão 2.5.0 do núcleo do Greengrass.

2.1.3

Versão atualizada para o lançamento da versão 2.4.0 do núcleo do Greengrass.

2.1.2

Versão atualizada para o lançamento da versão 2.3.0 do núcleo do Greengrass.

2.1.1

Versão atualizada para o lançamento do núcleo do Greengrass versão 2.2.0.

2.1.0

Versão inicial.