Rotulagem de imagens e documentos de texto

Depois que o administrador do projeto criar um projeto de rotulagem de dados de imagem ou um projeto de rotulagem de dados de texto do Azure Machine Learning, será possível usar a ferramenta de rotulagem para preparar rapidamente os dados para um projeto de Machine Learning. Este artigo descreve:

Pré-requisitos

• Uma conta da Microsoft ou uma conta do Microsoft Entra para a organização e o projeto.
• Acesso no nível de colaborador ao espaço de trabalho que contém o projeto de rotulagem.

Entrar no estúdio

1. Entre no Estúdio do Azure Machine Learning.

2. Selecione a assinatura e o workspace que contém o projeto de rotulagem. O administrador do projeto fornece essas informações.

3. Talvez você note as diversas seções à esquerda, dependendo do seu nível de acesso. Se for o caso, selecione Rotulagem de dados no lado esquerdo para localizar o projeto.

Entender a tarefa de rotulagem

Na tabela de projetos de rotulagem de dados, selecione o link Rotular dados para seu projeto.

Você tem à sua disposição instruções específicas para o seu projeto. Essas instruções explicam o tipo de dados envolvidos, como deverá tomar decisões e outras informações relevantes. Leia as informações e selecione Tarefas na parte superior da página. Você também pode selecionar Iniciar rotulagem na parte inferior da página.

Seleção de rótulo

Em todas as tarefas de rotulagem de dados, escolha uma tag ou tags apropriadas de um conjunto especificado pelo administrador do projeto. Use as teclas numéricas do teclado para selecionar as nove primeiras etiquetas.

Aprendizado de máquina assistido

O processo de rotulagem pode disparar algoritmos de aprendizado de máquina. Se o seu projeto tiver esses algoritmos habilitados, você poderá ver:

• Imagens

  • Depois de rotular alguns dos dados, você poderá observar tarefas agrupadas na parte superior da tela, ao lado do nome do projeto. As imagens são agrupadas para apresentar as imagens semelhantes na mesma página. Nesse caso, alterne para uma das várias exibições de imagens para aproveitar o agrupamento.

  • Posteriormente, talvez você veja Tarefas pré-rotuladas ao lado do nome do projeto. Os itens aparecerão com um rótulo sugerido proveniente de um modelo de classificação de aprendizado de máquina. Nenhum modelo de machine learning tem precisão de 100%. Embora o sistema use apenas dados para os quais o modelo tenha confiança, esses dados ainda podem ter rótulos preliminares incorretos. Quando você notar os rótulos, corrija os rótulos incorretos antes de enviar a página.

  • Para os modelos de identificação de objetos, talvez você note as caixas delimitadoras e os rótulos já presentes. Corrija todos os erros neles antes de enviar a página.

  • Para modelos de segmentação, talvez você note os polígonos e os rótulos que já estão presentes. Corrija todos os erros neles antes de enviar a página.

• Texto

  • Posteriormente, talvez você veja Tarefas pré-rotuladas ao lado do nome do projeto. Os itens aparecerão com um rótulo sugerido proveniente de um modelo de classificação de aprendizado de máquina. Nenhum modelo de machine learning tem precisão de 100%. Embora o sistema use apenas dados para os quais o modelo tenha confiança, esses dados ainda podem ter rótulos preliminares incorretos. Quando você notar os rótulos, corrija os rótulos incorretos antes de enviar a página.

No início de um projeto de rotulagem, o modelo de aprendizado de máquina pode ter precisão suficiente apenas para pré-rotular um pequeno subconjunto de imagens. Depois de rotular essas imagens, o projeto de rotulagem retornará à rotulagem manual para coletar mais dados para a próxima rodada de treinamento do modelo. Com o tempo, o modelo se torna mais confiante sobre uma proporção maior de imagens. Posteriormente no projeto, sua confiança resultará em mais tarefas de pré-rotulagem.

Quando não há mais tarefas pré-rotuladas, o processo de confirmação ou correção do rótulo é interrompido e retorna à marcação manual de item.

Tarefas de imagem

Para tarefas de classificação de imagem, você pode optar por exibir várias imagens ao mesmo tempo. Para selecionar o layout, use os ícones acima da área da imagem.

Para selecionar todas as imagens exibidas ao mesmo tempo, use Selecionar tudo. Para selecionar imagens individuais, use o botão de seleção circular no canto superior direito da imagem. Você precisa selecionar pelo menos uma imagem para aplicar uma tag. Se você selecionar várias imagens, qualquer tag selecionada será aplicada a todas as imagens selecionadas.

Por exemplo, você pode escolher um layout de dois por dois e aplicar a marca "Mammal" às imagens de urso e orca, conforme mostrado na captura de tela a seguir:

Esta captura de tela mostra vários layouts e seleção de imagens. A imagem do tubarão já está marcada como "peixe cartilaginoso", e a iguana ainda não tem uma marca.

Quando você marca todas as imagens na página, o Azure habilita o botão Enviar . Selecione Enviar para salvar o trabalho.

Depois que você enviar marcas para os dados à disposição, o Azure atualizará a página com um novo conjunto de imagens da fila de trabalho.

Tarefas de diagnóstico por imagem

Os projetos de imagem dão suporte ao formato de imagem DICOM para imagens de arquivo de raio-X, conforme mostrado na captura de tela a seguir:

Embora você rotule as imagens médicas usando as mesmas ferramentas que qualquer outra imagem, você pode usar uma ferramenta diferente para imagens DICOM, conforme mostrado na seguinte captura de tela:

Selecione a ferramenta de janela e nível para alterar a intensidade da imagem. Essa ferramenta está disponível apenas para imagens DICOM.

Marcar imagens para classificação multiclasse

Atribua uma única tag à imagem inteira para um tipo de projeto "Classificação de Imagem de Várias Classes". Para examinar as orientações a qualquer momento, acesse a página Instruções e selecione Exibir instruções detalhadas.

Se perceber que cometeu um erro depois de atribuir uma tag a uma imagem, você poderá corrigi-lo. Selecione o "X" no rótulo exibido abaixo da imagem para limpar a tag. Você também pode selecionar a imagem e escolher outra classe. O valor recém-selecionado substituirá a tag aplicada anteriormente.

Marcar imagens para classificação de vários rótulos

Se o projeto for do tipo "Classificação de Imagem Multi-Rótulo", aplique uma ou mais marcas a uma imagem. Para ver as orientações específicas do projeto, selecione Instruções e acesse Exibir instruções detalhadas.

Selecione a imagem que deseja rotular e, em seguida, selecione a tag. A tag é aplicada a todas as imagens selecionadas e, em seguida, a seleção das imagens é anulada. Para aplicar mais marcas, você precisa selecionar as imagens novamente. Esta animação mostra a marcação de vários rótulos:

A animação mostra que

1. Selecionar tudo é usado para aplicar a etiqueta "Ocean".
2. Uma única imagem é selecionada e marcada como "Closeup".
3. Três imagens são selecionadas e marcadas como "Ângulo largo".

Para corrigir um erro, clique no "X" para limpar uma tag individual ou selecione as imagens e, em seguida, selecione a tag, para limpar a tag de todas as imagens selecionadas. Esse cenário é mostrado aqui. Selecionar "Terrestre" limpará a tag das duas imagens selecionadas. Esta captura de tela mostra o cenário:

O Azure só habilita o botão Enviar depois que você aplica pelo menos uma marca a cada imagem. Selecione Enviar para salvar o trabalho.

Marcar imagens e especificar caixas delimitadoras para detecção de objetos

Se o projeto for do tipo "Identificação do Objeto (Caixas Delimitadoras)", especifique uma ou mais caixas delimitadoras na imagem e aplique uma tag a cada caixa. As imagens podem ter várias caixas delimitadoras, cada uma com uma única tag. Use Exibir instruções detalhadas para determinar se seu projeto usa várias caixas delimitadoras.

1. Selecione uma etiqueta para a caixa delimitadora que você planeja criar.

2. Selecione "R.", ou selecione a ferramenta caixa Retangular , conforme mostrado na seguinte captura de tela:

   

3. Para criar uma caixa delimitadora aproximada, selecione e arraste diagonalmente até o destino. Arraste as bordas ou cantos para ajustar a caixa delimitadora, conforme mostrado na seguinte captura de tela:

   

Para excluir uma caixa delimitadora, clique no alvo em formato de X exibido ao lado da caixa delimitadora após a criação.

Não é possível alterar a tag de uma caixa delimitadora existente. Para corrigir um erro de atribuição de tag, exclua a caixa delimitadora e crie outra com a marcação correta.

Por padrão, você pode editar as caixas delimitadoras existentes. A ferramenta "L", ou Bloquear/desbloquear regiões , alterna esse comportamento, conforme mostrado na seguinte captura de tela:

Se bloquear as regiões, você só poderá alterar a forma ou a localização de uma nova caixa delimitadora.

A ferramenta de manipulação de regiões consiste em quatro setas que começam do centro e apontam para cima, para baixo, para a direita e para a esquerda, como mostrado na seguinte captura de tela.

Use a ferramenta Manipulação de regiões, ou “M”, para ajustar uma caixa delimitadora existente. Arraste as bordas ou os cantos para ajustar a forma. Selecione no interior se quiser arrastar toda a caixa delimitadora. Caso não seja possível editar uma região, provavelmente você acionou a ferramenta Bloquear/desbloquear regiões.

A ferramenta Caixa baseada em modelo cria várias caixas delimitadoras do mesmo tamanho, conforme mostrado na seguinte captura de tela:

Use a ferramenta Caixa baseada em modelo, ou "T", para criar várias caixas delimitadoras do mesmo tamanho. Se a imagem não tiver caixas delimitadoras e você ativar caixas baseadas em modelo, a ferramenta produzirá caixas de 50 x 50 pixels. Se você criar uma caixa delimitadora e, em seguida, ativar caixas baseadas em modelo, as novas caixas delimitadoras terão o tamanho da última caixa criada. Você poderá redimensionar as caixas baseadas em modelos após o posicionamento. O redimensionamento de uma caixa baseada em modelo só redimensiona essa caixa específica.

Para excluir todas as caixas delimitadoras na imagem atual, selecione a ferramenta Excluir todas as regiões , conforme mostrado na seguinte captura de tela:

Depois de criar as caixas delimitadores para uma imagem, selecione Enviar para salvar o trabalho; caso contrário, o trabalho em andamento não será salvo.

Marcar imagens e especificar polígonos para segmentação de imagem

Se o seu projeto for do tipo "Segmentação de Instância (Polígono)", especifique um ou mais polígonos na imagem e aplique uma tag a cada polígono. As imagens podem ter vários polígonos delimitadores, cada um com uma marca individual. Use Exibir instruções detalhadas para determinar se seu projeto usa vários polígonos delimitadores.

1. Selecione uma marca para o polígono que você planeja criar.
2. Selecione "P", ou selecione a ferramenta Desenhar região de polígono conforme mostrado nesta captura de tela:

1. Selecione cada ponto no polígono. Ao concluir a forma, selecione duas vezes para finalizar, conforme mostrado nesta animação:

   

Para excluir um polígono, clique no destino em formato de X exibido ao lado do polígono após a criação.

Para alterar a tag de um polígono, selecione a ferramenta Mover região, selecione o polígono e escolha a tag correta.

Edite os polígonos existentes. A ferramenta Bloquear/desbloquear regiões, ou "L", alterna esse comportamento, conforme mostrado nesta captura de tela:

Se as regiões estiverem bloqueadas, você só poderá alterar a forma ou a localização de um novo polígono.

Use a ferramenta Adicionar ou remover pontos do polígono, ou "U", para ajustar um polígono existente, conforme mostrado nesta captura de tela:

Selecione o polígono para adicionar ou remover um ponto. Caso não seja possível editar uma região, provavelmente você acionou a ferramenta Bloquear/desbloquear regiões.

Para excluir todas as caixas delimitadoras na imagem atual, selecione a ferramenta Excluir todas as regiões , conforme mostrado na seguinte captura de tela:

Depois de criar os polígonos para uma imagem, selecione Enviar para salvar seu trabalho ou seu trabalho em andamento não será salvo.

Marcar imagens e desenhar máscaras para segmentação semântica

Se o projeto for do tipo "Segmentação semântica (versão prévia)", use o pincel para pintar uma máscara sobre a área que você deseja marcar.

1. Selecione uma tag para a área onde você deseja pintar.

2. Selecione a ferramenta paintbrush , conforme mostrado na seguinte captura de tela:

   

3. Selecione a ferramenta de tamanho para escolher um tamanho para o pincel, conforme mostrado na seguinte captura de tela:

   

4. Pinte sobre a área que você deseja marcar. A cor correspondente à sua marcação é aplicada à área em que você pinta.

   

Para excluir partes da área, selecione a ferramenta Borracha.

Para alterar a marcação de uma área, selecione a nova marca e pinte novamente a área.

Você também pode usar a ferramenta Polygon para especificar uma região.

Depois de criar as áreas para uma imagem, selecione Enviar para salvar seu trabalho. Se você não selecionar Enviar, seu trabalho em andamento não será salvo. Se você usou a ferramenta Polígono, todos os polígonos são convertidos em uma máscara quando você enviar.

Texto do rótulo

Ao adicionar uma tag a um texto, use a barra de ferramentas para:

• Aumente ou diminua o tamanho do texto.
• Altere a fonte.
• Ignore a rotulagem desse item e vá para o próximo item.

Se perceber que cometeu um erro após ter atribuído uma tag, você poderá corrigi-la. Selecione o "X" no rótulo que é exibido abaixo do texto para limpar a marcação.

Há três tipos de projeto de texto:

Para ver as orientações específicas do projeto, selecione Instruções e acesse Exibir instruções detalhadas.

Marcar palavras e frases

Se o projeto estiver configurado para reconhecimento de entidade nomeada, marque palavras ou frases diferentes em cada item de texto. Para rotular texto:

1. Selecione o rótulo ou digite o número correspondente ao rótulo apropriado.
2. Clique duas vezes em uma palavra ou use o mouse para selecionar várias palavras.

Para alterar um rótulo, você pode:

• Exclua o rótulo e inicie novamente.
• Alterar o valor de todos ou de um rótulo específico em seu item atual:
  • Selecione o rótulo, o que selecionará todas as instâncias desse rótulo.
  • Para desmarcar as instâncias que você deseja manter, selecione as instâncias deste rótulo novamente.
  • Por fim, selecione um novo rótulo para alterar todos os rótulos que ainda estão selecionados.

Depois de marcar todos os itens em uma entrada, selecione Enviar para ir para a próxima entrada.

Conclusão

Quando você envia uma página de dados marcados, o Azure atribui a você novos dados sem rótulo de uma fila de trabalho. Se não houver mais dados sem rótulo disponíveis, uma nova mensagem aparecerá juntamente com um link para a página inicial do portal.

Ao concluir a rotulagem, selecione sua imagem dentro de um círculo no canto superior direito do estúdio e, em seguida, selecione Sair. Se você não sair, o Azure fará com que você atinja o tempo limite e atribuirá seus dados a outro rotulador.

Próximas etapas

• Saiba como treinar modelos de classificação de imagens no Azure