Exibir a avaliação e os detalhes do modelo NER personalizado

  • Artigo

Depois que o modelo terminar o treinamento, você poderá exibir o desempenho do modelo e ver as entidades extraídas dos documentos no conjunto de testes.

Observação

Usar a opção Dividir automaticamente o conjunto de teste dos dados de treinamento pode resultar em diferentes resultados de avaliação de modelo sempre que você treina um novo modelo, pois o conjunto de teste é selecionado aleatoriamente nos dados. Para garantir que a avaliação seja calculada no mesmo conjunto de testes sempre que você treina um modelo, use a opção Usar uma divisão manual de dados de treinamento e de teste ao iniciar um trabalho de treinamento e definir seus documentos de Teste ao rotular dados.

Pré-requisitos

Para exibir a avaliação do modelo, é necessário:

Confira o ciclo de vida de desenvolvimento de projetos para obter mais informações.

Detalhes do modelo

  1. Acesse a página do projeto no Language Studio.

  2. Selecione Desempenho do modelo no menu à esquerda da tela.

  3. Nesta página, você só pode exibir os modelos treinados com êxito, a pontuação F1 de cada modelo e a data de expiração do modelo. Você pode selecionar o nome do modelo para obter mais detalhes sobre seu desempenho.

Observação

As entidades que não estão rotuladas nem previstas no conjunto de testes não farão parte dos resultados exibidos.

  • Nesta guia, você pode ver os detalhes do modelo, como: medida f, precisão, recall, data e hora do trabalho de treinamento, tempo total de treinamento e número de documentos de treinamento e teste incluídos neste trabalho de treinamento.

    Uma captura de tela que mostra a página de visão geral da avaliação do modelo.

  • Você também verá diretrizes sobre como melhorar o modelo. Ao clicar nos detalhes da exibição, um painel lateral será aberto para fornecer mais diretrizes sobre como melhorar o modelo. Neste exemplo, as entidades BorrowerAddress e BorrowerName são confundidas com a entidade $none. Ao clicar nas entidades confusas, você será levado para a página de rotulagem de dados para rotular mais dados com a entidade correta.

    Uma captura de tela que mostra a página de diretrizes da avaliação de modelo.

    Saiba mais sobre diretrizes de modelo e matriz de confusão em conceitos de desempenho de modelo.

Carregar ou exportar dados do modelo

Para carregar os dados do modelo:

  1. Selecione qualquer modelo na página de avaliação do modelo.

  2. Clique no botão Carregar dados do modelo.

  3. Verifique se você não tem nenhuma alteração não salva que precise capturar na janela exibida e selecione Carregar dados.

  4. Aguarde até que os dados do modelo terminem de carregar de volta em seu projeto. Após a conclusão, você será redirecionado de volta para a página Design de esquema.

Para exportar seus dados de modelo:

  1. Selecione qualquer modelo na página de avaliação do modelo.

  2. Clique no botão Exportar dados do modelo. Aguarde o instantâneo JSON do modelo ser baixado localmente.

Excluir modelo

Para excluir seu modelo de dentro do Language Studio:

  1. Selecione Desempenho do modelo no menu à esquerda.

  2. Clique no nome do modelo que você deseja excluir e clique em Excluir no menu superior.

  3. Na janela exibida, clique em OK para excluir o modelo.

Próximas etapas