Como usar o painel para aprimorar seu aplicativo
Importante
O LUIS será desativado em 1º de outubro de 2025 e, a partir de 1º de abril de 2023, você não poderá criar novos recursos do LUIS. É recomendável migrar seus aplicativos LUIS para a compreensão da linguagem coloquial a fim de usufruir do suporte contínuo ao produto e dos recursos multilíngues.
Encontre e corrija problemas com as intenções do aplicativo treinado ao usar os exemplos de enunciados. O painel exibe informações gerais do aplicativo, com destaques das intenções que devem ser corrigidas.
A análise Examinar Painel é um processo iterativo: repita-o conforme você altera e aprimora seu modelo.
Esta página não terá uma análise relevante para os aplicativos que não tenham nenhum exemplo de enunciado nas intenções, conhecidos como aplicativos somente de padrão.
Quais problemas podem ser corrigidos no painel?
Os três problemas abordados no painel são:
| Problema | Cor do gráfico | Explicação |
|---|---|---|
| Desequilíbrio nos dados | - | Isso ocorre quando a quantidade de exemplos de enunciados varia significativamente. Todas as intenções precisam ter aproximadamente o mesmo número de exemplos de enunciados, exceto a intenção Nenhuma. Ela deve ter apenas 10%-15% da quantidade total de enunciados no aplicativo. Se os dados estiverem desequilibrados, mas a precisão da intenção estiver acima de determinado limite, esse desequilíbrio não será relatado como um problema. Comece com esse problema: ele pode ser a causa raiz dos outros problemas. |
| Previsões confusas | Laranja | Isso ocorre quando a principal intenção e as pontuações da próxima intenção são próximas o suficiente que elas podem ser invertidas no próximo treinamento, devido à amostragem negativa ou a outros exemplos de enunciados adicionados à intenção. |
| Previsões incorretas | Vermelho | Isso ocorre quando um exemplo de enunciado não é previsto para a intenção rotulada (a intenção em que ele se encontra). |
As previsões corretas são representadas com a cor azul.
O painel mostra esses problemas e informa quais intenções foram afetadas e sugere o que você deve fazer para aprimorar o aplicativo.
Antes do treinamento do aplicativo
Antes do treinamento do aplicativo, o painel não contém sugestões para correções. Treine seu aplicativo para ver essas sugestões.
Verificar o status de publicação
O cartão Status da publicação contém informações sobre a última publicação da versão ativa.
Verifique se a versão ativa é a versão que deseja corrigir.
Também mostra os serviços externos, as regiões publicadas e as ocorrências de pontos de extremidade agregados.
Examinar a avaliação do treinamento
O cartão Avaliação do treinamento contém a agregação/o resumo da precisão geral do seu aplicativo por área. A pontuação indica a qualidade da intenção.
O gráfico indica as intenções previstas corretamente e as áreas problemáticas com cores diferentes. À medida que você aprimora o aplicativo com as sugestões, essa pontuação aumenta.
As correções sugeridas são separadas por tipo de problema e são as mais significativas para o aplicativo. Se preferir examinar e corrigir problemas por intenção, use o cartão Intenções com erros na parte inferior da página.
Cada área problemática tem intenções que precisam ser corrigidas. Quando você seleciona o nome da intenção, a página Intenção é aberta com um filtro aplicado aos enunciados. Esse filtro permite que você se concentre nos enunciados que estão causando o problema.
Comparar as alterações entre as versões
Crie uma versão antes de fazer alterações no aplicativo. Na nova versão, faça as alterações sugeridas nos enunciados de exemplo da intenção e treine novamente. No cartão Avaliação de treinamento da página do Painel, use Mostrar alteração da versão treinada para comparar as alterações.
Corrija a versão adicionando ou editando exemplos de enunciados e repetindo o treinamento
O principal método de corrigir seu aplicativo será adicionar ou editar os exemplos de enunciados e repetir o treinamento. Os enunciados novos ou alterados precisam seguir as diretrizes de enunciados variados.
A adição de exemplos de enunciados deve ser feita por alguém que:
- tenha um alto grau de compreensão de quais enunciados estão em diferentes intenções.
- saiba como os enunciados em uma só intenção podem ser confundidos com outra intenção.
- consiga decidir se duas intenções, que frequentemente são confundidas uma com a outra, devem ser recolhidas em uma só intenção. Se esse for o caso, os dados diferentes precisam ser extraídos com entidades.
Padrões e listas de frases
A página de análise não indica quando usar padrões ou listas de frases. Se você adicioná-los, isso poderá ajudar nas previsões incorretas ou confusas, mas não ajudará no desequilíbrio nos dados.
Examinar o desequilíbrio nos dados
Comece com esse problema: ele pode ser a causa raiz dos outros problemas.
A lista de intenções de desequilíbrio nos dados mostra as intenções que precisam de mais enunciados para corrigir o desequilíbrio nos dados.
Para corrigir esse problema:
- Adicione mais enunciados à intenção e repita o treinamento.
Não adicione enunciados à intenção Nenhum, a menos que seja sugerido no painel.
Dica
Use a terceira seção da página Enunciados por intenção com a configuração Enunciados (número) , como um guia visual rápido de quais intenções precisam de mais enunciados.
Examinar as previsões incorretas
A lista de intenções de previsões incorretas mostra as intenções que têm enunciados, que são usadas como exemplos para uma intenção específica, mas são previstas para diferentes intenções.
Para corrigir esse problema:
- Edite os enunciados para torná-los mais específicos à intenção e repita o treinamento.
- Combine intenções se os enunciados estiverem alinhados muito perto e repita o treinamento.
Examinar previsões confusas
A lista de intenções de previsões confusas mostra intenções com enunciados com pontuações de previsão que não estão muito longe do rival mais próximo, o qual a principal intenção do enunciado pode mudar no próximo treinamento, devido à amostragem negativa.
Para corrigir esse problema:
- Edite os enunciados para torná-los mais específicos à intenção e repita o treinamento.
- Combine intenções se os enunciados estiverem alinhados muito perto e repita o treinamento.
Enunciados por intenção
Este cartão mostra a integridade geral do aplicativo entre as intenções. Ao corrigir as intenções e o novo treinamento, continue dando uma olhada no cartão para encontrar problemas.
O gráfico a seguir mostra um aplicativo bem equilibrado sem quase nenhum problema a ser corrigido.
O gráfico a seguir mostra um aplicativo pouco equilibrado com muitos problemas a serem corrigidos.
Posicione o cursor sobre a barra de cada uma das intenções para obter informações sobre a intenção.
Use o recurso Classificar por para organizar as intenções por tipo de problema, de modo que você possa se concentrar nas intenções mais problemáticas com esse problema.
Intenções com erros
Este cartão permite que você examine problemas de uma intenção específica. A exibição padrão desse cartão é a intenção mais problemática, de modo que você saiba em quais intenções concentrará seus esforços.
O gráfico de rosca superior mostra os problemas com a intenção nos três tipos de problemas. Se houver problemas nos três tipos de problemas, cada tipo terá um gráfico próprio abaixo, juntamente com as intenções rivais.
Filtrar as intenções por problema e percentual
Essa seção do cartão permite que você encontre exemplos de enunciados que estão ficando fora do limite de erros. O ideal é que as previsões corretas sejam significativas. Esse percentual é orientado por clientes e negócios.
Determine os percentuais de limite com os quais você está familiarizado para sua empresa.
O filtro permite que você encontre intenções com um problema específico:
| Filtrar | Percentual sugerido | Finalidade |
|---|---|---|
| Intenções mais problemáticas | - | Comece aqui: a correção dos enunciados dessa intenção vai aprimorar o aplicativo mais do que outras correções. |
| Previsões corretas abaixo | 60% | Esse é o percentual de enunciados na intenção selecionada que estão corretos, mas que têm uma pontuação de confiança abaixo do limite. |
| Previsões confusas acima | 15% | Esse é o percentual de enunciados na intenção selecionada que são confundidos com a intenção rival mais próxima. |
| Previsões incorretas acima | 15% | Esse é o percentual de enunciados na intenção selecionada que foram previstos incorretamente. |
Limite de previsões corretas
O que é uma pontuação de confiança de previsão confiável para você? No início do desenvolvimento do aplicativo, 60% pode ser a sua meta. Use as Previsões corretas abaixo com o percentual de 60% para encontrar os enunciados na intenção selecionada que precisam ser corrigidos.
Limite de previsões confusas ou incorretas
Esses dois filtros permitem que você encontre enunciados na intenção selecionada que estão além do limite. Considere esses dois percentuais como percentuais de erro. Se estiver familiarizado com uma taxa de erro de 10-15% para previsões, defina o limite de filtro como 15% para encontrar todos os enunciados acima desse valor.