A Document AI gera métricas de avaliação, como precisão e recall, para ajudar você a determinar o desempenho preditivo dos processadores.
Essas métricas de avaliação são geradas com a comparação das entidades retornadas pelo processador (as previsões) com as anotações nos documentos de teste. Se o processador não tiver um conjunto de teste, primeiro crie um conjunto de dados e rotule os documentos de teste.
Executar uma avaliação
Uma avaliação é executada automaticamente sempre que você treina ou treina uma versão do processador.
Você também pode executar uma avaliação manualmente. Isso é necessário para gerar métricas atualizadas depois de modificar o conjunto de teste ou se você estiver avaliando uma versão de processador pré-treinada.
IU da Web
No console do Google Cloud , acesse a página Processadores e escolha seu processador.
Na guia Avaliar e testar, selecione a Versão do processador para avaliar e clique em Executar nova avaliação.
Quando concluída, a página contém métricas de avaliação para todos os rótulos e para cada um deles.
Python
Para mais informações, consulte a documentação de referência da API Python da Document AI.
Para autenticar na Document AI, configure o Application Default Credentials. Para mais informações, consulte Configurar a autenticação para um ambiente de desenvolvimento local.