Skip to main content
Um formulário recolhe respostas. O separador Evaluation transforma uma resposta concluída em algo sobre o qual um recrutador pode agir: um veredicto, uma pontuação, uma skill, um resumo ou qualquer valor que peça à IA. O separador é o terceiro acima da lista de campos, depois de Content e Logic. Contém cinco avaliadores, cada um um cartão com um interruptor e um ícone de informação que o explica. Ative um e depois clique no nome dele para abrir as respetivas definições. O separador Evaluation com Summary, Criteria, Scoring, Skills e Generated fields todos ativados

Os cinco avaliadores

Summary e Generated fields trabalham sobre a resposta como um todo. Criteria, Scoring e Skills trabalham pergunta a pergunta, por isso cada um precisa de um segundo interruptor em cada pergunta que quer que ele analise.

Ative-o primeiro para o formulário

A ordem apanha as pessoas desprevenidas. O interruptor de avaliador de uma pergunta não faz nada sozinho.
  1. Abra o separador Evaluation e ative o avaliador para o formulário.
  2. Clique no nome do avaliador para o abrir. Todas as perguntas do formulário aparecem por baixo, cada uma com o seu interruptor.
  3. Ative as perguntas que quer que ele analise e configure cada uma.
O interruptor Criteria, Scoring ou Skills de uma pergunta é ignorado enquanto o interruptor ao nível do formulário estiver desligado. Desligue o avaliador para o formulário e os interruptores por pergunta ficam como os deixou, mas nada é avaliado.
Os mesmos interruptores por pergunta também aparecem no cartão da pergunta no separador Content, para poder configurar uma pergunta sem sair dela. Só aparecem lá quando o interruptor ao nível do formulário está ligado, que é a outra metade da mesma regra.

Que perguntas podem ser avaliadas

Todos os tipos de campo exceto Ending Screen e Redirect URL. Os dois fins não recolhem nada, por isso não há nada a avaliar. O que difere por tipo é a precisão com que uma regra consegue ler a resposta. Uma resposta de Yes/No é um de dois valores conhecidos. Uma resposta de File Upload só pode ser testada pelo nome do ficheiro, pelo tipo e pelo tamanho. Cada página de avaliador tem a tabela de operadores das suas regras.

Regras ou IA

Criteria, Scoring e Skills perguntam How to evaluate? por pergunta, com duas respostas.
  • Use answer rules compara a resposta com condições que escreve. A mesma resposta dá sempre o mesmo resultado, e não é feita nenhuma chamada à IA.
  • Evaluate with AI entrega a pergunta, a resposta e a sua nota ao modelo, que decide. Use-o para texto livre, onde uma regra não consegue distinguir uma boa resposta de uma fraca.
As regras são a predefinição em todos os tipos exceto Short e Long Text, onde Criteria começa na IA.

Uma nota por pergunta

A caixa no fundo das definições de avaliador de uma pergunta recebe uma instrução para a IA. A etiqueta muda consoante o avaliador de onde a abriu: What should AI look for?, How should AI award points?, What skill signals should AI look for? A caixa é uma nota por pergunta, partilhada pelos três. Escreva-a em Criteria e o mesmo texto aparece em Scoring e Skills. Mantenha-a sobre a resposta e não sobre um avaliador.

Quando cada avaliador corre

Uma resposta é avaliada quando é concluída, e novamente em Test & Evaluate enquanto está a construir. Os passos correm por esta ordem.
  1. Todas as perguntas baseadas em regras são avaliadas. Não há IA envolvida.
  2. As perguntas definidas como Evaluate with AI vão para o modelo numa única chamada.
  3. Os resultados por pergunta tornam-se o veredicto, a pontuação e as percentagens de skills.
  4. Generated fields corre por último, sobre a resposta inteira mais os resultados do passo 3.
Generated fields correr por último é o que lhe permite usá-los. Um campo de output pode ser preenchido a partir da pontuação ou do veredicto, além das respostas.

Para onde vão os resultados

  • No construtor, Test & Evaluate mostra cada resultado ao lado das respostas que o produziram.
  • Numa resposta submetida, os resultados são armazenados com ela. Export CSV e Export Excel no menu de três pontos do construtor acrescentam uma coluna por resultado, incluindo uma por skill e uma por generated field.
  • Numa automação, cada resultado é uma variável, como {{form_response.evaluation.scoring.band.label}}. Test & Evaluate lista-as todas em Automation variables, com o valor da execução à sua frente. Veja Variáveis.

Relacionados