
De vijf evaluatoren
Summary en Generated fields werken op de respons als geheel. Criteria, Scoring en Skills werken vraag voor vraag, dus elk ervan heeft een tweede schakelaar nodig op elke vraag waar je hem naar wilt laten kijken.
Zet hem eerst aan voor het formulier
De volgorde verrast mensen. De evaluator-schakelaar van een vraag doet in zijn eentje niets.- Open het tabblad Evaluation en zet de evaluator aan voor het formulier.
- Klik op de naam van de evaluator om hem te openen. Elke vraag in het formulier verschijnt eronder met een eigen schakelaar.
- Zet de vragen aan waar hij naar moet kijken, en configureer elke vraag.
Welke vragen geëvalueerd kunnen worden
Elk veldtype behalve Ending Screen en Redirect URL. De twee endings verzamelen niets, dus er valt niets te evalueren. Wat per type verschilt, is hoe precies een rule het antwoord kan lezen. Een Yes/No-antwoord is een van twee bekende waarden. Een File Upload-antwoord kan alleen worden getest op bestandsnaam, type en grootte. Elke evaluatorpagina bevat de operatortabel voor zijn rules.Rules of AI
Criteria, Scoring en Skills vragen elk per vraag How to evaluate?, met twee antwoorden.- Use answer rules vergelijkt het antwoord met condities die jij schrijft. Hetzelfde antwoord geeft altijd hetzelfde resultaat, en er wordt geen AI-call gedaan.
- Evaluate with AI geeft de vraag, het antwoord en jouw notitie aan het model, dat beslist. Gebruik het voor vrije tekst, waar een rule een goed antwoord niet van een zwak antwoord kan onderscheiden.
Eén notitie per vraag
Het vak onderaan de evaluatorinstellingen van een vraag neemt een instructie voor de AI aan. Het label verandert met de evaluator waaruit je het opende: What should AI look for?, How should AI award points?, What skill signals should AI look for? Het vak is één notitie per vraag, gedeeld door alle drie. Schrijf hem onder Criteria en dezelfde tekst verschijnt onder Scoring en Skills. Houd hem over het antwoord in plaats van over één evaluator.Wanneer elke evaluator draait
Een respons wordt geëvalueerd wanneer hij wordt afgerond, en opnieuw in Test & Evaluate terwijl je aan het bouwen bent. De stappen draaien in deze volgorde.- Elke rule-gebaseerde vraag wordt geëvalueerd. Er komt geen AI aan te pas.
- De vragen die op Evaluate with AI staan gaan in één call naar het model.
- De resultaten per vraag worden het oordeel, de score en de skill-percentages.
- Generated fields draait als laatste, over de hele respons plus de resultaten uit stap 3.
Waar de resultaten naartoe gaan
- In de builder toont Test & Evaluate elk resultaat naast de antwoorden die het opleverden.
- Op een ingediende respons worden de resultaten erbij opgeslagen. Export CSV en Export Excel in het driepuntsmenu van de builder voegen een kolom per resultaat toe, inclusief één per skill en één per generated field.
- In een automatisering is elk resultaat een variabele, zoals
{{form_response.evaluation.scoring.band.label}}. Test & Evaluate somt ze allemaal op onder Automation variables, met de waarde uit de run voor je neus. Zie Variabelen.
Gerelateerd
- Criteria, Scoring, Skills en Generated fields behandelen de vier evaluatoren die je configureert.
- Test & Evaluate draait de evaluatoren over een respons die je zelf verzint.
- Sollicitanten screenen en scoren met een pre-screeningformulier bouwt één formulier dat Criteria, Scoring en Summary samen gebruikt.
- Form Builder: Overzicht behandelt de builder, de gedeelde instellingen en elk veldtype.