Un răspuns poate fi bine scris și totuși să nu rezolve ceea ce ai cerut. Poate omite o informație, poate explica prea complicat sau poate adăuga o concluzie nesusținută. Ca să îi apreciem calitatea, trebuie să îl comparăm cu cererea, cu informațiile disponibile și cu felul în care vrem să îl folosim.
După ce trimiți o cerere, primul lucru pe care îl observi este felul în care sună răspunsul. Propozițiile sunt clare, textul are o ordine, iar tonul pare potrivit. Este firesc să ai o impresie bună.
Dar această primă lectură nu arată întotdeauna dacă ai primit ceea ce îți trebuia.
Un rezumat poate fi ușor de citit și poate pierde o condiție importantă. O explicație poate fi corectă, dar prea dificilă pentru cineva aflat la început. Un mesaj poate suna politicos și poate spune ceva ce nu intenționai să transmiți.
În articolul despre limitele AI-ului am urmărit verificarea informațiilor: dacă sunt reale, actuale și susținute. Acum privim răspunsul în ansamblu. Ne interesează și dacă a îndeplinit cererea, dacă poate fi înțeles și dacă îl putem folosi.
Pornim de la ceea ce am cerut
Să presupunem că ai câteva notițe despre o întâlnire:
„Întâlnirea este joi, la ora 18, în sala de la parter. Participanții trebuie să confirme până marți. Cine nu poate veni poate trimite întrebările în scris.”
Îi ceri modelului: „Transformă notițele într-un mesaj scurt pentru participanți. Păstrează toate informațiile și nu adăuga detalii.”
Un răspuns ilustrativ ar putea fi:
„Ne vedem joi, la ora 18, în sala de la parter. Te rugăm să confirmi participarea până marți. Întâlnirea va dura aproximativ o oră.”
Mesajul este scurt și ușor de înțeles. Totuși, dacă îl comparăm cu notițele, observăm două probleme. A dispărut posibilitatea de a trimite întrebările în scris, iar durata întâlnirii a fost adăugată fără să apară în material.
Răspunsul pare potrivit până când îl verificăm după cerințele concrete.
Evaluarea începe prin comparația dintre ceea ce ai cerut și ceea ce ai primit.
În exemplul nostru, condițiile importante erau păstrarea informațiilor și evitarea detaliilor noi. Tonul plăcut nu compensează încălcarea lor.
A făcut operația potrivită?
Prima întrebare este dacă modelul a realizat sarcina cerută. Ai solicitat o explicație, un rezumat, o comparație sau o reformulare?
Un răspuns poate rămâne în tema discuției și totuși să execute altceva. Dacă ai cerut diferențele dintre două variante, o prezentare separată a fiecăreia poate să nu fie suficientă. Dacă ai cerut corectarea greșelilor, o rescriere amplă poate schimba lucruri pe care voiai să le păstrezi.
Apoi verifici condițiile: a folosit materialul potrivit, a inclus elementele obligatorii și a respectat limitele importante?
Nu este nevoie să transformi fiecare prompt într-o listă lungă de control. Pentru o cerere simplă, poți identifica două sau trei lucruri care trebuie respectate. În cazul mesajului de mai sus, acestea sunt ușor de urmărit direct în notițe.
Ce spune este corect și complet?
După respectarea cererii, verificăm informațiile. Dacă răspunsul pornește de la un document, îl comparăm cu acel document. Dacă include afirmații din afara materialului, acestea pot avea nevoie de alte surse.
În exemplul întâlnirii, ora și locul au fost păstrate corect. Durata nu are însă o bază în notițe. Ea trebuie eliminată sau confirmată înainte să fie comunicată.
Contează și ceea ce lipsește. Posibilitatea trimiterii întrebărilor în scris este importantă pentru persoanele care nu pot participa. Eliminarea ei face mesajul incomplet, chiar dacă celelalte informații sunt corecte.
Un răspuns complet păstrează ceea ce este necesar pentru scopul cererii. Lungimea, singură, nu arată cât de complet este.
Un text scurt poate conține toate informațiile necesare. Un text lung poate repeta explicații generale și poate omite tocmai condiția de care ai nevoie.
Poate fi înțeles și folosit?
Un răspuns poate respecta informațiile și totuși să fie greu de folosit. Poate avea propoziții încărcate, termeni neexplicați sau o ordine care te obligă să revii de mai multe ori asupra textului.
Claritatea se apreciază în raport cu cititorul. Dacă ai cerut o explicație pentru începători, verifică dacă aceasta pornește de la lucruri cunoscute și explică noțiunile noi. Dacă ai cerut un mesaj scurt, observă dacă informația principală se găsește repede.
Privește și legătura dintre idei. Introducerea și concluzia spun lucruri compatibile? Recomandarea ține cont de limitele prezentate? Același termen este folosit cu același sens?
Aceste întrebări verifică coerența răspunsului: dacă părțile lui se susțin și pot fi urmărite împreună.
În cele din urmă, contează utilitatea. Un plan care recomandă doar „Organizează-te mai bine” oferă puțin ajutor. Dacă ai cerut pași concreți, rezultatul trebuie să arate ce poți face și în ce ordine.
Un răspuns bun trebuie să poată fi folosit pentru nevoia care a dus la cerere.
Unele probleme trebuie rezolvate înaintea altora
Evaluarea devine mai utilă când deosebim problemele care împiedică folosirea răspunsului de cele care țin de finisare.
În mesajul despre întâlnire, informația inventată și omisiunea trebuie corectate înainte de trimitere. O formulare ușor repetitivă ar avea o importanță mai mică.
La fel, într-o explicație, o concluzie greșită are prioritate față de un subtitlu slab. Într-un rezumat, pierderea unei condiții importante contează mai mult decât o propoziție care ar putea fi mai scurtă.
Poți privi rezultatul prin două întrebări:
Ce mă împiedică să îl folosesc? O eroare, o omisiune importantă, o cerință încălcată sau o concluzie nesusținută.
Ce l-ar face mai bun? Eliminarea unei repetiții, un exemplu mai clar, o ordine mai potrivită sau ajustarea tonului.
Această diferență te ajută să eviți reviziile care schimbă exprimarea, dar lasă problema principală nerezolvată.
O metodă mai atentă pentru răspunsuri ample
Pentru un mesaj scurt, comparația cu cererea și materialul poate fi suficientă. Pentru un articol, un plan sau o analiză, poate ajuta o grilă de evaluare, numită și rubrică. Aceasta reunește criteriile pe care vrei să le verifici.
Nu trebuie să folosești toate criteriile de fiecare dată. Le alegi în funcție de rezultat.
Pentru o cerere simplă, unele criterii se suprapun și pot fi verificate împreună. Într-un material mai amplu, separarea lor te poate ajuta să localizezi problema.
Poți folosi și note, dacă ai de comparat mai multe rezultate după aceleași criterii. Dar nota trebuie însoțită de o observație concretă. „Completitudine: 2 din 5” spune mai puțin decât „Lipsește informația pentru persoanele care nu pot participa.”
Criteriile sunt utile când te ajută să identifici probleme concrete. Un scor fără explicație rămâne greu de folosit.
Poate AI-ul să își evalueze răspunsul?
Poți cere modelului să compare rezultatul cu instrucțiunile și materialul inițial. Uneori va observa omisiuni, contradicții sau condiții nerespectate.
O cerere potrivită ar fi: „Compară răspunsul cu cererea și notițele. Identifică informațiile omise sau adăugate și arată pasajele respective. Nu rescrie încă mesajul.”
Separarea evaluării de rescriere îți permite să vezi ce probleme a identificat înainte să accepți modificările.
Totuși, modelul poate rata aceeași eroare sau poate aprecia prea favorabil propriul rezultat. Observațiile modelului sunt un ajutor pentru verificare, nu confirmarea finală a calității. Pentru fapte, calcule și informații importante, rămâne necesară comparația cu dovezile potrivite.
Mai există o diferență utilă: un răspuns bun arată că acea încercare a funcționat. Dacă vrei să reutilizezi promptul, trebuie să vezi cum se comportă și cu alte materiale, inclusiv cu unele incomplete sau ambigue. Vom reveni la această testare în articolul despre structurile reutilizabile.
De la evaluare la o modificare precisă
La finalul evaluării, ar trebui să poți spune ce funcționează, ce trebuie corectat și ce informații mai au nevoie de verificare.
Pentru mesajul de la început, diagnosticul este simplu: formularea este clară, dar trebuie reintrodusă informația că persoanele care nu pot participa pot trimite întrebările în scris. Durata neconfirmată trebuie eliminată. Restul mesajului poate fi păstrat.
Acesta este rostul evaluării: să transforme impresia generală într-o observație pe baza căreia poți acționa.
În articolul următor, „Cum îmbunătățești un răspuns AI prin revizie controlată”, vom vedea cum cerem modificările necesare și cum păstrăm părțile care funcționează deja.
Descoperă, pas cu pas, cum funcționează inteligența artificială, ce poate face pentru tine și cum o poți folosi în avantajul tău.
