Iza 4
Kako testirati AI chatbot na hrvatskom prije objave
Provjerite točnost prema izvorima, hrvatski jezik, nepoznata pitanja, predaju osobi i ponašanje pri pogreškama prije nego što chatbot objavite.
Chatbot koji uvjerljivo odgovori na jedno pitanje još nije provjeren za korisničku podršku. Prije objave trebate skup scenarija koji pokriva točne odgovore, nepoznate informacije, granice ovlasti i tehničke probleme. Jezična prirodnost i poslovna točnost provjeravaju se odvojeno.
Predloženi postupak služi kao kontrolni popis za projekt, a ne jamstvo da se pogreška nikada neće pojaviti. Primjeri su ilustrativni; prilagodite ih svojim odobrenim izvorima.
Najprije zapišite što očekujete
Za svako pitanje zabilježite izvor, bitne činjenice koje odgovor mora sadržavati i što ne smije tvrditi. Dogovorite je li prihvatljiv rezultat odgovor, dodatno pitanje, odbijanje zahtjeva ili upućivanje osobi.
Primjer: pitanje "Mogu li vratiti proizvod?" ne treba automatski dobiti odobrenje. Očekivani odgovor ovisi o dokumentiranim pravilima i ovlastima sustava. Ako nema uvid u narudžbu, asistent to ne smije prikazati kao provjerenu činjenicu.
Provjerite različite oblike hrvatskog pitanja
Istu namjeru izrazite na nekoliko načina. Uključite kratke upite, pogreške pri tipkanju, različite padeze i poruke bez dijakritičkih znakova. Provjerite ostaje li odgovor razumljiv i dosljedan dogovorenom obraćanju s "Vi".
- "Gdje mogu pronaći uvjete povrata?"
- "Kako da vratim proizvod koji mi ne odgovara?"
- "povrat narudžbe - kome se javiti?"
- "Možete li to objasniti jednostavnije?"
Ne ocjenjujte samo gramatiku. Odgovori na različite formulacije trebaju biti u skladu s istim izvorom. Zabilježite kada nejasno pitanje zahtijeva dodatno pojašnjenje umjesto nagađanja.
Testirajte informacije koje nedostaju
Postavite pitanje o podatku koji nije dostupan u bazi, promijenjenom pravilu ili nepostojećoj usluzi. Provjerite priznaje li asistent ograničenje i nudi li koristan sljedeći korak.
Ako se dva izvora ne slažu, pogrešku treba razriješiti u pripremi sadržaja. Ponovite test nakon ispravka. Vodič za pripremu dokumentacije objašnjava kako odrediti vlasnika i aktualnu verziju izvora.
Provjerite granice i predaju osobi
Pokrijte pokušaje promjene uloge, otkrivanja internih uputa i pristupa tuđim podacima. Za te provjere koristite izmišljen sadržaj, a ne stvarne podatke kupaca. Posebno testirajte zahtjeve za radnje koje asistent nije ovlašten izvršiti.
Ako posjetitelj želi osobu, put do tima mora stvarno raditi. Provjerite poveznicu, obrazac ili dogovorenu integraciju. Tekst koji obećava predaju nije dokaz da je upit uspješno dostavljen. Više primjera nalazi se u vodiču o chatbotu u korisničkoj podršci.
Testirajte i prozor razgovora
Provjerite otvaranje i zatvaranje, dulji razgovor, čitanje ranije poruke i dolazak novog odgovora. Na mobitelu provjerite tipkovnicu i dostupnost gumba za zatvaranje. Uključite tipkovničku navigaciju, čitač zaslona i postavku smanjenih animacija na uređaju.
Simulirajte spor odgovor, nedostupan sustav i dosegnuto ograničenje poruka. Posjetitelj treba razumjeti što se dogodilo, a ne ostati uz beskonačan prikaz čekanja. Testna okolina i kontrolirani odgovori omogućuju te provjere bez slanja stvarnih upita korisnicima.
Zabilježite rezultat i ponovite provjeru
Uz svaki scenarij spremite očekivani rezultat, uočeni problem i odluku osobe koja odobrava ispravak. Nemojte prihvatiti izmišljeno pravilo ili neovlaštenu radnju zato što su ostali odgovori zvučali uvjerljivo.
Ponovite ključne scenarije nakon promjene izvora, modela ili integracije. Za AI chatbot po mjeri dogovorite te provjere kao dio opsega prije objave, zajedno s vlasnikom sadržaja i načinom prijave pogrešaka.
# izvor: Iza 4