O kompaniji BenchBot

BenchBot je 2024. godine kreirala xyndata, softverska kompanija sa sjedištem u Pragu. Sve je počelo stvarnim problemom: jedan od najvećih njemačkih trgovaca nije mogao pouzdano testirati razgovorni AI koji stoji iza njegove korisničke podrške. Njihovi chatbotovi i voicebotovi — izgrađeni na platformi Cognigy.ai — izgledali su odlično u demonstracijama, ali je svako izdanje nosilo rizik da naruši tok razgovora, procuri podatke ili pogrešno obradi rubni slučaj koji se niko nije sjetio provjeriti.

Pratili smo kako njihov tim pokušava održati korak putem ručnog testiranja — ručnim ponavljanjem razgovora, održavanjem krhkih skripti, a i dalje propuštajući pokušaje prompt-injectiona, halucinacije i propuste u usklađenosti koji su se pojavljivali tek u produkciji. Tradicionalni QA nikada nije bio osmišljen za sisteme koji mogu biti nepredvidivi, manipulisani ili samouvjereno pogrešni. Testiranje razgovornog AI-ja moralo je postati jednako rigorozno i automatizovano kao testiranje bilo kojeg drugog kritičnog softvera.

Zato smo izgradili platformu koju smo željeli da su imali. BenchBot je iz tog iskustva izrastao u kompletan paket za testiranje koji automatski istražuje mogućnosti bota, povezuje ga s bazom znanja i provodi funkcionalne, sigurnosne i provjere usklađenosti na više od 60 konektora — za chatbotove i voicebotove na bilo kojoj platformi, ne samo Cognigy. Danas xyndata pomaže timovima u maloprodaji, finansijama i zdravstvu da isporuče razgovorni AI kojem zaista mogu vjerovati.