O společnosti BenchBot

BenchBot vznikl v roce 2024 ve společnosti xyndata, softwarové firmě se sídlem v Praze. Vše začalo reálným problémem: jeden z největších německých maloobchodních řetězců nedokázal spolehlivě otestovat konverzační AI, na které stál jeho zákaznický servis. Jeho chatboty a hlasoví asistenti — postavení na platformě Cognigy.ai — vypadali v ukázkách skvěle, ale každé nové vydání s sebou neslo riziko, že naruší průběh konverzace, dojde k úniku dat nebo se chybně zpracuje hraniční případ, na který nikoho nenapadlo myslet.

Sledovali jsme, jak se jejich tým snaží udržet krok pomocí manuálního testování — ručně přehrával konverzace, udržoval křehké skripty, a přesto mu unikaly pokusy o prompt-injection, halucinace a mezery v souladu s předpisy, které se projevily až v produkčním provozu. Tradiční QA nikdy nebylo navrženo pro systémy, které mohou být nepředvídatelné, manipulovatelné nebo se sebevědomě mýlit. Testování konverzační AI muselo být stejně důsledné a automatizované jako testování jakéhokoli jiného kritického softwaru.

Postavili jsme tedy platformu, kterou bychom jim přáli mít. BenchBot z této zkušenosti vyrostl v kompletní testovací sadu, která automaticky prozkoumá schopnosti bota, ukotví ho vůči knowledge base a provede funkční, bezpečnostní a compliance kontroly napříč více než 60 konektory — pro chatboty a hlasové asistenty na libovolné platformě, nejen na Cognigy. Společnost xyndata dnes pomáhá týmům v maloobchodu, finančnictví a zdravotnictví nasazovat konverzační AI, které mohou skutečně důvěřovat.