Hogyan mérünk

Ha azt állítjuk, hogy a robot forrás nélkül nem válaszol, azt meg is kell tudnunk mutatni. Ez az oldal arról szól, hogy pontosan mit mérünk, min, hogyan — és hol vannak a mérés határai.

Miért mérünk egyáltalán

Megmérjük, hogy a robot válaszol-e a tudásbázisban lefedett kérdésekre, és visszautasítja-e azokat, amelyekre a forrás nem ad választ. Az alábbi eredmény a saját RobiFox-súgónkon végzett, lezárt futásból származik.

A próbakészlet

A RobiFox saját súgója, benne a 2026. augusztus 22-i RobiFox_Kezikonyv.docx kézikönyvvel, és 52 előkészített magyar kérdés. Ez egy magyar támogatási tudásbázis mérése; az angol vagy a nyelvek közötti válaszminőséget nem méri.

40

40 megválaszolható kérdés

A súgóban lefedett kérdések. Mindegyikhez elvárt forrás tartozik, jellemzően a feltöltött Word-kézikönyv számozott szakasza.

12

12 megválaszolhatatlan kérdés

A teszt tudásbázisában nem szereplő válaszok: például a látogató saját kreditegyenlege, egyedi számlázási adatai és a terméktámogatáson kívüli tanácsok.

Példa mindkét fajtára
Megválaszolható: „Milyen formátumú dokumentumot tudok feltölteni új anyagként?” — a kézikönyv felsorolja a PDF-, Word- és táblázatfájlokat.
Megválaszolhatatlan: „Mennyi kreditem maradt jelenleg a saját fiókomban?” — a súgó nem látja a látogató egyedi egyenlegét.

Mit mérünk

Helyes visszautasítás

A 12 megválaszolhatatlan kérdésből hányra mondja ki, hogy nem tudja. Ez a legfontosabb szám: itt hibázni azt jelenti, hogy magabiztosan mond valótlant egy leendő ügyfélnek. A cél 100%, és 100% alatt a mérés HIBÁNAK számít, nem „jó eredménynek".

Az elvárt forrás megjelölése

Az elvárt forrással rendelkező kérdéseknél ellenőrizzük, hogy a pontos hivatkozás szerepel-e a válasz forrásai között. Egy fájlszakasz nem nyilvános webes link. Ez az ellenőrzés nem méri a HTTP-elérhetőséget vagy a válasz tartalmi helyességét.

Találati arány

A 40 megválaszolható kérdésből hányra születik válasz. A válasz megléte önmagában nem bizonyít helyességet: a tényleges szöveget össze kell vetni a forrással.

Válaszidő és költség

A futás kérdésenként rögzíti a keresés és a modell együttes válaszidejét, valamint a felszámított kreditet. A medián válaszidőt és a futás tényleges kreditösszegét mutatjuk. A szolgáltató terhelése módosíthatja az időket.

Hogyan fut a mérés

Az ÉLES rendszeren, végponttól végpontig: ugyanaz a keresés, ugyanaz a modellhívás, ugyanaz a válaszséma, amit egy látogató kap. Nem laboratóriumi másolat.
A kérdések egymás után, legfeljebb 50-es kötegekben futnak. Az 52 kérdés eredménye egyetlen lezárt futásba kerül.
A táblázat a legutóbbi lezárt futást mutatja. Az ismétlés megmutathatja az ingadozást; egyetlen százalék nem garancia a későbbi válaszokra.
Változtatás értékeléséhez ugyanazokat a kérdéseket, tudásverziót és modellt hasonlítsd össze. A dátum és a tényleges válasz is számít; külön napokon futtatott mérésből nem következik, hogy a kód gyorsított a válaszokon.

A legutóbbi eredmény

Mérve: 2026. október 1., éles rendszeren, „openai/gpt-5.6-luna” nyelvi modellel.

A saját RobiFox-súgónk magyar nyelvű belső mérése, nem ügyféleredmény vagy független audit. A válasz/visszautasítás és a pontos forrásegyezés gépi ellenőrzés; a tartalmi helyességhez el kell olvasni a válaszokat.

Amit mérünk	Eredmény	Cél
Helyes visszautasítás (megválaszolhatatlan kérdések)	11/12 (92%)	100% — ez alatt hiba
Az elvárt forráshivatkozás szerepel	35/40 (88%)	100% — ez alatt hiba
Válaszolt a megválaszolhatókra	37/40 (93%)	nincs kemény cél
Válaszidő (medián)	4.2 mp	nincs kemény cél
A teljes futás felszámított kreditje	38	nincs kemény cél
Futtatási hibák	0	nincs kemény cél

A dátumozott teszteredmények letöltése (JSON) — 2026-10-01, v2

A teszt tényleges válaszai

Az alábbi kérdések és válaszok eredeti magyar mérési kimenetek, nem szimulált beszélgetések. A forrást és a válasz szövegét együtt ellenőrizd.

Milyen formátumú dokumentumot tudok feltölteni új anyagként?

Új anyagként PDF-, Word- vagy táblázatfájlt tudsz feltölteni. Feltöltés előtt ellenőrizd a dokumentáció idevágó részét, mert az útmutató idővel frissülhet.

A robot által visszaadott források:

fajl://RobiFox_Kezikonyv.docx#szakasz=39
fajl://RobiFox_Kezikonyv.docx#szakasz=38

Mennyi kreditem maradt jelenleg a saját fiókomban?

A saját fiókod aktuális kredit-egyenlegét nem látom, ezért nem tudom megmondani, mennyi maradt. Bejelentkezés után a „Kredit-egyenleg és felhasználás” lapon ellenőrizheted a rendelkezésre álló kreditet; kérlek, döntés előtt ott ellenőrizd az aktuális adatot.

A robot által visszaadott források:

fajl://RobiFox_Kezikonyv.docx#szakasz=85

Amit ezek a számok NEM jelentenek

NEM ígéret a te oldaladra. Ezek egy konkrét weboldal tudásbázisán születtek. A te eredményedet a te tartalmad minősége dönti el: egy ellentmondásos, elavult weboldalból nem lesz jó robot — legfeljebb egy robot, ami tisztességesen megmondja, hogy nem tudja.
NEM ügyfélhivatkozás. Ezt mi mértük, a saját eszközünkkel. Nem független audit, és nem is annak adjuk ki.
NEM garancia arra, hogy a robot sosem téved. A nyelvi modell hibázhat, és a tudásbázisod is tartalmazhat hibát. Ezért van minden válasz mögött forrásmegjelölés és minden beszélgetés mögött napló: nem azt ígérjük, hogy nincs hiba, hanem azt, hogy KIDERÜL.
A válaszidő nem szolgáltatási garancia. A nyelvi modell szolgáltatójától és a tudásbázistól is függ; a kijelzett medián ezt a futást jellemzi.

Mérd meg a sajátodat

Ugyanez a mérés a te tudásbázisodon is lefuttatható, és a panelen a Minőségmérés lapon látod az eredményét. A visszautasítási arány és a hiányzó tudás listája együtt megmutatja, hol tart a tartalmad — sokszor ez a legértékesebb dolog, amit a robot bevezetése ad.

Kipróbálom díjmentesen

GYIK · Hogyan működik

Gyakorlati chatbot-útmutatók

Angol nyelvű blogunkon a források előkészítéséről, a válaszminőség méréséről és az emberi átvételről olvashatsz.