Odpověď AI může v jednom seznamu doporučit platformu SaaS, agenturu i plugin pro WordPress. Pro interpretaci je třeba označit typ řešení a úkol zákazníka. Návod řeší kódování doporučení do benchmarku, nikoli výběr dodavatele.
1. Určete jednotku a úkol porovnání
Rozhodněte, zda sledujete firmy, produkty nebo konkrétní nabídky. Firma může prodávat software i poradenství; jeden produkt není celá organizace. Uchovávejte zvlášť název, doménu, produkt a provozovatele. Podobné názvy neslučujte bez ověření identity.
Úkolem může být monitoring odpovědí AI, objednání auditu nebo úprava obsahu webu. Odpověď o monitoringu může uvést řešení pokrývající jen část potřeby. Samotné doporučení neprokazuje funkce.
2. Použijte slovník typů
| Typ | Co klasifikujeme | Zdroj k ověření |
|---|---|---|
| Platforma SaaS | Software poskytovaný jako služba | Popis produktu a dokumentace |
| Služba agentury | Práce týmu na zakázku | Rozsah konkrétní nabídky |
| Plugin | Rozšíření instalované na webu | Dokumentace a vydavatel |
| Katalog nebo informační zdroj | Soubor nabídek či referenčních materiálů | Účel a provozovatel zdroje |
Typ označuje formu řešení, nikoli účinnost. Plugin může mít monitoring a platforma doplněk WordPress. Úkol, funkce a typ proto zapisujte odděleně. Více štítků je možné, pokud je dokládá ověřená nabídka.
3. Zakódujte příklad smíšené odpovědi
Názvy a informace jsou smyšlené. AI uvedla Vista Monitor, Studio Aurora a Schema Note. Pro příklad předpokládáme, že ověřené popisy potvrzují následující rozsah.
| Položka | Typ | Potvrzený úkol | Porovnávací skupina |
|---|---|---|---|
| Vista Monitor | Platforma SaaS | Monitoring odpovědí AI | Monitoring |
| Studio Aurora | Služba agentury | Provedení auditu | Auditní služby |
| Schema Note | Plugin | Úprava značek webu | Rozšíření webu |
Tři položky tvoří jeden původní seznam, ale nejsou zaměnitelné pro každý úkol. Pokud Studio Aurora nabízí také platformu, přidejte podle jednotky druhý produkt nebo štítek. Dva štítky samy o sobě nesmějí způsobit dvojí započtení.
4. Zaznamenejte důkazy a nejistotu
Uchovávejte datum, model, prompt, název položky, produkt, doménu, typ, úkol, URL zdroje a zdůvodnění. Pokud oficiální popis kategorii nerozhodne, označte ji jako nepotvrzenou. Odpověď AI je předmětem měření, nikoli nezávislým důkazem svého popisu.
Sporné případy nechte posoudit druhým člověkem podle stejného slovníku. Zapište rozhodnutí a verzi pravidel. Neměňte štítky po zjištění výsledku pouze proto, aby vlastní značka vypadala lépe.
5. Ukažte původní výsledek vedle skupin
Zachovejte původní seznam i viditelnost za celý měřený rozsah. Vedle nich ukažte skupiny podle úkolu a typu. Případný podíl ve skupině musí mít vlastní název a přesný jmenovatel; není původním výsledkem Semly.
Semly zpřístupňuje odpovědi AI a zdroje. Štítky typů a rozdělení benchmarku jsou zde prací analytika. Další měření musí zachovat rozsah nebo výslovně dokumentovat změnu.
Kontrola kvality
- Jednotka porovnání je stanovená.
- Typ, úkol a funkce jsou oddělené.
- Hybridy mají důkazy a nepočítají se dvakrát.
- Nepotvrzené kategorie zůstávají viditelné.
- Původní výsledek a jmenovatele jsou dostupné.