Jak ověřit, zda AI ušetří čas při třídění poptávek

U opakované úlohy rozhoduje použitelný výsledek po kontrole. Rychle vygenerovaný návrh nemusí šetřit čas, pokud ho člověk dlouho opravuje. Ověřte si přínos na malé úloze s jasnými pravidly.

Příklad: třídění poptávek pro obchod

Modelový pracovní postup: firma potřebuje oddělit nové poptávky, podporu stávajících zákazníků a nabídky spolupráce. AI připraví návrh třídění. Nic neodesílá a nemění záznamy v zákaznickém systému.

Pro první ověření použijte anonymizované zprávy bez jmen a kontaktů. Modelový vstup:

1. "Máme e-shop a potřebujeme prověřit měření nákupů v GA4. Kolik stojí kontrola?"
2. "Od včerejší úpravy se nám formulář odesílá dvakrát. Prosím opravit současné nastavení."
3. "Nabízím tvorbu textů. Posílám ukázky své práce."

Prompt musí určit, kdy rozhodne člověk

Rozděl tři zprávy do kategorií:
- nová obchodní poptávka
- podpora stávajícího zákazníka
- nabídka spolupráce
- nejasné, potřebuje člověka

Vrať číslo zprávy, kategorii a přesný úryvek, který
rozhodnutí podporuje. Ze slova oprava neodvozuj
existující zákaznický vztah. Pokud kategorii nelze
určit z textu, použij nejasné. Nevymýšlej údaje.
Nepřipravuj cenovou nabídku a nic neodesílej.

Dobrý prompt určuje nejen podobu výsledku, ale také hranici, za kterou má systém přestat odhadovat.

Očekávaný výsledek a chyba, kterou zachytit

V modelu má být 1 - nová obchodní poptávka s oporou "Kolik stojí kontrola?"; 2 - nejasné, protože nevíme, kdo nastavení spravuje ani zda pisatel už je zákazník; 3 - nabídka spolupráce s oporou "Nabízím tvorbu textů".

Modelová chyba: AI přiřadí druhou zprávu podpoře stávajícího zákazníka. Kontrolor ji vrátí mezi nejasné. Žádost o opravu sama nepotvrzuje existující smluvní vztah. Při automatickém předání by tak mohla zpráva skončit u nesprávného člověka.

Porovnejte každý řádek s původní zprávou. Žádná nesmí chybět ani se opakovat, citovaný úryvek musí být doslovný a výstup nesmí přidat kontakt nebo slib. Pravděpodobně znějící domněnka stále může být vymyšlený údaj.

Jak spočítat skutečnou úsporu

Na srovnatelném vzorku změřte ruční třídění a práci s AI. U AI započítejte přípravu vstupů, práci s nástrojem, kontrolu a opravy. Jednorázovou přípravu zadání a jeho údržbu evidujte zvlášť.

Čistá úspora opakované dávky = čas ručního třídění - příprava vstupu - práce s nástrojem - kontrola a opravy. Jde o způsob výpočtu, nikoli o naměřenou úsporu. Postup bych rozšířil až tehdy, když opakovaně šetří čas a neposílá poptávky nesprávným lidem.

Nejdříve používejte výstup jako návrh. Teprve po ověření pravidel zvažujte zapojení AI agenta do dalších kroků. AI může pomoci s přípravou podkladů k jednání. Cenu, závazek a citlivou komunikaci musí rozhodnout člověk, který klienta zná.

Časté otázky