Přeskočit na hlavní obsah

Optimalizace vašeho AI experta na základě výsledků testování a zpětné vazby

Testování vám odhalilo oblasti, které je potřeba vylepšit. Proces optimalizace je iterativní – provedete změny, znovu otestujete, a tak stále dokola, dokud nebudete s výsledkem spokojeni. Zde je podrobný průvodce čtyřmi klíčovými oblastmi ladění vašeho AI Experta.

16.1 Ladění "srdce" vaší AI: Úpravy system promptu (soubor system_prompt.gdoc)​

Pokud váš AI Expert opakovaně vykazuje nežádoucí chování (např. je příliš familiární/formální, neodpovídá na určité typy otázek korektně, "halucinuje" v určitých oblastech, nerespektuje disclaimery), je často potřeba upravit nebo doplnit instrukce v jeho system promptu.

Nejčastější úpravy:​

  • Zpřesnění osobnosti a stylu komunikace: Pokud je tón AI nevhodný, upravte formulace v sekci "OSOBNOST A STYL KOMUNIKACE". Buďte konkrétnější (např. místo "buď profesionální" zkuste "Tvůj tón je zdvořilý, věcný a vyhýbáš se hovorovým výrazům.").
  • Posílení pravidel a mantinelů: Pokud AI překračuje hranice (např. radí v oblastech, kde nemá, nebo ignoruje disclaimery), zpřísněte nebo zjednodušte pokyny v sekci "ZÁKLADNÍ PRAVIDLA CHOVÁNÍ A ETICKÉ MANTINELY". Někdy pomůže instrukci zopakovat nebo zdůraznit (např. "VŽDY A ZA VŠECH OKOLNOSTÍ PŘED POSKYTNUTÍM JAKÉKOLI RADY TÝKAJÍCÍ SE ZDRAVÍ UVEĎ NÁSLEDUJÍCÍ DISCLAIMER:...").
  • Využití sekce "KOREKCE ČASTÝCH CHYB": Jak bylo popsáno v bodě 12.2 (Sekce F), toto je velmi efektivní způsob, jak "přeučit" AI v konkrétních případech, kdy standardní instrukce nestačí. Jasně popište problémové chování a hned pod něj napište, jaké je správné chování.

DŮLEŽITÉ: Po KAŽDÉ úpravě souboru system_prompt.gdoc (a jeho uložení na Google Drive) musíte v Telegramu spustit příkaz /update, aby se změny načetly a projevily v chování vaší AI!

16.2 Doplňování, zpřesňování a úprava vašeho know-how (práce se složkou sources na Google Drive)​

Pokud AI odpovídá nesprávně, neúplně, zastarale, nebo přiznává neznalost v tématech, která by měla ovládat, pravděpodobně je problém v kvalitě nebo rozsahu vašeho nahraného know-how.

Co dělat:​

  • Doplňte chybějící informace: Pokud AI nezná odpověď na legitimní otázku z vaší oblasti, vytvořte nový materiál (např. Google Dokument ve složce sources/Texts, PDF, audio nahrávku) s podrobnou odpovědí a nahrajte ho.
  • Aktualizujte zastaralé informace: Projděte své stávající materiály v sources a ujistěte se, že jsou aktuální. Zastaralé nebo neplatné soubory smažte a nahraďte novými verzemi.
  • Zpřesněte nejasné formulace: Pokud AI špatně interpretuje některé vaše materiály, zkuste je přeformulovat tak, aby byly jednoznačnější a srozumitelnější.
  • Vytvořte "FAQ pro AI": Pro často kladené otázky, na které chcete mít jistotu naprosto přesné a konzistentní odpovědi, můžete vytvořit speciální Google Dokument (např. FAQ_pro_AI_Experta.gdoc ve složce sources/Texts), kde tyto otázky a ideální odpovědi na ně explicitně uvedete.

DŮLEŽITÉ: Po KAŽDÉ změně obsahu vaší složky sources (přidání, úprava, smazání souborů/URL) musíte v Telegramu spustit příkaz /update, aby se změny promítly do znalostní báze vaší AI!

16.3 Revize a přegenerování expertních podrolí (práce se složkou ROLES – pro pokročilé ladění)​

Tento krok obvykle není potřeba často, ale může být klíčový v některých specifických situacích:

Kdy zvážit práci s rolemi?​

  • Pokud analýza pomocí /lastRole a /investigateAnswer:{message} konzistentně ukazuje, že problémové odpovědi AI pocházejí z definice konkrétní expertní podrole (např. role je příliš obecná, chybí jí klíčové aspekty z vašeho know-how, atd.).
  • Pokud jste provedli velmi zásadní rozšíření nebo restrukturalizaci vašeho know-how (např. přidali jste 10 nových modulů kurzu na zcela nová témata, nebo jste kompletně přepsali vaši klíčovou knihu). V takovém případě je velmi pravděpodobné, že původně vygenerované role již plně neodrážejí aktuální stav vašich znalostí.

Jak postupovat?​

  • Cílená aktualizace konkrétní role: Pokud se problém týká jen jedné nebo několika málo rolí (a víte kterých), můžete zkusit:
    1. (Volitelně, pro maximální kontrolu) Otevřít Google Dokument s definicí dané role ve složce ROLES a provést v něm manuální úpravy a zpřesnění.
    2. Poté v Telegramu spusťte příkaz /updateRole:{jméno_role}. AI si uloží definici této role na základě nejnovějších informací.
  • Kompletní přegenerování VŠECH rolí (po velkém update know-how):
    1. Ujistěte se, že jste nejprve nahráli veškeré nové/změněné know-how do sources a úspěšně dokončili příkaz /update (aby byla znalostní báze aktuální).
    2. Poté jděte na váš Google Drive do složky ROLES.
    3. Smažte VŠECHNY Google Dokumenty, které obsahují definice jednotlivých rolí (tedy soubory s názvy jako Role_NazevRole.gdoc). Dejte pozor, abyste NESMAZALI soubor list_of_roles.gdoc – ten obsahuje pouze seznam názvů rolí a je potřeba pro jejich opětovné vytvoření!
    4. Poté v Telegramu spusťte příkaz /updateRoles. AI nyní začne od nuly generovat detailní definice pro všechny role uvedené v list_of_roles.gdoc, přičemž bude vycházet z vaší kompletní, aktuální znalostní báze. Tento proces může trvat déle, ale zajistí, že vaše expertní podrole budou co nejlépe odrážet veškeré vaše know-how.

16.4 Vylepšení onboardingu a prvního dojmu (práce se souborem onboarding.gdoc)​

Na základě zpětné vazby od vašich beta testerů (nebo vašich vlastních pocitů z testování v roli nového uživatele) můžete chtít upravit uvítací zprávy (first_messages) nebo automatické onboardingové zprávy (onboarding_messages). Jsou zprávy dostatečně jasné, motivující a přátelské? Vede výzva k akci uživatele správným směrem? Funguje odkaz na případné onboardingové video? Proveďte potřebné úpravy v souboru onboarding.gdoc.

DŮLEŽITÉ: Po KAŽDÉ úpravě souboru onboarding.gdoc musíte v Telegramu spustit příkaz /update, aby si AI načetla nová nastavení!

16.5 Iterativní proces: klíč k úspěchu je v opakování a trpělivosti​

Pamatujte, že testování a optimalizace není jednorázová záležitost, ale cyklický, iterativní proces:

  1. Testujte (sami nebo s beta testery).
  2. Pečlivě analyzujte výsledky a sbírejte konkrétní zpětnou vazbu.
  3. Na základě analýzy provádějte cílené úpravy (System Prompt, know-how v sources, definice rolí, onboarding).
  4. Znovu testujte, abyste ověřili dopad vašich změn.
  5. Opakujte, dokud nejste s chováním a kvalitou vašeho AI Experta opravdu spokojeni.

Buďte trpěliví a systematičtí. Vyladění komplexní AI může nějaký čas trvat. Cílem není dosáhnout 100% dokonalosti (protože AI je z principu pravděpodobnostní a neustále se učí), ale dosáhnout stavu, kdy jste vy i vaši testeři přesvědčeni, že AI poskytuje vysokou hodnotu a je připravena pro vaše skutečné zákazníky.

Naposledy aktualizováno