Přeskočit na hlavní obsah

Optimalizace vašeho AI experta na základě výsledků testování a zpětné vazby

Testování vám odhalilo oblasti, které je potřeba vylepšit. Proces optimalizace je iterativní – provedete změny, znovu otestujete, a tak stále dokola, dokud nebudete s výsledkem spokojeni. Zde je podrobný průvodce čtyřmi klíčovými oblastmi ladění vašeho AI Experta.

Ladění "srdce" vaší AI: Úpravy system promptu​

Pokud váš AI Expert opakovaně vykazuje nežádoucí chování (např. je příliš familiární/formální, neodpovídá na určité typy otázek korektně, "halucinuje" v určitých oblastech, nerespektuje disclaimery), je často potřeba upravit nebo doplnit instrukce v jeho system promptu.

Nejčastější úpravy​

  • Zpřesnění osobnosti a stylu komunikace: Pokud je tón AI nevhodný, upravte formulace v sekci "OSOBNOST A STYL KOMUNIKACE". Buďte konkrétnější (např. místo "buď profesionální" zkuste "Tvůj tón je zdvořilý, věcný a vyhýbáš se hovorovým výrazům.").
  • Posílení pravidel a mantinelů: Pokud AI překračuje hranice (např. radí v oblastech, kde nemá, nebo ignoruje disclaimery), zpřísněte nebo zjednodušte pokyny v sekci "ZÁKLADNÍ PRAVIDLA CHOVÁNÍ A ETICKÉ MANTINELY". Někdy pomůže instrukci zopakovat nebo zdůraznit (např. "VŽDY A ZA VŠECH OKOLNOSTÍ PŘED POSKYTNUTÍM JAKÉKOLI RADY TÝKAJÍCÍ SE ZDRAVÍ UVEĎ NÁSLEDUJÍCÍ DISCLAIMER:...").
  • Využití sekce "KOREKCE ČASTÝCH CHYB": Jak bylo popsáno v bodě 11.2 (Sekce F), toto je velmi efektivní způsob, jak "přeučit" AI v konkrétních případech, kdy standardní instrukce nestačí. Jasně popište problémové chování a hned pod něj napište, jaké je správné chování.
warning

Po každé úpravě system promptu (a uložení na Google Drive) musíte spustit tlačítko Aktualizovat Know-how v Dashboardu, aby se změny načetly a projevily v chování vaší AI!

Doplňování, zpřesňování a úprava vašeho know-how (práce se složkou sources na Google Drive)​

Pokud AI odpovídá nesprávně, neúplně, zastarale, nebo přiznává neznalost v tématech, která by měla ovládat, pravděpodobně je problém v kvalitě nebo rozsahu vašeho nahraného know-how.

Co dělat​

  • Doplňte chybějící informace: Pokud AI nezná odpověď na legitimní otázku z vaší oblasti, vytvořte nový materiál (např. Google Dokument ve složce sources/Texts, PDF, audio nahrávku) s podrobnou odpovědí a nahrajte ho.
  • Aktualizujte zastaralé informace: Projděte své stávající materiály v sources a ujistěte se, že jsou aktuální. Zastaralé nebo neplatné soubory smažte a nahraďte novými verzemi.
  • Zpřesněte nejasné formulace: Pokud AI špatně interpretuje některé vaše materiály, zkuste je přeformulovat tak, aby byly jednoznačnější a srozumitelnější.
  • Vytvořte "FAQ pro AI": Pro často kladené otázky, na které chcete mít jistotu naprosto přesné a konzistentní odpovědi, můžete vytvořit speciální Google Dokument (např. FAQ_pro_AI_Experta.gdoc ve složce sources/Texts), kde tyto otázky a ideální odpovědi na ně explicitně uvedete.
warning

Po každé změně obsahu vaší složky sources (přidání, úprava, smazání souborů/URL) musíte spustit tlačítko Aktualizovat Know-how v Dashboardu, aby se změny projevily ve znalostní bázi vaší AI!

Revize a přegenerování expertních podrolí (práce se složkou ROLES – pro pokročilé ladění)​

Tento krok obvykle není potřeba často, ale může být klíčový v některých specifických situacích.

Kdy zvážit práci s rolemi?​

  • Pokud analýza pomocí /lastRole a /investigateAnswer:{message} konzistentně ukazuje, že problémové odpovědi AI pocházejí z definice konkrétní expertní podrole (např. role je příliš obecná, chybí jí klíčové aspekty z vašeho know-how, atd.).
  • Pokud jste provedli velmi zásadní rozšíření nebo restrukturalizaci vašeho know-how (např. přidali jste 10 nových modulů kurzu na zcela nová témata, nebo jste kompletně přepsali vaši klíčovou knihu). V takovém případě je velmi pravděpodobné, že původně vygenerované role již plně neodrážejí aktuální stav vašich znalostí.

Jak postupovat?​

  • Cílená aktualizace konkrétní role: Pokud se problém týká jen jedné nebo několika málo rolí (a víte kterých), můžete je cíleně upravit.
  • Kompletní přegenerování VŠECH rolí (po velkém update know-how): Použijte příkaz pro přegenerování rolí, pokud jste provedli rozsáhlé změny v know-how.

Vylepšení onboardingu a prvního dojmu​

Na základě zpětné vazby od vašich beta testerů (nebo vašich vlastních pocitů z testování v roli nového uživatele) můžete chtít upravit první zprávy nebo automatické onboarding zprávy. Jsou zprávy dostatečně jasné, motivující a přátelské? Vede výzva k akci uživatele správným směrem? Funguje odkaz na případné onboardingové video? Proveďte potřebné úpravy v Dashboardu v sekci Zprávy.

Dashboard screenshot

warning

Po každé úpravě onboarding zpráv musíte spustit tlačítko Aktualizovat Know-how v Dashboardu, aby AI načetla nová nastavení!

Iterativní proces: klíč k úspěchu je v opakování a trpělivosti​

Pamatujte, že testování a optimalizace není jednorázová záležitost, ale cyklický, iterativní proces:

  1. Testujte (sami nebo s beta testery).
  2. Pečlivě analyzujte výsledky a sbírejte konkrétní zpětnou vazbu.
  3. Na základě analýzy provádějte cílené úpravy (System Prompt, know-how v sources, definice rolí, onboarding).
  4. Znovu testujte, abyste ověřili dopad vašich změn.
  5. Opakujte, dokud nejste s chováním a kvalitou vašeho AI Experta opravdu spokojeni.

Buďte trpěliví a systematičtí. Vyladění komplexní AI může nějaký čas trvat. Cílem není dosáhnout 100% dokonalosti (protože AI je z principu pravděpodobnostní a neustále se učí), ale dosáhnout stavu, kdy jste vy i vaši testeři přesvědčeni, že AI poskytuje vysokou hodnotu a je připravena pro vaše skutečné zákazníky.