Két hibás véglet
A rendszerpromptok írásánál két gyakori hiba fordul elő. Az egyik véglet a túlságosan specifikus prompt, ami minden lehetséges esetre külön szabályt próbál lefektetni. Ez törékeny if-else logikákhoz vezet, amik az első váratlan helyzetben megbicsaklanak, és karbantarthatatlanná válnak.
A másik véglet a túlságosan homályos prompt, ami általános elveket sorol fel konkrét iránymutatás nélkül. Ilyenkor a modellnek nincs elég jelzése ahhoz, hogy eldöntse, mit várunk tőle egy adott helyzetben, így kiszámíthatatlanul viselkedik.
Törékeny if-else prompt
- Minden lehetséges esetre külön szabály
- Az első váratlan helyzetben megbicsaklik
- Idővel karbantarthatatlanná válik
Minimális, de elégséges prompt
- Konkrét iránymutatás, kevés szabály
- A modell heurisztikaként tudja alkalmazni
- Új helyzetben is kiszámíthatóan viselkedik
Strukturálás és tesztelés
A rendszerpromptot érdemes világos struktúrába rendezni, például XML tagekkel vagy Markdown fejlécekkel, hogy a modell könnyen elkülönítse egymástól a különböző típusú információkat, mint a háttér, az instrukciók, vagy az eszközhasználati útmutatás.
A rendszerpromptot mindig a legjobb elérhető modellel érdemes tesztelni, és a valós hibamódok alapján fokozatosan bővíteni. Ez azt jelenti, hogy nem elméleti esetekre írunk szabályokat, hanem a ténylegesen megfigyelt hibás viselkedésekre reagálunk, célzottan és takarékosan.
Elméleti esetekre írt szabályok
Olyan helyzetekre készül a prompt, amik talán sosem fordulnak elő. A szabályhalmaz nő, a jel aránya csökken.
Megfigyelt hibamódokra reagálás
Csak az kerül a promptba, amit a tesztelés a legjobb modellel ténylegesen hibaként mutatott, célzottan és takarékosan.
Miért nem egyszeri feladat ez sem
A rendszerprompt írása ugyanúgy iteratív folyamat, mint a context engineering egésze. Ahogy az ügynök új helyzetekbe kerül, új hibamódok merülnek fel, amiket vissza kell vezetni a promptba, de mindig a legkisebb szükséges kiegészítéssel, nem egy újabb kivétel hozzáadásával a végtelenségig.
- Az ügynök új helyzetbe kerülElesben olyan eset jön, amire a prompt nem készült fel.
- Hibamód megfigyeléseA legjobb elérhető modellel tesztelve kiderül, pontosan mi romlik el.
- Legkisebb kiegészítésA promptba csak a szükséges minimum kerül vissza, nem egy újabb kivétel.
- Újra tesztelésA ciklus folytatódik az ügynök teljes életciklusán át.
Mindig csak a legkisebb szükséges kiegészítés kerüljön a rendszerpromptba egy új hibamód után, nem újabb és újabb kivételek a végtelenségig.
Workshop
AI Transformation Day
Egésznapos, vezetőknek szóló program. Feltérképezzük, hol tart a szervezet, mi az első reális lépés, és milyen belső feltételek szükségesek a sikerhez. A nap végén konkrét, prioritizált cselekvési lista.
Érdekel a program →