Wenn du eigene Bots erstellst und dabei eigene Daten verwendest, musst du unbedingt darauf achten, dass der Bot diese Daten auch korrekt liest.
Stolperfallen beim Bereitstellen von Informationen für Bots
PDF-Dateien
PDF-Dateien sind nicht einfach ein einzelner Standard, sondern können zahlreiche Arten von Daten enthalten. PDFs sind für das Auge und insbesondere für den Drucker optimiert, nicht unbedingt für Maschinen.
Ein KI-System analysiert ein PDF entweder, indem es die Datei zerlegt und dabei Text und Bilddaten extrahiert, oder indem es die Datei als Bild erfasst. Manche Systeme kombinieren auch beides. Meist weißt du aber nicht, welches Verfahren verwendet wird, und du kannst nicht blind darauf vertrauen, dass dein PDF korrekt eingelesen wird.
Quellen zitieren lassen
Wenn du den Input deiner Daten nicht kontrollieren kannst, prüfe den Output, indem du eine gegebene Textstelle zitieren lässt. Nimm dabei insbesondere kritische Stellen in den Blick, z. B. einen Satz, der über zwei Spalten geht. Gib dem LLM den Anfang des Satzes und weise es an, den Satz korrekt fertigzuschreiben. Nur wenn das LLM den Satz wortwörtlich vervollständigt, kannst du davon ausgehen, dass es den Satz auch zur Verfügung hatte.
Tabellen
Ein Sprachmodell kann mit kompakten Informationshäppchen gut umgehen. Wenn ich als Mensch aber eine Tabelle lese, dann hole ich mir die Informationen aus der ersten Zeile ganz oben und vielleicht aus der letzten Zeile ganz unten zusammen, um die letzten Zellen zu verstehen. Ein Sprachmodell kommt damit meist nicht klar.
Verarbeite Tabellen darum entweder als Bild und prüfe dabei genau, ob die KI damit klar kommt oder besser: Wandle die Tabelle in ein für Sprachmodelle lesbares Format um. Das am besten lesbare Format ist Json.
Mit diesem Onlinekonverter kannst du auf einfachste Weise aus einer Exceltabelle ein Json erstellen. Wenn du mehr funktionen brauchst, schau dir diesen Konverter hier an
Fehlender interner Kontext
Wenn du Daten aus einem Fachgebiet einliest, werden gerne Abkürzungen und Wörter gebraucht, die eine sehr spezifische Bedeutung haben. Ein Sprachmodell kann nicht unbedingt korrekt erraten, was diese Begriffe bedeuten. Erstelle darum eine Zuordnung, die dieses fehlende Kontextwissen liefert. Falls nötig, füge dieses kompakte, aber wichtige Wissen direkt in den Systemprompt ein oder stelle sicher, dass es dort, wo es benötigt wird, auch direkt zur Verfügung steht (zum Beispiel in den Dokumenten, in denen es vorausgesetzt wird).
KI für dein Schulhausteam
Über Best Pick Meier biete ich Weiterbildungen und Einzeltrainings für Lehrpersonenteams an. Bist du an einem Weiterbildungs- oder Beratungsangebot interessiert? Melde dich einfach direkt oder besuche mein Beratungsangebot bei Best Pick Meier.