Kurz & knapp
- Eine KI wie ChatGPT, Claude oder Microsoft Copilot kennt öffentliches Wissen bis zu ihrem Trainingsstand. Was in deinem Postfach, deinen Angeboten oder Köpfen deines Teams steckt, kennt sie nicht.
- Es gibt vier Wege, ihr dieses Wissen zu geben: reinkopieren, Gedächtnis und Projekte der Tools, angebundenes Firmenwissen und Training. Für die meisten Betriebe ist angebundenes, gepflegtes Wissen der praktikabelste Weg.
- Mehr Text macht die KI nicht automatisch schlauer. Entscheidend sind die richtige Quelle, der aktuelle Stand, klare Rechte und der Mut zur Antwort „weiß ich nicht“.
Frag ChatGPT, ob die Sondervereinbarung mit deinem wichtigsten Kunden auch für die neue Bestellung gilt. Du bekommst eine höfliche, gut formulierte Antwort. Sie ist nur leider nutzlos: Die KI kennt weder den Kunden noch die Vereinbarung. Die liegt irgendwo in einem Postfach, die passende Produktinfo in einem PDF, und die eine Person, die beides im Kopf hat, ist gerade im Urlaub.
Genau hier liegt der Unterschied zwischen einer KI, die viel weiß, und einer KI, die deinen Betrieb versteht. Das Erste kaufst du mit einem Abo. Das Zweite musst du ihr beibringen. Wie das geht, welche Wege es gibt und welche Fallen dabei lauern, erklären wir hier ohne Fachchinesisch.
Was eine KI weiß und was nicht
Sprachmodelle wie GPT, Claude oder Gemini werden mit riesigen Mengen öffentlicher Texte trainiert. Daraus entsteht breites Allgemeinwissen: wie man ein Angebot formuliert, was ein Skonto ist, wie man eine Reklamation freundlich beantwortet. Dieses Wissen hat einen Stichtag und endet an der Grenze zum Öffentlichen.
Alles, was dein Unternehmen ausmacht, liegt hinter dieser Grenze: Preislisten, Absprachen mit Kunden, Anleitungen, frühere Entscheidungen und ihre Gründe, die Erfahrung deines Teams. Davon weiß die KI nichts, solange du es ihr nicht gibst. Sie rät dann, und sie rät leider oft überzeugend.
Vier Wege, wie eine KI an dein Wissen kommt
Die Begriffe „Gedächtnis“, „Kontext“ und „Lernen“ werden gern durcheinandergeworfen. Dabei stecken dahinter sehr unterschiedliche Dinge mit eigenen Stärken und Grenzen:
| Weg | Was passiert | Gut für | Grenze |
|---|---|---|---|
| Reinkopieren | Du fügst Text oder Dateien direkt in den Chat ein. | Einzelne, schnelle Fragen | Nach dem Gespräch ist alles wieder weg. Jeder kopiert etwas anderes. |
| Gedächtnis und Projekte | ChatGPT-Memory, Projekte in ChatGPT oder Claude merken sich Hinweise und hinterlegte Dateien. | Persönliche Arbeitsweise, kleine feste Dokumente | Gilt meist pro Person oder Projekt, wird selten gepflegt und veraltet still. |
| Angebundenes Firmenwissen | Die KI fragt bei Bedarf eine gepflegte Wissensquelle ab, mit Rechten und Belegen. | Teamwissen, das sich ändert | Braucht einmal Einrichtung und jemanden, der die Quellen pflegt. |
| Training | Ein Modell wird mit deinen Daten nachtrainiert. | Sehr spezielle, wiederkehrende Fachaufgaben | Teuer, schwer zu korrigieren, einzelne Fakten lassen sich kaum gezielt löschen. |
Für die meisten kleinen und mittleren Betriebe ist der dritte Weg der interessante. Er verbindet das Beste aus beiden Welten: Die KI bleibt die, die dein Team ohnehin nutzt, und das Wissen bleibt an einer Stelle, wo es gepflegt und kontrolliert werden kann. Training klingt verlockend, ist aber eine eigene Forschungsfrage. Es lohnt sich erst, wenn es gegenüber gut angebundenem Wissen nachweisbar besser abschneidet.
Warum „einfach alles hochladen“ nicht funktioniert
Der naheliegende Gedanke: Die neuen Modelle verarbeiten doch riesige Textmengen auf einmal. Warum nicht einfach den ganzen Ordner hineinwerfen? Weil mehr Text nicht automatisch bessere Antworten bringt.
Die Forscher von Chroma haben 2025 untersucht, wie sich 18 Sprachmodelle bei immer längeren Eingaben verhalten. Ihr Ergebnis: Die Zuverlässigkeit nimmt mit der Länge der Eingabe ab, selbst bei einfachen Aufgaben.1 Ein großes Kontextfenster ist also eine Kapazität, keine Garantie, dass die KI das Wichtige auch findet und richtig gewichtet.
Dazu kommt ein zweites Problem, das in der Praxis noch häufiger ist: veraltetes Wissen. Der Benchmark LongMemEval prüft Gedächtnis-Fähigkeiten von KI-Assistenten und behandelt das zeitliche Einordnen und das Erkennen geänderter Informationen ausdrücklich als eigene, schwierige Fähigkeiten.2 Übersetzt in deinen Alltag: Liegen die Preisliste von 2025 und die von 2026 im selben Ordner, weiß die KI nicht von selbst, welche gilt.
Was gutes Firmenwissen für eine KI ausmacht
Wenn du deiner KI Wissen gibst, entscheidet nicht die Menge, sondern die Qualität. Aus der aktuellen Forschung und unserer eigenen Arbeit ergeben sich sechs Fragen, die über gute oder schlechte Antworten entscheiden:
- Welche Quelle ist maßgeblich? Wenn zwei Dokumente sich widersprechen, muss klar sein, welches gilt.
- Was ist der aktuelle Stand? Wann wurde etwas geändert, und ab wann gilt es?
- Wer darf was sehen? Die Gehaltsliste gehört nicht in jede Antwort. Rechte müssen im System gelten, nicht nur in einer Anweisung an die KI.
- Woher stammt die Antwort? Ein Verweis auf die Originalquelle macht Antworten überprüfbar.
- Warum wurde etwas entschieden? Eine genehmigte Ausnahme ohne Begründung verleitet die KI dazu, daraus eine falsche Regel abzuleiten. Foundation Capital beschreibt genau diese Lücke zwischen gespeicherten Ergebnissen und den Gründen dahinter.3
- Was ist unbekannt? Eine KI, die ehrlich „dazu habe ich nichts gefunden“ sagt, ist wertvoller als eine, die eine schöne Antwort erfindet.
Wie die Anbindung technisch funktioniert
Damit eine KI auf externes Wissen zugreifen kann, braucht sie eine Schnittstelle. Ein wichtiger Standard dafür ist das Model Context Protocol, kurz MCP, das Anthropic Ende 2024 als offenen Standard vorgestellt hat.4 Inzwischen können viele KI-Anwendungen darüber Quellen und Werkzeuge anbinden.
Wichtig ist dabei eine Unterscheidung, die oft untergeht: MCP ist ein Anschluss, kein Sicherheitskonzept. Die offizielle Dokumentation beschreibt ausdrücklich eigene Risiken rund um Berechtigungen und Zugriffe.5 Wer was sehen darf, muss die Wissensquelle selbst regeln. Auch große Anbieter gehen diesen Weg: Microsoft etwa lässt KI-Agenten in SharePoint nur auf Inhalte zugreifen, für die die jeweilige Person ohnehin Rechte hat.6
So fängst du an, ohne dich zu verzetteln
Der häufigste Fehler ist, mit dem großen Aufräumen zu beginnen: erst alle Daten bereinigen, dann irgendwann KI. Das dauert ewig und kostet Motivation. Besser ist ein kleiner, konkreter Start:
- Eine Aufgabe wählen. Welche Frage kostet dein Team gerade am meisten Zeit? Zum Beispiel: Welche Konditionen gelten für Kunde X?
- Wenige Quellen festlegen. Nur die Dokumente, die für genau diese Frage maßgeblich sind, und eine Person, die fachlich bestätigt.
- Gegen heute testen. Drei echte Fragen aus den letzten Wochen nehmen und vergleichen: Wie lange dauert es heute, wie gut ist die Antwort mit angebundenem Wissen? Bewusst auch eine Frage einbauen, deren Antwort nicht in den Quellen steht.
Diesen letzten Punkt betont auch Anthropic in seinen Hinweisen zum Prüfen von KI-Agenten: Bewertet wird das tatsächliche Ergebnis, nicht nur, ob die Technik formal funktioniert hat.7 Eine gefundene Datei ist noch keine richtige Antwort.
Wie wir das bei Königsworth machen
Genau dafür haben wir unsere eigene Software gebaut: Sie holt das Wissen aus deinen bestehenden Programmen und Quellen, ordnet es zu, prüft es mit dir und stellt es deiner KI mit Rechten und Belegen bereit. Dein Team arbeitet in seiner gewohnten KI weiter. Wir richten das einmal ein, begleiten die ersten Wochen und starten bewusst mit einer einzigen Aufgabe, an der sich zeigt, ob es sich lohnt.
Wenn du wissen willst, welche Frage in deinem Betrieb der beste Startpunkt wäre, sprich uns im kostenlosen Erstgespräch an.
Quellen
- Context Rot: How Increasing Input Tokens Impacts LLM PerformanceChroma, Juli 2025 · trychroma.com
- LongMemEval: Benchmarking Chat Assistants on Long-Term Interactive MemoryWu u. a., arXiv, Oktober 2024 · arxiv.org
- Context Graphs: AI’s Trillion-Dollar OpportunityFoundation Capital · foundationcapital.com
- Introducing the Model Context ProtocolAnthropic, November 2024 · anthropic.com
- Security Best PracticesModel Context Protocol · modelcontextprotocol.io
- Manage access for agents in SharePointMicrosoft Learn · learn.microsoft.com
- Demystifying evals for AI agentsAnthropic · anthropic.com