Phase 4 · Pilot Gate
Phase-4-Checkpoint
Pilot Gate: Entscheiden, ob die GraphRAG-Erprobung weitergebaut, begrenzt, neu geschnitten oder gestoppt wird.
Was du mitnimmst
Phase 4 ist abgeschlossen, wenn GraphRAG als Erprobung kontrollierbar, messbar und entscheidungsfähig ist.
Pilot Gate
Worum es hier geht
Dieser Checkpoint ist das Ende der Lernreise und das Pilot Gate. Du prüfst, ob GraphRAG verständlich, praktisch vorbereitet, architektonisch plausibel und kontrolliert entscheidbar ist.
Das Ziel ist eine klare Pilotentscheidung: Go, Re-Scope oder Stop.
Der Checkpoint verbindet die acht Betriebsartefakte. Erstens: Der Erprobungsrahmen ist begrenzt. Zweitens: Governance, Evaluation, Observability, Kosten und Review sind sichtbar. Drittens: Risiken und Business Case führen zu einer belastbaren Entscheidung.
Wenn das gelingt, ist Phase 4 abgeschlossen. Die Lernreise endet mit: "Wir können GraphRAG verantwortbar als Erprobung entscheiden."
Abschlussartefakt
Pilot Gate
| Gate-Bereich | Prüffrage |
|---|---|
| Scope | Ist die Frageklasse, Quellenbasis und Nutzergruppe begrenzt? |
| Governance | Sind Rollen, erlaubte Pfade und Ableitungen definiert? |
| Evaluation | Gibt es RAG-Vergleichslauf, Testfragen mit Erwartung und Erfolgskriterien? |
| Observability | Sind Trace-Events und Fehlerklassen definiert? |
| Kosten | Sind Budget und Latenzgrenzen sichtbar? |
| Review | Sind fachliche Freigaben geklärt? |
| Risiken | Sind Risiken dokumentiert und kontrolliert? |
| Business Case | Ist der Vorschlag entscheidbar? |
| Gate-Entscheidung | Ist Go, Re-Scope oder Stop begründbar? |
Kurz erklärt: Scope begrenzt die Erprobung. Governance beschreibt Rollen, Pfade und erlaubte Ableitungen. Evaluation hält RAG-Vergleichslauf, Testfragen und Erfolgskriterien fest. Observability, Kosten, Review, Risiken und Business Case machen Betrieb und Entscheidung prüfbar. Die Gate-Entscheidung ist Go, Re-Scope oder Stop.
| Lernreise | Gate-Frage |
|---|---|
| Verstehen | Ist klar, wann GraphRAG sinnvoll ist? |
| Klären | Ist der Praxisfall als Practice Brief prüfbar? |
| Entwerfen | Ist der Entwurf technisch nachvollziehbar? |
| Absichern | Ist die Erprobung kontrollierbar und entscheidbar? |
| Pilot Gate | Ist Go, Re-Scope oder Stop begründbar? |
Prüfen
Selbstdiagnose
Du bist auf einem guten Stand, wenn du sechs Fragen beantworten kannst:
1. Was ist der Erprobungsrahmen? 2. Welche Qualität wird gemessen? 3. Welche Pfade und Ableitungen sind erlaubt? 4. Welche Fehler sind beobachtbar? 5. Welche Risiken sind kontrolliert? 6. Welche Entscheidung soll nach der Erprobung fallen?
Wenn eine dieser Antworten fehlt, schärfe Scope, Governance oder Evaluation nach, bevor du den Business Case präsentierst.
Üben
Mini-Aufgabe
Nutze diesen isolierten Fall:
Ein Compliance-Team möchte eine GraphRAG-Erprobung für die Frage starten: "Welche Projekte sind betroffen, wenn ein kritisches Kundensystem jährlich geprüft werden muss?"
Schreibe ein Pilot Gate in acht Punkten: Scope, Governance, Evaluation, Observability, Kosten, Review, Risiken und Business Case. Ergänze danach eine Gate-Entscheidung: Go, Re-Scope oder Stop.
Musterlösung
Scope: Eine Frageklasse, vier Quellen, ein begrenzter Nutzerkreis aus Compliance und Architekturteam.
Governance: Erlaubt sind Pfade von Richtlinie über System zu Projekt und verantwortlichem Team. Antworten müssen Quellenabschnitt und Graphpfad zeigen.
Evaluation: Fünf Testfragen mit Erwartung prüfen direkte Quellenfragen, Projektbetroffenheit, unklare Identität, veraltete Verantwortung und fehlenden Pfad.
Observability: Jeder Lauf speichert Frage, Quellen, Chunks, Graphpfad, Kontextpaket, Antwort und Fehlerklasse.
Kosten: Die Erprobung bekommt ein festes Monatsbudget, eine Latenzgrenze und eine Obergrenze für Graphpfad-Erweiterungen pro Anfrage.
Review: Compliance prüft Richtlinienantworten. Architekturteam prüft System- und Projektpfade.
Risiken: Falsche Identitätszusammenführung, veraltete Verantwortung und fehlender Quellenbezug werden als Erprobungsrisiken geführt.
Business Case: Die Erprobung ist sinnvoll, wenn sie Projektbetroffenheit schneller und nachvollziehbarer klärt als manuelle Recherche.
Gate-Entscheidung: Go für einen begrenzten Erprobungs-Slice, weil Scope, Messung, Review und Risiken kontrollierbar beschrieben sind.
Abschluss
Abschluss der Lernreise
Du hast Phase 4 abgeschlossen, wenn dein GraphRAG-Vorschlag technisch plausibel ist und als begrenzte Erprobung entschieden werden kann.
Kernaussage
Phase 4 ist abgeschlossen, wenn GraphRAG als Erprobung kontrollierbar, messbar und entscheidungsfähig ist.