Legen Sie die Testbedingungen fest, bevor Sie beginnen
Legen Sie die Teilnehmenden, fachlichen Fragen, Referenzantworten und einen gemeinsamen Datenstand fest. Dokumentieren Sie Produkt- und Modellversion, Bereitstellungsumgebung, verwendete Zugriffsidentität und den Umfang der Datenquellen. Halten Sie jede Frage im genauen Wortlaut und mit ihrer fachlichen Bedeutung fest, damit während des Tests dieselbe Fragestellung geprüft wird.
Vereinbaren Sie vorab, welche Fehler den Start verhindern und welche Unterschiede akzeptabel sind. Sie können eine bestimmte Rundungstoleranz für Beträge zulassen. Eine unbefugte Offenlegung, ein falscher Zeitraum oder die Tatsachenbehauptung fehlender Daten bedürfen grundsätzlich einer gesonderten Behandlung. Beide Projektteams legen die tatsächlichen Schwellenwerte fest.
Berücksichtigen Sie Fälle, die das System nicht beantworten kann
| Testkategorie | Was ist zu beachten? |
|---|---|
| Routinefrage | Korrektheit, Einheiten, Zeitraum und Quelle |
| Anschlussfragen | Die Bedingungen bleiben erhalten und Änderungen werden ausdrücklich erbeten |
| Fehlende Daten | Eine genaue Beschreibung der Lücke und ein nächster Schritt |
| Zugriff außerhalb des Gültigkeitsbereichs | Keine Offenlegung unerlaubter Inhalte |
| Veraltetes Material | Erkennung von Versions- und Aktualitätsgrenzen |
| Berichtsexport | Eine vollständige Datei, die geöffnet wird und deren Referenzen überprüft werden können |
Für jede Frage ein Abnahmeprotokoll führen
- Notieren Sie die Fragennummer, den Wortlaut, die Testidentität, den Eingabeumfang und die vereinbarte Erwartung.
- Bewahren Sie die Rohausgabe und unterstützende Quellen zusammen mit dem endgültigen Screenshot auf.
- Zeichnen Sie Start- und Zielzeiten auf. Unterscheiden Sie die Abfrage-, Cache- und Generierungsphasen.
- Markieren Sie jeden Test als bestanden, teilweise bestanden oder nicht bestanden. Beschreiben Sie etwaige Unterschiede und die Bedingungen für einen erneuten Test.
- Nachdem Sie Konfiguration, Definitionen oder Versionen geändert haben, führen Sie dieselben Fragen erneut aus und behalten Sie beide Ergebnissätze bei.
Nutzen Sie die Erkenntnisse, um eine Startentscheidung zu treffen
Eine kurze Live-Demo zeigt die Bedienung und ob sich Antworten prüfen lassen. Datenbereinigung, Integration und Sicherheitsprüfung für die Inbetriebnahme gehen darüber hinaus. Halten Sie für die Pilotergebnisse Zuständigkeiten, Umfang und Abnahmekriterien fest. Testen Sie dann Wiederherstellung, den Entzug von Berechtigungen und Fehlerfälle.
Schreiben Sie eine kurze Schlussfolgerung, in der Sie unterstützte Geschäftsanwendungen, Fälle, die noch einer menschlichen Überprüfung bedürfen, und Funktionen außerhalb dieses Tests identifizieren. Eine Aufzeichnung dessen, was bestanden wurde, bietet künftigen Teams mehr Arbeitsmöglichkeiten als nur ein allgemeiner positiver Eindruck.
