====== Evaluationsrahmen festlegen ====== Für die Evaluation sollte ein angemessener Zeitraum mit zugehörigen Zielen festgelegt werden. In nachfolgenden Lektionen finden Sie vertiefend, was die Inhalte der Evaluation sind, um dementsprechend Ziele und Fristen setzen zu können. Nachdem für die Modellbildung Vergangenheitsdaten genutzt wurden, soll die Leistungsfähigkeit der Modelle nun mit realen Testdaten aus der Produktionsumgebung, bzw. aus dem laufenden Betrieb untersucht werden. Der Evaluationszeitraum sollte entsprechend des jeweiligen Use Cases gestaltet werden. Soll bspw. eine Nachfrageprognose anhand von Vergangenheitsdaten und Saisonalitäten umgesetzt werden, sollte auch ein gesamtes Jahr in der Evaluation untersucht werden. Handelt es sich hingegen um einen Eingriff in einen Prozess, kann auch schon die Untersuchung einer Produktionswoche ausreichend sein. Ebenso wie Evaluationszeitraum sind auch die Ziele individuell je Use Case festzulegen. Das können Kennzahlen wie bspw. Kostensenkungen, Produktivitätssteigerungen oder verbesserte Prognosen (Genauigkeiten). Daneben kommen viele weitere Erfolgskriterien in Frage, die konkret vom jeweiligen KI-Use Case abgeleitet werden müssen. ===== Weiterführende Literatur ====== * [[https://www.degeval.org/fileadmin/Publikationen/DeGEval-Standards_fuer_Evaluation.pdf|Standards für Evaluation]] \\ Gesellschaft für Evaluation (2016)