Wizard of Oz Prototyp
Vorgespielte Magie
Was ist ein Wizard-of-Oz?
Mit dem „Wizard of Oz“ testen Entwicklungsteams, wie Nutzer mit einem System interagieren. Der Nutzer bedient dabei ein Interface. Die Reaktionen des Systems werden aber nicht maschinell, sondern durch einen Menschen ausgelöst. Dabei ist dem Nutzer unter Umständen nicht bewusst, dass er nicht mit einer intelligenten Software, sondern einem verborgenen Menschen interagiert.
Der Begriff hat seinen Ursprung in der Kindergeschichte „Der Zauberer von Oz“. In diesem Film treffen die Protagonisten auf einen vermeintlich mit Superkräften ausgestatteten Zauberer. Der Zauberer entpuppt sich letztlich als normaler Mensch, der seine Magie nur inszeniert.
Genau wie der Zauberer im Film spielt das Entwicklungsteam beim Bau und Test eines Wizard-of-Oz-Prototyp“ zentrale Funktionen nur vor.
Um die Wizard-of-Oz-Methode anzuwenden sind drei Elemente erforderlich: Ein Skript, dass vorgibt, was passieren soll, eine Person als Testnutzer und ein menschlicher Zauberer, der die Interaktion des Systems steuert.
Für welche Produkttypen und in welchen Phasen wird ein „Wizard of Oz“ eingesetzt?
Ein Wizard of Oz wird besonders häufig eingesetzt, um digitale Produkte mit komplexer nur aufwendig zu entwickelnder Logik zu testen. Gerade wenn Produkte und Geschäftsmodelle im Bereich künstlicher Intelligenz kreiert werden, eignen sich diese Prototypen hervorragend. Die Bandbreite reicht dabei von digitalen Assistenzsystemen und Chatbots bis hin zu komplexen Dienstleistungen bei denen ganze Prozessketten automatisiert werden.
Am häufigsten werden Wizard of Ozs in sehr frühen Entwicklungsphasen eingesetzt, wenn ein interdisziplinäres Team Ideen gerade erst entwickelt hat. Das Team testet dann, ob es überhaupt Bedarf für einen vermuteten Anwendungsfall für künstliche Intelligenz gibt.
Agile Entwicklungsteams setzen Wizard of Ozs aber auch in späteren Iterationen ein. Dabei wird die bestehende künstliche Intelligenz um weitere Funktionen oder Algorithmen erweitert. Im Nutzertest wird überprüft, ob sich das Nutzererlebnis durch weitere Funktionen so stark verbessert, dass ein zusätzlicher Aufwand gerechtfertigt ist.
Was sind die Stärken von Wizard-of-Oz-Prototyping?
Mit Prototypen der Kategorie Wizard of Oz können Teams Nutzerfeedback zu sehr aufwendigen Produktideen einholen. Mit einem guten Setup geben sich die Testuser der Illusion eines funktionierenden Echtsystems vollständig hin. Die Daten zur User Experience haben dadurch eine sehr hohe Qualität. Im Verhältnis zur Datenqualität sind Wizard of Oz sehr günstig zu entwickeln.
Wenn die Testergebnisse gut dokumentiert und aufbereitet werden, können die positiven Nutzerreaktionen auch gut genutzt werden, um das Potential einer Innovation gegenüber anderen Stakeholdern zu kommunizieren. Das Video eines begeisterten Testnutzers öffnet Budgettöpfe häufig leichter als ein Boxplot.
Einschätzung Wizard-of-Oz
Nutzendimensionen
Eignung für Use Cases
Physische Produkte
Digitale Produkte
Prozesse und Services
Geschäftsmodelle
Plattformen
Zeitaufwand
niedrig
Anspruch
mittel
Was sind die Schwächen von Wizard-of-Ozs?
Bei der Entwicklung von Wizard-of-Oz-Prototypen lernt das Team nur sehr wenig über die Machbarkeit und geschätzte Entwicklungskosten. Man kann verifizieren, wie ob ein intelligentes System Nutzer begeistern wird, aber nicht, ob dieses System jemals durch das Team fertiggestellt werden kann.
Wenn die Wizards zu schnell und schlecht gemacht sind, kann das im Test unfreiwillig komisch wirken und die Ergebnisse verfälschen.
Wie viel Aufwand ist notwendig, um einen "Wizard of Oz Prototype" zu erstellen?
In der Regel sind die Prototypen schnell und mit wenig Aufwand gemacht. Im einfachsten Fall chattet der Wizard mit dem Test User nur von einem anderen Raum aus. Es gibt aber auch Ausnahmen. In einem uns bekannten Falls inszenierten über zwanzig Mitarbeiter über mehrere Monate eine AI-gestützte Marktplattform für Industrieprodukte. Auf der einen Seite ging es dabei um ein Milliardenpotential. Auf der anderen Seite sollte erst geprüft werden, ob in einer sehr konservativen Branche genug Kunden gefunden werden können, die den Sprung vom Faxgeräte in die digitale Welt wagen.
Wer kann den Prototypen bauen?
Jeder!
Wer sollte an der "Wizard of Oz Methode" beteiligt werden?
Wir empfehlen einen People-Guy, der den Nutzer durch das System führt und mindestens eine Person, der als Wizard agiert. Ein größeres Team für eine bessere Inszenierung schadet nicht.
Welche Tools sind notwendig?
Um einen Wizard of Oz zu entwickeln sind keine speziellen Tools erforderlich. Häufig werden Monitore, Laptops und eine Internetverbindung genutzt. Systeme, für die schnelle Controller oder andere Eingabewerkzeuge zur Verfügung stehen eignen sich natürlich besser.
Wie setzt man "Wizard of Oz Prototyping" so ein, dass es den größten Nutzen bringt?
Die Ergebnisse sind besser, wenn Testnutzer und Zauberer räumlich getrennt sind. Wir empfehlen, dass sich Teams beim Prototyping auf die Kernfunktionen konzentrieren und andere Bestandteile der Interaktion bewusst weglassen.
Was sollte man vermeiden, wenn man mit Wizard-of-Ozs arbeitet?
Da fällt uns nicht viel ein, außer, dass sich die Testnutzer respektiert und nicht betrogen fühlen sollten.
Was wir noch los werden wollen:
Offiziell wurde der Wizard-of-Oz-Prototyp um 1980 herum in den USA erfunden. Wir haben mal wieder eine andere Meinung: Der Schachtürke von 1769 oder 1770 ist der erste Wizard of Oz: Ein Prototyp für moderne Schachcomputer. Eine der ersten Testnutzerinnen war Maria Theresia von Österreich.
Über den Autor
Daniel Herrmann
Ehemaliger Business-Kasper | Ausgewildertes Spielkind
Ich bin Game Thinker, Consultant und fanatischer Anhänger der Theorie Y. Meine Frau findet mich unfreiwillig komisch. Maximal 2 von 100 Menschen werden in Gesprächen mit mir dümmer.
Co-Founder von Monokel Consulting, Serious PlayScape und RokaEnergy.
Hirnflattern Nummer 1
Es gibt bemerkenswerte Ergebnisse einer Studie zum Thema Übergewicht. Größter Indikator für das (Über-)Gewicht einer Person ist demnach der BMI der besten Freunde. Wer übergewichtige Freunde hat, ist mit großer Wahrscheinlichkeit selbst übergewichtig. Mit allen entsprechenden Auswirkungen. Der Grund hängt vermutlich mit kontextueller Wahrnehmung zusammen: Du bemisst Dein Gewicht nicht nach objektiv messbaren Kriterien (wie dem BMI), sondern vergleichst Dich mit anderen.
Bullshitbingo braucht Mitspieler
Hypes und Buzzwords kommen und gehen. Consultants treiben die Sau durchs Dorf und der Rest der Welt verdreht die Augen. Aber warum machen die Businesskasper das?
Transparenz und Verantwortung – zweischneidige Schwerter für Petzen ohne Freunde
Transparenz und Verantwortung sind doch einfach toll. Wer könnte etwas dagegen haben? Ich! Weil die Forderung nach Transparenz und Verantwortung häufig nur Business Theater ist, das Grundursachen für Probleme in schwierigen Projekten überdeckt.
Hirnflattern Nummer 2 – Seenotrettung und Innovationsprozesse
Innovationsprozesse fühlen sich manchmal an wie Seenotrettung: Wenig Zeit, zu wenige Helfer vor Ort und man weiß nicht genau wen oder was man sucht.
Eine kurze Recherche hat ergeben, dass es in der Seenotrettung verschiedene Suchmuster gibt. Lassen sich die Stärken und Schwächen dieser Suchmuster auf Innovationsprozesse übertragen?
hirnflattern-nummer-5-Thors-Hammer-Sap
Thor hatte seinen Hammer, Captain America seinen Schild, Jordan seine Nike’s und Felix Baumgartner hatte eine Dose Red Bull.
Eure Mitarbeiter haben im Homeoffice SAP auf einem alten Notebook.
Müssen Werkzeuge für Wissensarbeiter so schlecht sein?
wann ich consultants brauch und wann nicht
Die einst glorreiche Ming-Dynastie stand vor großen Problemen: Nach ein paar hundert sehr erfolgreichen Jahren war die Organisation nicht mehr adaptionsfähig genug. Plötzlich – manche sagen auch langsam und mit deutlichen Warnzeichen – geriet das Geschäftsmodell durch die digitale Transformation gehörig unter Druck. Der Kaiser stellte ein paar Berater aus der Mandschurei ein. Diese bekamen immer mehr Einfluss und stellten am Ende immer weitere Berater ein, ohne dass der Kaiser wusste, wie seine Beamten jemals wieder genug Kompetenzen aufbauen sollten, um ohne Mandschu-Consulting zurechtzukommen. Der Managing Director von Mandschu-Consulting merkte das und hat mit einem Hedgefonds als Investor China komplett übernommen. So oder so ähnlich ist das Ende der Ming-Dynastie in China abgelaufen.
Berater haben bei manchen Menschen einen sehr schlechten Ruf. Zum Teil ist dieser Ruf hart erarbeitet. Zum Teil übersehen Menschen, was Berater für Unternehmen leisten.
Ein Unternehmen muss auch ohne Berater laufen. Trotzdem ist der Einsatz von Consultants durchaus unter den richtigen Voraussetzungen eine gute Sache. Aber wann?
