Welche Skills ein Experimentation Team wirklich braucht

Wer ein Experimentation-Programm aufbauen will, stellt zuerst eine Frage: Wen brauchen wir dafür? Die Antwort, die die meisten Unternehmen geben, ist: jemanden mit Erfahrung in A/B-Testing. Damit ist die Rolle ausgeschrieben, die Person eingestellt… und das Programm zum Scheitern verurteilt, bevor es begonnen hat.

Das liegt nicht an der Person. Es liegt daran, dass ein Experimentation-Programm kein einzelner Job ist. Es ist ein Betrieb mit mehreren klar unterschiedlichen Kompetenzfeldern, von denen keines optional ist.

Experimentation-Programme, die funktionieren, sind gegen drei Kompetenzfelder besetzt, nicht gegen einen Jobtitel.

Analytics und Research ist die Fähigkeit, Nutzerdaten aus verschiedenen Quellen zu lesen und in Hypothesen zu übersetzen. Das umfasst statistisches Grundverständnis, den Umgang mit Webanalytics-Tools, und die Fähigkeit, qualitativ zu forschen: mit Nutzern zu sprechen, Muster zu erkennen, Fragen zu stellen, die ein Dashboard nicht stellt. Wer Experimente konzipiert, ohne diese Grundlage zu haben, testet Annahmen, keine Hypothesen.

Design und Konzeption ist die Fähigkeit, aus einer Hypothese eine testbare Variante zu machen. Das beginnt mit Copy. Wie ein Inhalt formuliert ist, entscheidet mit darüber, ob Nutzer handeln. Es umfasst UX-Design: die Struktur einer Seite, den Aufbau eines Formulars, den Fluss durch einen Funnel. Ohne diese Fähigkeit wird ein Experiment zu einem Button-Farbtest, weil das das Einzige ist, was ohne Designkompetenz umsetzbar ist.

Entwicklung und Technologie ist die Fähigkeit, eine konzipierte Variante tatsächlich zu bauen. Das bedeutet Frontend-Entwicklung innerhalb eines Testing-Tools, aber auch die Übergabe an eine Produktion, die Gewinnerversionen implementiert. Wer diesen Schritt nicht intern steuern kann, wird feststellen, dass Tests gebaut, aber Gewinner nie ausgerollt werden. Ein Programm, das keine Ergebnisse in die Produktion überträgt, lernt im Leerlauf.

Diese drei Bereiche kommen nicht von selbst zusammen. Jemand muss den Prozess steuern: dafür sorgen, dass Hypothesen rechtzeitig vorliegen, dass Design und Entwicklung synchron arbeiten, dass Ergebnisse dokumentiert und Erkenntnisse weitergegeben werden.

Das muss keine dedizierte Projektmanagement-Rolle sein. Es beginnt oft als Teil einer anderen Funktion, unter einem Titel wie Conversion Manager oder Experimentation Lead. Aber es muss jemanden geben, der diese Koordination als explizite Aufgabe trägt und nicht nebenbei.

Nicht alle Skills werden von Beginn an benötigt. Die essentiellen sind die, ohne die kein Test valide konzipiert, umgesetzt und ausgewertet werden kann. Sie sind oben beschrieben.

Der nächste Level kommt mit der Reife des Programms: Verhaltensökonomie und Psychologie für die Konzeption komplexerer Hypothesen, Data Programming für den Zugriff auf Daten jenseits von Dashboard-Exporten, Backend-Entwicklung für serverseitige Experimente, Tagging und Tracking-Implementierung für saubere Datenbasis. Diese Skills sind nicht optional auf Dauer, aber sie können warten, bis die Grundlage steht.

Amazon, Google und Booking haben kein Experimentation-Programm, weil sie die richtigen Tools lizenziert haben. Sie haben es, weil sie Experimentation als Disziplin mit einem strukturierten Skill-Set betreiben, mit klaren Rollen und klarer Verantwortung.

Wer diesen Aufbau ernsthaft angeht, sollte die benötigten Skills kartieren, bevor die erste Stelle ausgeschrieben wird. Wer zuerst eine Rolle definiert und dann schaut, was fehlt, baut keine Infrastruktur. Er kauft sich Zeit bis zur nächsten Frustration.