In den allermeisten Fällen gehen unsere Kunden nach einer Cloud-Migration davon aus, dass die Entwicklerteams und der IT-Betrieb in der gleichen Verantwortungsteilung weitermachen wie immer. Der Wandel von der IT-Administration zum Platform Engineering wird übersehen. Und so wie ich es oft auf meine Frage danach erlebe, reagieren viele IT-Verantwortliche hier entweder mit einem Schulterzucken oder mit einer schlichten Umbenennung des IT-Betriebs. Letztere ist von allen Reaktionen die schlechteste. Warum, darauf komme ich später zurück.
Dieser Artikel richtet sich zunächst an Unternehmen, die eigene Software entwickeln oder entwickeln lassen. Dort ist der Fall am deutlichsten. Wer stattdessen Fremdsoftware betreibt, also Branchenlösungen, ERP oder andere Standardprodukte, sollte aber nicht abschalten. Das Modell trägt dort genauso, nur sitzen an der Stelle der Entwickler dann die Service Manager und die Fachbereiche.
Fangen wir mit einer Gegenüberstellung an.
Der IT-Betrieb
Der IT-Betrieb kümmert sich um die Bereitstellung der technischen Ressourcen eines Unternehmens. Die Servicequalität und die Verfügbarkeit von Infrastruktur, Anwendungen und Diensten liegen in seiner Verantwortung.
Das ist für die meisten Unternehmen eine klare Verantwortungsabgrenzung, die nur dann etwas verwischt, wenn es zu Zwischenfällen oder Problemen kommt. Auf erstere richtig zu reagieren, letztere vor dem Kunden zu erkennen und aus beidem nachhaltig zu lernen, das ist für viele immer wieder ein Problem. Nur keins, das sich kontinuierlich zeigt. Es tut punktuell weh, dann ist der Vorfall abgearbeitet und der Alltag geht weiter. Echten Handlungsbedarf leiten die wenigsten daraus ab. Kontinuierliche Verbesserung, auch und vor allem anlasslose, sieht anders aus.
Das zweite Problem fällt dagegen jeden Tag an, wird jedoch selten als Problem gesehen: die Umsetzungszeiten. Eine neue Umgebung, eine zusätzliche Datenbank, eine geänderte Netzwerkregel. Zwischen Anforderung und Bereitstellung liegen Tage, oft Wochen. Das raubt am Ende jedem Unternehmen signifikant Time to Market. Und billig ist es auch nicht. Was ein durchautomatisierter Self-Service in Minuten erledigt, kostet im Ticketmodell immer wieder Abstimmung, Rückfragen, Terminfindung und Handarbeit.
Der eigentliche Konstruktionsfehler steckt aber noch tiefer. Die Verantwortung für die Qualität eines bereitgestellten Dienstes oder einer Anwendung liegt bei einem Team, das ihn nicht gebaut hat und ihn nicht ändern kann.
Das Plattform-Team
Was wäre zu tun, um dieser Problemstellung besser zu begegnen?
Die Verantwortung für die Servicequalität des Angebotes geht an die Produktteams. Dazu kommt ein Plattform-Team, das Bau, Bereitstellung und Beobachtung von Softwarediensten und Anwendungen so einfach macht, dass jeder Entwickler diese Verantwortung ohne viel Aufwand und ohne zusätzliche kognitive Last wahrnehmen kann.
Ein Plattform-Team verantwortet dabei immer noch die grundsätzliche Infrastruktur. Alles andere liegt bei den Produktteams.
Was so ein Team ausmacht, lässt sich an vier Punkten festmachen:
Die Plattform ist ein Produkt und die Entwickler sind die Kunden. Also kein internes Regelwerk und keine Instanz, die Ressourcen zuteilt, sondern ein Produkt mit Roadmap und Feedback, die Plattform als Service. Der ehrlichste Test dafür ist die Freiwilligkeit. Eine Plattform, die nur genutzt wird, weil es nichts anderes gibt, ist keine Plattform. Sie ist ein Flaschenhals mit neuem Namen.
Golden Paths statt Vorschriften. Das Plattform-Team baut den bequemsten Weg. Gut dokumentiert, abgesichert, in Minuten produktiv. Wer davon abweichen will, darf das, trägt die Konsequenzen dann selbst. Der einfachste Weg soll der sicherste sein und nicht der vorgeschriebene.
Self-Service statt Ticket. Jede Anfrage, die jemand aus dem Plattform-Team von Hand abarbeitet, ist eigentlich ein Fehler im System. Eine neue Umgebung, neue Datenbank, neuer Service, neues Zertifikat: deklarativ, versioniert, ohne Wartezeit als Self-Service ausführbar.
Weniger kognitive Last. Ein Produktteam soll seine Fachlichkeit verstehen und nicht die Feinheiten von Netzwerk-Policies, Cluster-Upgrades oder Secret-Rotation. Was nicht zur Fachlichkeit gehört, gehört in die Plattform.
Konkret heißt das für die Aufgaben:
- Das Team entwickelt Systeme und Programme, die Entwicklern als Entwicklungsumgebung angeboten werden und die funktionsübergreifend sämtliche Entwicklungsteams unterstützen, wo es geht mit Infrastruktur als Code.
- Essenziell ist dabei eine interpretationsfreie Beschreibung sämtlicher Services, unter Beibehaltung einer gemeinsamen Sprache für alle an der Entwicklung beteiligten Bereiche. Praktisch betrachtet ein Servicekatalog, in dem für jeden Dienst maschinenlesbar steht: Wem gehört er, wovon hängt er ab, wie wird er gebaut, wo läuft er und wie sieht „gesund“ für ihn aus.
- Observability ist eine Eigenschaft der Plattform. Logs, Metriken und Traces sind ab dem ersten Deployment für das Produktteam da. Erweiterbar, ohne Anfrage und ohne Freigabe.
- Sicherheit, Compliance und Kosten sind in den Golden Path eingebaut und werden automatisiert geprüft. Guardrails statt Gatekeeping.
- Das Plattform-Team betreibt die darunterliegende Infrastruktur. Und nur die.
- Und es misst sich an der Nutzererfahrung, der Developer Experience. Damit also an Adoption, Time to first Deployment, Lead Time, Change Failure Rate und Wiederherstellungszeit. Nicht an abgearbeiteten Tickets.
Hat sich euer IT-Betrieb wirklich transformiert oder nur umbenannt?
Über die Aufgaben beider Bereiche kann man viele Artikel füllen. Ich beschränke mich hier zusammenfassend auf das Wesentliche, damit der Unterschied deutlich wird.
IT-Betrieb
- Verantwortet den Betrieb der Infrastruktur und aller Dienste und Anwendungen, die darauf laufen.
- Reagiert auf Probleme im Betrieb auf allen Ebenen und verantwortet die Wiederherstellung.
- Stellt Logs zur Verfügung, falls die Entwickler danach fragen.
- Zugang läuft über Ticket, Freigabe und Wartezeit.
- Erfolg misst sich an Verfügbarkeit und Ticketdurchsatz.
Plattform-Team
- Verantwortet die Infrastruktur und die Plattform als Produkt.
- Stellt bei Störungen die Plattform wieder her. Für den einzelnen Dienst ist das Produktteam zuständig.
- Telemetrie ist für das Produktteam von Anfang an da.
- Zugang läuft über Self-Service, deklarativ und sofort.
- Erfolg misst sich an der Adoption und an der Delivery-Performance der Produktteams.
Nun zur Problematik der Umbenennung
Wenn ein Team nur umbenannt wird, dann heißt es zwar jetzt Plattform-Team, arbeitet aber weiter wie der IT-Betrieb. Kubernetes ist da, Terraform auch, eine CI-Pipeline sowieso. Jede Änderung läuft weiter über ein Ticket, und wenn es nachts klingelt, klingelt es beim Plattform-Team.
Das ist dann die schlechteste Kombination aus beiden Welten, und deshalb ist sie schlimmer als das ehrliche Schulterzucken. Wer den IT-Betrieb IT-Betrieb nennt, hat wenigstens eine klare Verantwortungsabgrenzung. Nach der Umbenennung ist die Verantwortung doppelt belegt und damit nirgends. Von den Produktteams wird erwartet, dass sie „you build it, you run it“ leben, aber sie haben weder Zugriff noch Telemetrie. Das Plattform-Team trägt weiter die volle Last des Betriebs und soll nebenbei ein Produkt bauen, für das dann keine Zeit bleibt. Die Komplexität der Cloud ist dazugekommen, die Ticketschlange ist geblieben.
Eine Migration in die Cloud ist eben keine Umbenennung und auch kein reiner Technologiewechsel. Es ist eine grundsätzliche Verschiebung von Verantwortung, und die funktioniert nur, wenn beide Seiten sie wirklich annehmen.
Warum halten trotzdem so viele daran fest?
Das finde ich die eigentlich interessante Frage. Gerade in der Public Cloud, wo praktisch alles auf ein Plattformangebot hin gebaut ist, arbeiten viele IT-Abteilungen weiter wie im eigenen Rechenzentrum. Drei Gründe begegnen mir dabei immer wieder, und Bequemlichkeit ist keiner davon.
Die Regulatorik. Auditoren erwarten oft, dass nur speziell benannte Administratoren eine neue Softwareversion live nehmen können. Daraus wird dann eine organisatorische Trennung gebaut, die dem Self-Service komplett entgegensteht. Die gute Nachricht ist, dass sich Nachvollziehbarkeit und Funktionstrennung in einer automatisierten Plattform sogar besser nachweisen lassen als in einem manuellen Freigabeprozess. Wie das konkret geht, schauen wir uns bald in einem weiteren Artikel an.
Das Konzept ist schlicht nicht bekannt. Platform Engineering wird in vielen Häusern als Werkzeugthema wahrgenommen. Kubernetes, Terraform, Pipeline, fertig. Dass dahinter ein anderes Organisationsmodell steckt, nämlich ein Team, das ein Produkt für interne Kunden baut, ist außerhalb der einschlägigen Konferenzen und Blogs erstaunlich wenig verbreitet. Was man nicht kennt, kann man auch nicht einführen. Man kauft dann die Technologie und behält die Organisation.
Der Wechsel im Mindset. Das ist der schwierigste Teil, weil man ihn nicht beschaffen kann. Er muss auf beiden Seiten stattfinden.
Bei den Entwicklern: You build it, you run it. Der Dienst ist nicht fertig, wenn er gemerged ist, sondern wenn er in Produktion sauber läuft. Wenn er das nicht tut, ist das nicht das Problem von jemand anderem.
Beim Betrieb: Befähigen statt betreiben. Erfolg misst sich nicht mehr daran, was man selbst gemacht hat, sondern daran, was andere ohne einen hinbekommen. Wenn der eigene Berufsstolz jahrelang an der Unentbehrlichkeit hing, ist das eine ziemliche Zumutung. Aus meiner Erfahrung ist genau das die Stelle, an der solche Transformationen scheitern. Nicht an der Technik.
Fünf Fragen für den ehrlichen Selbsttest
Wenn du bei mehr als einer Frage zögerst, macht ihr wahrscheinlich noch IT-Betrieb.
- Können die Produktteams ohne Ticket und ohne Rücksprache bis in die Produktion deployen?
- Wer wird nachts geweckt, wenn ein Produktdienst ausfällt? Das Produktteam oder die Plattform?
- Sieht ein Entwickler die Logs und Metriken seines Dienstes, ohne jemanden zu fragen?
- Könnte ein Produktteam die Plattform verlassen, wenn es wollte? Und warum bleibt es dann trotzdem?
- Habt ihr eine Beschreibung eurer Services, die von Menschen und Maschinen gleichermaßen verstanden wird?
Die dritte Frage verrät übrigens am meisten. „Wir stellen Logs zur Verfügung, falls die Entwickler danach fragen“ ist für mich der beste Beweis dafür, dass die Verantwortung nicht verschoben wurde.
Wie wir dabei helfen
Wir stehen unseren Kunden seit Jahren beratend und unterstützend mit verschiedenen Plattform-Teams zur Seite. Nicht nur in der Public Cloud, denn das Modell funktioniert genauso im eigenen Rechenzentrum. Automation und Self-Service sind grundsätzlich keine Frage des Hosting-Modells.
Viele unserer Kunden zählen dabei auf unsere Erfahrung, weil sie sich den Weg abkürzen wollen. Die Fragen, an denen man beim ersten Mal Monate verliert, haben wir schon mehrfach beantwortet. Welcher Golden Path zuerst, wie schneidet man die Plattform, wie sieht ein Servicekatalog aus, den auch wirklich jemand pflegt. Der teuerste Weg zu einer Plattform ist immer der, bei dem man sie zweimal baut. Fehlgeschnittene Abstraktionen, eine Plattform, die niemand freiwillig nutzt, ein Self-Service, der am Ende doch wieder ein Ticket ist. Das sind die üblichen ersten Anläufe.
Der Punkt, den man am schwersten allein hebt, ist der kulturelle Wandel. Jede Organisation hat ihre Beharrungskräfte, und die sind ja nicht per se schlecht. Sie halten den Laden am Laufen. Nur machen sie es schwer, aus der eigenen Struktur heraus etwas grundsätzlich anders zu machen. Wir erleben dabei sehr oft, dass der IT-Betrieb den Wandel selbst will und nur nicht aus dem Tagesgeschäft herauskommt. Genau da beschleunigt Unterstützung von außen enorm. Wir bringen die Erfahrung mit, wie der Zielzustand aussieht, und die Kapazität, ihn zu bauen, während der Betrieb weiterläuft.
Praktisch setzen wir zunächst ein Team auf, das das Unternehmen kennenlernt und die Grundlagen schafft. Bei Kunden, die diese Arbeit später wieder mit eigenen Mitarbeitern abbilden möchten, binden wir deren neue Leute in unser Plattform-Team ein und arbeiten von dort aus auf eine Übergabe der Verantwortung hin. Dabei geht es selten nur um reine Cloud Platform Engineers. Es geht mindestens genauso um die Art und Weise, wie so ein Team entwickelt und geführt wird, denn ein Plattform-Team kann man nicht wie eine Betriebsmannschaft steuern. Deshalb setzen wir gern etwas ganzheitlicher an und begleiten, wo es möglich ist, auch die Führungskräfte des Kunden bei diesem Übergang.
Ob am Ende eine Übergabe steht, entscheidet der Kunde. Ein Teil unserer Kunden will das Thema mittelfristig selbst tragen. Andere entscheiden sich bewusst dagegen und lassen das Plattform-Team dauerhaft bei uns, weil sie ihre eigenen Kapazitäten lieber in die Produktentwicklung stecken und weil die Leute für diese Rolle am Markt schwer zu bekommen und noch schwerer zu halten sind. Beides funktioniert gut. Wichtig ist nur, dass diese Entscheidung bewusst fällt und nicht einfach so nebenbei passiert.
Wie ist es bei euch? Vollständige Transformation, ehrlicher Zwischenstand oder neues Schild an der alten Tür? Wir freuen uns über den Austausch, schickt uns eure Gedanken dazu gern an: martin.ostrowski@adacor.com