KI für Ihre RolleCTO und Engineering
KI für CTOs: Coding-Agenten, die sich rechnen, und KI in Ihren Produkten
Die Token-Rechnungen wachsen, die Review-Warteschlangen werden länger, und niemand kann genau sagen, wohin der Code geht. Trotzdem soll die Entwicklung mit KI schneller werden. Wir beginnen mit einem Gateway, das Kosten und Codeflüsse steuert, und messen Werkzeuge an Ihren eigenen gemergten Änderungen, bevor weitere Teams sie bekommen.
Erste Schritte für das Engineering
- 1
Exportieren Sie Nutzung und Abrechnung aus Copilot, Claude Code, Cursor oder Ihrem Gateway für eine kostenlose KI-Nutzungsanalyse.
- 2
Sehen Sie die Kosten pro Team und pro gemergter Änderung und wohin die Ausgaben fließen.
- 3
Leiten Sie den gesamten Agenten-Verkehr über ein Gateway mit Budgets, Modellregeln und Protokollen.
- 4
Testen Sie Werkzeuge, Modelle und Einstellungen an Ihren eigenen gemergten Änderungen, bevor Sie sie ausrollen.
- 5
Rollen Sie Team für Team aus, mit gemeinsamen Anweisungen und Prüfungen in der Versionsverwaltung.
Was die Engineering-Leitung liefern soll
Die Geschäftsführung will sehen, dass KI die Entwicklung messbar schneller macht, zu Kosten, die Sie erklären können. In der Softwareentwicklung sehen IT-Verantwortliche das größte KI-Potenzial: 83 % in der Lünendonk-Studie 2026, vor Cybersecurity (80 %). Bitkom stellte 2026 fest, dass 42 % der Unternehmen KI bereits in der IT oder in der Arbeit von IT-Fachkräften nutzen und 36 % das planen, und der Bitkom-Präsident sagte: „KI kann Aufgaben übernehmen, die bislang etwa von Entwicklerinnen und Entwicklern erledigt wurden.“
Der Auftrag reicht über Ihre eigenen Teams hinaus. In der Bitkom-Umfrage 2026 bringen 20 % der KI-Nutzer KI in ihre eigenen Produkte und Dienstleistungen, zuvor 12 %. In der Lünendonk-Studie 2026 zu Agentic AI erwarten IT-Verantwortliche Unterstützung durch Agenten bei der Modernisierung von Altsystemen: automatisierte Analyse und Dokumentation (98 %), Aufbau von API-Schichten (97 %), Testgenerierung (96 %), Datenbankmigration (94 %) und Codemigration (72 %).
- Einen Produktivitätsgewinn, der einer Prüfung standhält, gemessen an gemergten Änderungen statt an Umfragen oder Token-Zahlen.
- Ausgaben pro Team, die sichtbar, gedeckelt und als Kosten pro gemergter Änderung erklärt sind.
- Code und Daten, die nur dorthin gehen, wo Ihre Richtlinie es erlaubt.
- Einen Review-Aufwand, der den Gewinn nicht wieder auffrisst.
- KI-Funktionen in Ihren Produkten, die vor jedem Release getestet werden, auf einer Plattform, die Ihre Teams gemeinsam nutzen.
Die Fragen, die einem CTO gestellt werden
Sie kommen von der Geschäftsführung, der Sicherheit, Plattform-Teams, Ihren eigenen Entwicklern und aus Entwicklerforen. Die Umstellung von GitHub Copilot auf nutzungsabhängige Abrechnung am 1. Juni 2026 hat mehrere davon dringlicher gemacht.
- Von Administratoren in Entwicklerforen: „Ist Ihrer Geschäftsführung klar, dass Ihr Unternehmen für jedes einzelne genutzte Token bezahlt?“
- Von der Geschäftsführung: „Wir haben GitHub Copilot eingeführt. Wie belegen wir, dass es hilft?“
- Von Sicherheit und Recht: „Wohin geht unser Code bei der Inferenz, und welche Aufbewahrungsregeln gelten?“
- Von Plattform-Teams: „Können wir steuern, welche Modelle jedes Team nutzt? Können wir Ausgabenlimits setzen?“
- Von erfahrenen Entwicklern: „Wenn Sie mehr Zeit mit Review und Korrektur von KI-Code verbringen, als Sie zum Selberschreiben gebraucht hätten, was genau leistet die KI dann für Sie?“
- Von Kollegen in regulierten Branchen: „Wie lassen regulierte Unternehmen ihre Entwickler tatsächlich Claude Code oder Copilot nutzen?“
Was ein CTO entscheidet, und in welcher Reihenfolge
Messen Sie den Ist-Zustand, bevor Sie skalieren, und richten Sie das Gateway ein, bevor Sie in der Breite messen. In dieser Reihenfolge bleibt jede Entscheidung umkehrbar, bis die Daten sie tragen.
- Erstens eine Ausgangsmessung pro Team: Kosten, gemergte Änderungen, Review-Zeit, Nacharbeit und CI-Fehlschläge, aus Ihren Repositories und Abrechnungen.
- Zweitens, wohin Code gehen darf, je Klasse von Repository: ein Anbieterdienst mit schriftlichen Aufbewahrungsregeln, Modelle in Ihrem eigenen Cloud-Konto wie Amazon Bedrock oder Azure OpenAI oder Open-Weight-Modelle auf eigenen Servern für den sensibelsten Code.
- Drittens ein Gateway für den gesamten Agenten-Verkehr, etwa LiteLLM: Schlüssel pro Team, erlaubte Modelle pro Team, Budgets, Routing und Protokolle darüber, wohin jede Anfrage ging.
- Viertens die Werkzeuge: eines oder mehrere, ausgewählt anhand von Belegen. Bewerten Sie Werkzeuge, Modelle und Einstellungen an Ihren eigenen gemergten Änderungen gegen verborgene Tests, statt an Benchmarks der Anbieter.
- Fünftens der Harness: die Anweisungen, Befehle, Berechtigungen und Prüfungen, auf die sich Coding-Agenten stützen, in der Versionsverwaltung gepflegt und bei jeder Änderung an typischen Aufgaben getestet.
- Sechstens der Rollout Team für Team, mit Branch-Schutz, Review-Regeln für von Agenten geschriebene Änderungen und Schulung an Ihren eigenen Repositories.
KI in Ihren eigenen Produkten und die Plattform darunter
KI-Funktionen in einem Produkt, etwa ein Assistent auf Ihrer Dokumentation, die Suche in einem Kundenportal, ein Agent, der Servicefälle vorbereitet, oder eine Sprachschnittstelle an einer Maschine, brauchen dieselbe Disziplin wie jedes andere Release, dazu Tests für Antworten, die variieren können. Evals, also wiederholbare Tests eines KI-Systems an festen Fällen, setzen die Qualitätsschwelle vor dem Release und laufen nach jeder Änderung an Modell, Prompt oder Daten erneut.
Darunter liegt eine Plattform für Produkte und interne Werkzeuge gleichermaßen: das Gateway, Modellbetrieb auf eigenen GPUs, wo Menge oder Daten es verlangen, Suche mit Berechtigungen, Tracing, Überwachung und CI/CD für Prompts und Modelle. Ab dem 2. August 2026 verlangt Artikel 50 der KI-Verordnung (AI Act), Nutzer darüber zu informieren, dass sie mit einem KI-System interagieren. Wenn ein Produkt Bewerber vorauswählt oder rankt oder die Kreditwürdigkeit von Privatpersonen bewertet, ist es nach Anhang III der KI-Verordnung ein Hochrisiko-System, mit Pflichten ab dem 2. Dezember 2027 wie Risikomanagement, Dokumentation und menschlicher Aufsicht. Solche Entscheidungen bauen wir nicht so, dass sie ohne Menschen laufen.
- Eine Abnahmeschwelle pro Funktion, festgelegt mit dem Produktmanagement an Fällen echter Nutzer.
- Ein Kosten- und Latenzbudget pro Anfrage, damit eine Funktion auch in der Breite bezahlbar bleibt.
- Regressionstests, die ein Release blockieren, wenn die Qualität nach einem Modellwechsel sinkt.
- Ein Modellbetrieb, der zur Menge passt: zunächst eine Anbieter-API, eigene GPUs, wenn Menge oder Daten es lohnend machen.
Die Risiken, die beim Engineering liegen, und wie man sie beherrscht
Die meisten dieser Risiken zeigen sich zuerst als Zahl: eine Rechnung, eine Review-Warteschlange, ein fehlgeschlagener Build. Für jedes gibt es eine Kontrolle, die sich messen lässt.
- Token-Rechnungen, die die Finanzleitung überraschen. Budgets pro Team im Gateway, sinnvolle Standardmodelle, Routing einfacher Aufgaben auf günstigere Modelle und Caching, berichtet als Kosten pro gemergter Änderung.
- Code, der das Unternehmen verlässt. Schriftliche Aufbewahrungsregeln jedes Anbieters, Modelle im eigenen Cloud-Konto oder auf eigenen Servern für sensible Repositories und Gateway-Protokolle, die zeigen, wohin jede Anfrage ging.
- Review wird zum Engpass. Review-Zeit und Nacharbeit werden pro Team gemessen, Aufgaben werden kleiner geschnitten, und Prüfungen im Harness fangen häufige Fehler ab, bevor ein Mensch hinschaut.
- Agenten, die zu viel dürfen. Berechtigungen im Harness, Branch-Schutz, Secret-Scanning und Ausführung in einer Sandbox begrenzen, worauf ein Agent zugreifen kann.
- Werkzeug- und Modellupdates, die Abläufe brechen. Neue Versionen werden an kürzlich gemergten Änderungen nachgespielt, bevor sie die Teams erreichen.
- Rollen, die sich in Ihren Teams ändern. 32 % der Unternehmen erwarten, dass KI IT-Stellen kostet, 61 % erwarten, dass Routineaufgaben wegfallen, und 55 %, dass klassische Einstiegsaufgaben wegfallen (Bitkom, 2026). Wir berichten nach Team, Aufgabe und Modell, bewerten nie einzelne Personen und erstellen keine Ranglisten von Entwicklern nach Token-Verbrauch.
Welche Nachweise Sie von jedem Dienstleister oder Tool-Anbieter verlangen
Entwickler fragen es direkt: „Can you please share how you measured that productivity gap that's real?“, also wie der angeblich echte Produktivitätsunterschied gemessen wurde. Verlangen Sie von jedem Anbieter, auch von uns, Belege dieser Art.
- Ergebnisse an Ihren eigenen gemergten Änderungen, geprüft gegen verborgene Tests.
- Kosten und Review-Aufwand jeder akzeptierten Änderung, vorher und nachher.
- Schriftliche Regeln zu Aufbewahrung und Training für jeden genutzten Modell-Endpunkt.
- Ausgabengrenzen pro Team, die technisch durchgesetzt werden, etwa in einem Gateway.
- Harness, Konfiguration und Tests, übergeben in Ihrer Versionsverwaltung und ohne den Anbieter nutzbar.
- Für KI in Produkten einen Eval-Bericht gegen eine vereinbarte Schwelle und dieselben Evals in der CI.
Wo ein CTO anfängt
Beginnen Sie mit der kostenlosen KI-Nutzungsanalyse. Senden Sie die Nutzungs- und Abrechnungsexporte Ihrer Wahl aus Copilot, Claude Code, Codex, Cursor oder Ihrem Gateway, und Sie erhalten eine Seite dazu, wohin die Ausgaben fließen, was Sie zuerst ändern und was Sie als Nächstes messen sollten. Sie braucht keinen Zugriff auf Ihre Systeme.
Für ein einzelnes Team geht die Kostenanalyse für Coding-Agenten tiefer, bis zu den Kosten pro gemergter Änderung vorher und nachher. Für KI in Ihren Produkten oder eine gemeinsame Plattform bringen Sie den Anwendungsfall in ein kostenloses 30-minütiges Gespräch mit einem Engineer mit.
Fragen
KI im Entwickler-Alltag: Wie viel schneller entwickelt man wirklich?
Das hängt von Team, Codebasis und Aufgabe ab, deshalb helfen allgemeine Zahlen wenig. Wir messen es an Ihren gemergten Änderungen: Kosten, Review-Zeit, Nacharbeit und CI-Ergebnisse pro Änderung, vorher und nachher, nach Team und nie nach Person.
Wir haben GitHub Copilot eingeführt. Wie belegen wir, dass es hilft?
Vergleichen Sie Gleiches mit Gleichem: ähnliche Änderungen vorher und nachher oder Teams mit und ohne, anhand von Kosten pro gemergter Änderung, Review-Zeit und Nacharbeit. Akzeptanzraten und Lizenzzahlen allein belegen keinen Nutzen. Die Nutzungsanalyse ist ein kostenloser erster Blick auf die Zahlen.
Können wir steuern, welche Modelle jedes Team nutzt, und Ausgabenlimits setzen?
Ja, mit einem Gateway vor den Modellen. Jedes Team erhält einen eigenen Schlüssel, eine Liste erlaubter Modelle und ein Budget mit Warnungen und harter Grenze. Die Nutzung wird pro Team protokolliert, damit sich die Kosten pro gemergter Änderung berichten lassen.
Wohin geht unser Code bei der Inferenz?
Zu dem Modell-Endpunkt, den das Werkzeug aufruft, unter den Aufbewahrungsregeln dieses Anbieters. Ein Gateway macht das ausdrücklich und durchsetzbar: Sensible Repositories lassen sich auf Modelle im eigenen Cloud-Konto oder auf eigenen Servern beschränken, und jede Anfrage wird protokolliert.
Wie lassen regulierte Unternehmen ihre Entwickler Claude Code oder Copilot nutzen?
Meist ohne pauschales Verbot. Sie setzen ein Gateway im eigenen Cloud-Konto ein, das steuert, welche Modelle erreichbar sind und was hinausgeht, und ergänzen schriftliche Aufbewahrungsregeln, Berechtigungen im Harness und Protokolle, die die Compliance lesen kann. Auswertungen bleiben auf Teamebene, was auch für den Betriebsrat wichtig ist.
Was, wenn das Review von KI-Code länger dauert als das Selberschreiben?
Dann muss der Aufbau verbessert werden, und die Zahlen zeigen das. Kleinere Aufgaben, klarere Anweisungen im Harness, automatische Prüfungen vor dem Review und das passende Modell je Aufgabe senken die Review-Zeit meist. Wenn nicht, halten Sie den Agenten aus dieser Art von Arbeit heraus.
Wie prüfen Sie Modellwechsel vor dem Ausrollen?
Für Coding-Agenten wird das neue Modell oder die neue Version an kürzlich gemergten Änderungen gegen verborgene Tests nachgespielt und nach Erfolgsquote, Kosten und Review-Aufwand verglichen. Für KI in Produkten laufen die Evals in der CI und blockieren das Release, wenn die Qualität unter die vereinbarte Schwelle fällt.
Verwandte Leistungen
Einführung von Coding-Agenten
Der Einsatz von Agenten, ausgeweitet von wenigen Pilotteams auf die gesamte Entwicklung, mit Schulungen und einem gemeinsamen Setup.
LLM-Kostenoptimierung
Agentenkosten, aufgeschlüsselt nach Team und Aufgabe und gesenkt durch Voreinstellungen, Budgets und Routing, die Ihr Plattformteam selbst betreiben kann.
Harness Engineering
Das Setup, das einem Agenten sagt, wie er Ihren Code baut, testet und ändert, abgelegt in der Versionskontrolle.
Kostenreview für ein Team
Ein erster Schritt mit einem Team: wohin die Kosten der Coding-Agenten fließen, was wir gemeinsam ändern und die Kosten pro gemergter Änderung vorher und nachher.
KI-Engineering und -Architektur
Assistenten, Sprachschnittstellen und Agenten in den Produkten, die Sie verkaufen, samt Serving und Retrieval darunter.
KI-Plattform für alle Teams
Ein freigegebener Zugang zu KI für jedes Team, mit Budgets, Protokollen und freier Modellwahl, betrieben auf Ihren Servern oder in Ihrer Cloud.
Aus dem Blog
Was eine Einführung von Coding-Agenten kostet
Platzpreise für 50 Engineers bei Claude Code, Cursor, GitHub Copilot und Codex, warum Nutzung und Review-Zeit oft mehr kosten und wie Sie pro gemergter Änderung budgetieren.
Coding-Agenten über ein LLM-Gateway
Was Claude Code, GitHub Copilot und Cursor mit Stand November 2026 jeweils unterstützen, wenn Sie ein eigenes LLM-Gateway davorschalten, und was Sie vor der Einführung protokollieren, budgetieren und testen sollten.
Metriken für einen GitHub-Copilot-Pilot
Was die Copilot-Nutzungsmetriken von GitHub messen, wo sie aufhören und wie Sie sie mit eigenen Daten zu Review und Nacharbeit kombinieren, um über die Fortsetzung zu entscheiden.
Sicherheit von Coding-Agenten
Sicherheit und Governance für Coding-Agenten in der Praxis: Prompt Injection, Secrets, Berechtigungen, Sandboxing, unbeaufsichtigte Läufe und Verantwortlichkeiten.
Mit einem Engineer sprechen
Senden Sie die Nutzungsexporte Ihrer Wahl, oder bringen Sie ein Team oder eine Produktfunktion in ein kostenloses 30-minütiges Gespräch mit. Beides braucht keinen Zugriff auf Ihre Repositories.
Die Buchung läuft über Google Kalender.
Lieber zuerst schreiben? Hinterlassen Sie Ihre E-Mail-Adresse und ein paar Zeilen, dann antworten wir mit Terminvorschlägen.
Sehen Sie in Ihrem E-Mail-Programm nach dem Entwurf
Senden Sie ihn von dort ab, und ein Engineer antwortet Ihnen persönlich mit Terminvorschlägen für ein 30-minütiges Gespräch. Hat sich kein Entwurf geöffnet, schreiben Sie uns an miki@cloudsail.com.