Die Ära der kostenlosen KI ist vorbei

Alan Trefler
Bild: Pegasystems GmbH

Die Wirtschaftlichkeit großer Sprachmodelle steht kurz davor, mit der Unternehmensrealität zu kollidieren, schreibt Pegasystems-CEO Alan Trefler (Bild). Warum er das so sieht, beschreibt er in einem Kommentar:

In der ersten Phase der Einführung wurde KI meist in Form subventionierter, häufig nutzerbasierter, Preismodelle angeboten. Die Tokens schienen praktisch kostenlos zu sein. Das machte das Experimentieren einfach – vor allem für jene, die inzwischen regelrecht von ihrer täglichen Dosis KI-Agenten abhängig geworden sind. In manchen Unternehmen scheint die Nutzung inzwischen zum Selbstzweck geworden zu sein. Der absurde Trend des sogenannten Tokenmaxxing feiert Quantität statt Qualität, als ob sich Eingaben einfach mit Ergebnissen gleichsetzen lassen.

Doch jetzt, da die großen Sprachmodelle die Unternehmen an KI-Agenten gewöhnt haben, wird die eigentliche Rechnung fällig.

Hunderte Milliarden Dollar fließen derzeit in KI-Infrastrukturen und irgendjemand wird diese Kosten tragen müssen. Jüngste Schritte großer Anbieter deuten darauf hin, dass Token-basierte Abrechnungsmodelle zum Standard werden. Was zunächst wie ein All-you-can-eat-Buffet begann, verwandelt sich zunehmend in einen Taxameter.

Für viele Führungskräfte wird dabei die größere Überraschung nicht in den sichtbaren Output-Tokens liegen. Vielmehr ist entscheidend, dass im Hintergrund sogenannte Reasoning-Tokens verbraucht werden, wann immer ein Modell eine Entscheidung eigenständig herleitet. Und dann noch einmal überdenkt und neu bewertet. Genau diese Tokens sind die teuersten überhaupt, obwohl niemand ausdrücklich darum gebeten hat.

Reasoning-KI ist zwar leistungsstark, sie ist aber auch kostspielig, unvorhersehbar und oft unnötig. Jede operative Entscheidung immer wieder neu zu durchdenken, mag anspruchsvoll wirken, ist jedoch das Gegenteil von Disziplin. Sobald Logik, Richtlinien und Workflows sauber aufgesetzt sind, verursacht deren endloses Neugenerieren während des laufenden Betriebs unnötige Kosten und Risiken, ohne einen Mehrwert zu schaffen.

Reasoning in der Designphase, also dort, wo Kreativität, Exploration und neue Erkenntnisse gefragt sind, ist hingegen die Stärke generativer KI. Die Runtime-Ausführung ist jedoch etwas grundlegend anderes. Hier zählen Vorhersehbarkeit, Konsistenz und Kostenkontrolle mehr als Kreativität. Der Einsatz schlanker semantischer KI-Funktionen in dieser Phase ermöglicht es Agenten, definierte Workflows effizienter und kostengünstiger zu befolgen. Genau so lässt sich KI sinnvoll skalieren.

Nachhaltige KI ist keine Magie, sie basiert vielmehr auf klugen Abwägungen.

Die nächste Phase von Enterprise-KI wird weniger durch spektakuläre Demos als durch Disziplin geprägt sein. Durch vorhersehbare Ergebnisse und durch kalkulierbare Kosten. Und durch eine klare Entscheidung darüber, wann sich aufwendiges Reasoning wirklich lohnt und wann nicht.

Unternehmen, die sich frühzeitig mit der wachsenden Abhängigkeit von agentenbasierter KI auseinandersetzen und dabei auf Token-Effizienz und architektonische Klarheit setzen, werden nicht nur Kosten sparen. Sie werden auch Systeme aufbauen, die vertrauenswürdiger, leichter zu steuern und einfacher zu skalieren sind. Dies wird insbesondere dann von Vorteil sein, wenn KI nicht mehr als kostenlos wahrgenommen wird, sondern als realer wirtschaftlicher Faktor.



  • Wie sieht die Zukunft der IT/OT-Konvergenz aus?

    Wie sieht die Zukunft der IT/OT-Konvergenz aus?

    Der IT/OT Convergence Summit 2024 findet am 18. und 19. September in Darmstadt statt. Veranstalter Aonic lädt ein, sich über die Verknüpfung der digitalen Welt der IT mit der realen…

    mehr lesen: Wie sieht die Zukunft der IT/OT-Konvergenz aus?

  • Eine der größten Aufdach-Solaranlagen Bayerns

    Eine der größten Aufdach-Solaranlagen Bayerns

    Der Folienhersteller Allvac hat seine Produktion modernisiert und setzt dabei nicht nur auf neue Technik, sondern auch auf regenerative Energie. Dafür hat die Firma in Waltenhofen in Bayern über zehn…

    mehr lesen: Eine der größten Aufdach-Solaranlagen Bayerns

  • IT-Modernisierungsstau bei Warehouse Operations

    IT-Modernisierungsstau bei Warehouse Operations

    Manhattan Associates und Vanson Bourne haben in Deutschland 200 Lieferketten-Spezialisten zum Stand ihrer Warehouse Operations befragt. Dabei kam heraus, dass sich die Branche mit vielen Belastungen und Unsicherheitsfaktoren konfrontiert sieht.…

    mehr lesen: IT-Modernisierungsstau bei Warehouse Operations

  • Anzeige
    Retarus beschleunigt Datenaustausch in der Produktion

    Retarus beschleunigt Datenaustausch in der Produktion

    Die Digitalisierungs- und Automatisierungslösungen von Retarus ermöglichen effiziente Abläufe ohne manuellen Aufwand oder Kompromisse bei der Datensouveränität

    mehr lesen: Retarus beschleunigt Datenaustausch in der Produktion

  • Elke Anderl verantwortet T-Systems-Vertrieb

    Elke Anderl verantwortet T-Systems-Vertrieb

    T-Systems hat mit Elke Anderl eine neue Vertriebs- und Marketingchefin. Sie übernimmt das Amt zum 1. September von Urs M. Krämer.

    mehr lesen: Elke Anderl verantwortet T-Systems-Vertrieb

  • Maschinenexporte: Schwaches erstes Halbjahr

    Maschinenexporte: Schwaches erstes Halbjahr

    Die Maschinen- und Anlagenbaufirmen aus Deutschland mussten im ersten Halbjahr 2024 deutliche Einbußen auf den Auslandsmärkten hinnehmen.

    mehr lesen: Maschinenexporte: Schwaches erstes Halbjahr

  • Vinci Energies trifft Übernahmevereinbarung mit der Fernao-Gruppe

    Vinci Energies trifft Übernahmevereinbarung mit der Fernao-Gruppe

    Vinci Energies hat eine Vereinbarung zur Übernahme der Fernao-Gruppe, einem Anbieter von Cybersecurity-Dienstleistungen in Deutschland und der Schweiz, unterzeichnet.

    mehr lesen: Vinci Energies trifft Übernahmevereinbarung mit der Fernao-Gruppe

  • Europas Open-Source-Community trifft sich in Mainz

    Europas Open-Source-Community trifft sich in Mainz

    Ab sofort ist die Anmeldung für die Open Community Experience (OCX 2024) möglich. Die Konferenz in Mainz richtet sich an verschiedene Open-Source-Communities, u.a. aus den Bereichen Automotive & Mobilität, Cloud…

    mehr lesen: Europas Open-Source-Community trifft sich in Mainz

  • Deutsche Unternehmen handeln bei SAP wenig strategisch

    Deutsche Unternehmen handeln bei SAP wenig strategisch

    Der aufgeschobene Umstieg auf SAP S/4 Hana und die Zurückhaltung bei Innovationen prägen das Handeln vieler Unternehmen, so eine Studie des Marktforschungsunternehmens ISG.

    mehr lesen: Deutsche Unternehmen handeln bei SAP wenig strategisch

  • Gaia-X Roadshow kommt nach Dortmund

    Gaia-X Roadshow kommt nach Dortmund

    Um Datenräume in der Logistik geht es im Rahmen der Gaia-X Roadshow, die am 17. September Station in Dortmund macht.

    mehr lesen: Gaia-X Roadshow kommt nach Dortmund

  • Bain analysiert den Markt für generative KI

    Bain analysiert den Markt für generative KI

    Auch abseits der großen KI-Modelle tut sich viel auf dem Markt für generative künstliche Intelligenz. Was? Das hat die Unternehmensberatung Bain & Company untersucht und Anbieter unter die Lupe genommen.

    mehr lesen: Bain analysiert den Markt für generative KI

  • So viele unbesetzte Ausbildungsstellen wie nie zuvor

    So viele unbesetzte Ausbildungsstellen wie nie zuvor

    Im Jahr 2023 wurden wieder mehr neue Ausbildungsverträge abgeschlossen. Dennoch hat der Anteil unbesetzter Ausbildungsstellen ein Rekordhoch erreicht.

    mehr lesen: So viele unbesetzte Ausbildungsstellen wie nie zuvor