EuroHPC: Wie man in Europa Zugang zu Supercomputern bekommt und was er kostet

Die meisten Unternehmen, die von ernsthafter Rechenleistung profitieren würden, ziehen EuroHPC nie in Betracht, weil Supercomputing nach einer Sache für Physiker klingt. Vor einem Jahrzehnt stimmte das weitgehend. Heute nicht mehr, und die Zugangswege sind offener, als fast alle vermuten.

Das Gemeinsame Unternehmen EuroHPC beschafft und betreibt europäische Supercomputer, finanziert die Software und die Qualifizierung drumherum und teilt vor allem den Zugang zu diesen Maschinen zu. Der letzte Punkt ist für Unternehmen der interessanteste. Für die passende Last ist dieser Zugang drastisch günstiger als kommerzielle Cloud, und für manche Lasten kostet er gar nichts.

Was EuroHPC ist

Ein gemeinsames Unternehmen von EU, teilnehmenden Staaten und privaten Mitgliedern, finanziert aus dem Programm Digitales Europa, Horizont Europa und der Fazilität Connecting Europe sowie aus nationalen Beiträgen.

Die Arbeit teilt sich in drei Bereiche:

Infrastruktur. Beschaffung und Betrieb von Supercomputern in ganz Europa, von Systemen der Mittelklasse bis zu Maschinen der Exascale-Klasse, gehostet an Standorten in verschiedenen Mitgliedstaaten. Dazu die KI-Fabriken aus unserem InvestAI-Leitfaden, die als KI-optimierte Kapazität an diesen Standorten hängen.

Forschung und Innovation. Förderung des Softwarestacks, der Anwendungen und zunehmend auch europäischer Prozessortechnologie.

Qualifizierung und Zugang. Kompetenzzentren, Schulungen und die Zuteilungsausschreibungen, über die Sie die Maschinen tatsächlich nutzen können.

Der letzte Bereich ist der, um den es Unternehmen gehen sollte, und die meisten wissen nicht einmal, dass es ihn gibt.

Die Zugangswege

Zugang wird über Ausschreibungen zugeteilt, und davon gibt es mehrere mit sehr unterschiedlichem Charakter. Die richtige zu treffen zählt mehr als alles andere.

Benchmark- und Entwicklungszugang

Kleine Zuteilungen, um zu testen, ob Ihr Code läuft und wie er skaliert. Schlanker Antrag, schnelle Bearbeitung, wenig Rechenzeit.

Das ist der richtige Startpunkt für alle, die diese Systeme noch nie genutzt haben. Es kostet Sie ein Antragsformular und beantwortet die zwei Fragen, die zählen: Läuft Ihre Last überhaupt, und skaliert sie sinnvoll?

Regulärer Zugang

Der Hauptweg für größere Zuteilungen. Begutachtet, mit Ausschreibungen in festem Zyklus, für Projekte mit einer klaren wissenschaftlichen oder technischen Begründung. Größere Zuteilungen über längere Zeiträume.

Die Begutachtung ist ernst gemeint, und der Antrag braucht eine technische Begründung: was Sie rechnen, warum es diese Größenordnung braucht, und Belege dafür, dass Ihr Code die nötige Leistung bringt.

Extreme-Scale-Zugang

Für Projekte, die sehr große Anteile der größten Maschinen brauchen. Selten, streng begutachtet und für die meisten Unternehmen nicht der Einstieg.

KI- und industriespezifischer Zugang

Neuere Schienen ausdrücklich für KI-Lasten und industrielle Nutzer, KMU und Start-ups eingeschlossen. Die Verfahren sind schlanker als bei der klassischen wissenschaftlichen Zuteilung und auf Organisationen zugeschnitten, die keine Forschungseinrichtungen sind.

Wenn Sie ein Unternehmen sind und keine Hochschule, ist das in der Regel Ihr Weg.

Zugang über KI-Fabriken

Die KI-Fabriken haben eigene Zugangsregelungen, meist mit deutlich mehr Unterstützung für Nutzer, die keine HPC-Spezialisten sind. Wenn Ihre Last Modelltraining oder Feinabstimmung ist und keine klassische Simulation, fangen Sie hier an.

Was es kostet

Für die Forschung und für viele industrielle Anwendungen wird zugeteilte Rechenleistung ohne Entgelt bereitgestellt, denn die Maschinen sind öffentlich finanziert, und die Knappheit verwaltet nicht der Preis, sondern das Zuteilungsverfahren.

Daneben gibt es kommerzielle Zugangsregelungen mit Entgelt, typischerweise für rein kommerzielle Arbeit ohne Auflagen zur Offenheit der Ergebnisse. Selbst dann schneidet der Preis bei dauerhaft großen Jobs meist besser ab als die kommerzielle Cloud, weil Sie keine Marge auf elastische Kapazität zahlen, die Sie gar nicht nutzen.

Der eigentliche Kostenblock ist nicht die Rechenleistung, sondern die Entwicklungsarbeit.

Der ehrliche Teil: Das ist keine Cloud

Hier müssen die Erwartungen zurechtgerückt werden, denn genau daran scheitern Unternehmen, die EuroHPC ausprobieren und wieder aufgeben.

Sie bekommen keine VM mit Root. Sie bekommen eine Zuteilung auf einem geteilten Cluster mit einem Job-Scheduler, meist Slurm. Sie schicken Jobs in eine Warteschlange, und die laufen, sobald Ressourcen frei sind. Interaktives Arbeiten ist begrenzt.

Die Softwareumgebung ist modulbasiert, nicht container-first, auch wenn es zunehmend Container-Unterstützung gibt. Ihre Abhängigkeiten müssen unter Umständen gegen standortspezifische Bibliotheken gebaut werden.

Das Dateisystem ist geteilt und hat Regeln. Scratch-Speicher wird geleert, Home-Verzeichnisse haben Kontingente. Der Datentransfer hinein und heraus will geplant sein, und bei großen Datensätzen will er richtig geplant sein.

Das Netzwerk ist auf eng gekoppelte parallele Jobs optimiert, nicht auf Microservices, die sich gegenseitig aufrufen. Wenn Ihre Last ein verteiltes System ist und keine parallele Berechnung, sind Sie hier falsch.

Wartezeiten sind real. Ein großer Job kann warten. Wenn Sie Ergebnisse innerhalb einer Stunde auf Abruf brauchen, ist das nicht Ihre Infrastruktur.

Elastizität gibt es nicht. Sie haben eine Zuteilung. Sie können nicht hochskalieren, nur weil heute viel los ist.

Unterm Strich: EuroHPC ist ausgezeichnet für große, planbare, parallele oder Batch-Lasten. Es taugt schlecht für interaktive, elastische, abrufbasierte Lasten und für alles, was sich wie ein Dienst verhält.

Welche Lasten tatsächlich passen

Modelltraining und Feinabstimmung im großen Maßstab. Der naheliegende moderne Fall, und genau dafür sind die KI-Fabriken gebaut.

Simulation im großen Maßstab. Strömungsmechanik, Molekulardynamik, Strukturanalyse, Klima und Wetter, Elektromagnetik. Die klassischen Fälle und bis heute die größten Nutzer.

Große Batch-Inferenz oder Datenverarbeitung. Ein großes Korpus einmal durchrechnen, Embeddings im großen Maßstab erzeugen, Batch-Scoring.

Alles, wofür Sie heute ernsthaft Geld für Cloud-GPU- oder CPU-Zeit bei planbaren Jobs ausgeben. Das ist der kaufmännische Test. Wenn Ihre monatliche Cloud-Rechnung für Batch-Arbeit spürbar ist und die Jobs sich planen lassen, rechnen Sie es einmal gegen.

Alles, wobei Daten die EU nicht verlassen dürfen. Sensible Daten unter sektoralen Regeln, Gesundheitsdaten, Daten des öffentlichen Sektors. Rechenleistung innerhalb der EU und unter EU-Recht verändert die Bewertung, und das hängt mit den Übermittlungsfragen aus unserem DSGVO-Leitfaden zusammen.

Praktischer Einstieg

Beginnen Sie mit einer Benchmark-Zuteilung. Klein, schnell, und sie beantwortet die Machbarkeitsfrage, bevor Sie investieren.

Sprechen Sie mit dem nationalen Kompetenzzentrum. Jedes teilnehmende Land hat eines. Sie sind genau dafür da, Organisationen zu helfen, die neu bei HPC sind, sie kosten nichts, und sie sagen Ihnen ehrlich, ob Ihre Last passt.

Kalkulieren Sie die Portierungsarbeit ausdrücklich ein. Wenn Ihr Team nur Managed Cloud kennt, ist es ein echtes Entwicklungsprojekt, eine Last auf einer HPC-Zuteilung effizient zum Laufen zu bringen. Nicht riesig, aber auch nicht null. Ein erster Versuch, der nur einen Bruchteil der erreichbaren Leistung schafft, ist keine Seltenheit.

Prüfen Sie als Unternehmen zuerst die KI-spezifischen und die industriellen Schienen. Das klassische wissenschaftliche Zuteilungsverfahren ist nicht auf Sie zugeschnitten.

Planen Sie den Datentransport früh. Terabytes hinein und heraus zu bewegen ist ein Logistikproblem mit eigener Vorlaufzeit.

Wo das strategisch sitzt

EuroHPC ist die Grundschicht der europäischen Rechenstrategie. Die KI-Fabriken aus unserem InvestAI-Leitfaden hängen daran, die Gigafabriken bauen sie aus. Die Prozessorarbeit unter dem Chips Act zielt langfristig darauf, die Hardwareabhängigkeit darunter zu verringern. Und der Cloud and AI Development Act ist der Rechtsrahmen um das Ganze.

Für ein Unternehmen zählt die praktische Seite mehr als die strategische. Wenn Sie entscheiden, wo ein Trainingslauf läuft, denken Sie kaum an europäische Technologiesouveränität. An einen Bruchteil des Preises schon.

Wo das hinpasst

Die gesamte Förder- und Zugangslandschaft steht in unserem Leitfaden zur EU-Technologieförderung. Das Programm, aus dem ein großer Teil von EuroHPC finanziert wird, behandelt unser Leitfaden zum Programm Digitales Europa.

Hilfe bekommen

Wir bauen Datenplattformen, KI-Pipelines und rechenintensive Systeme für Unternehmen in Europa, samt der Arbeit, eine Last vom Laptop oder von einer Cloud-GPU auf eine geplante HPC-Zuteilung zu bringen, ohne ein Quartal daran zu verlieren.

Wenn Sie eine rechenintensive Last haben und realistisch einschätzen wollen, ob Ihnen ein EuroHPC-Zugang hilft und was die Portierung kostet, schreiben Sie an office@c9group.dev. Mehr über unsere Infrastrukturarbeit auf der Seite zur AWS-Kostenoptimierung.