Parallelisierten Workload sinnvoll in Cloud auslagern

Hallo zusammen,

ich lese hier schon lange immer wieder gespannt mit und habe widme mich gerade einer Problemlösung, vor der eventuell noch mehrere Personen stehen. Da man ja oft den Wald vor lauter Bäumen nicht mehr sieht, würde ich gern einfach mal hier mit euch diskutieren, wie ihr dies lösen würdet.

Also folgendes: Es gibt ein Programm (Eigenentwicklung, Windows-Anwendung), welches Plausibilitätsprüfungen auf eine Datei durchführt. Diese Datei wird immer wieder in abgewandelter Form hergestellt. Nach Herstellung muss die Datei auf durch diese Prüfung. Allerdings ist die Prüfung sehr umfangreich und Laufzeitintensiv. Deswegen kann man die Datei aufteilen und auf beispielsweise 10 Rechner verteilen. Die Frequenz des Herstellens einer neuen Datei ist unterschiedlich.

Heute wird das gelöst, indem auf einem Virtualisierungshost diese 10 Rechner eingerichtet werden und dann nach herstellen der Datei benutzt werden. Im Laufe der Zeit wurde eine hergestellte Datei immer umfangreicher, was bedeutet, dass auch die Laufzeit immer größer wurde. Deswegen wird der Wunsch immer Größer, dass man hier entgegensteuert. Gleichzeitig ist es nun so, dass diese Rechner aber nur ca. 25% der Zeit im Jahr benutzt werden.
Das einfachste wäre es jetzt einen weitere Virtualisierungshost mit weiteren 10 Rechnern (oder mehr) anzuschaffen. Im Umkehrschluss würden dann die Dateien in kürzerer Zeit geprüft werden können aber die Rechner auch nur noch 12,5% der Zeit genutzt werden.

Daher hatte ich angedacht diesen Workload in die Cloud auszulagern. Dies hätte den Vorteil, dass Rechenzeit nur bezahlt werden müssten wenn sie auch genutzt wird. Dadurch, dass die Eigenentwicklung nur auf Windows lauffähig ist und einige Abhängigkeiten installiert werden müssen, ist auf jeden Fall erforderlich, dass die Rechner entweder gespeichert werden oder aus einem vordefinierten Image gestartet werden.

Mein Ansatz wäre gewesen, einfach 30 Rechner in Azure o.Ä. einzurichten und diese bei Bedarf zu starten. Dem Endbenutzer hätte ich dann einen Zugang zum Azure-Portal eingerichtet, wo er diese selbstständig starten und beenden kann und per RDP benutzen kann. Da allerdings wohl dann eine Volumenlizenz für Windows fällig wird (oder kann man die versteckt auch irgendwo mitmieten?) habe ich erstmal auf die bremse gedrückt und möchte über alternativen nachdenken.

Wenn ich eine Lösung zaubern könnte dann würde die so aussehen: Der Endanwender loggt sich in ein Portal ein. Hier hat er die Möglichkeit Rechner zu erstellen/starten. Er gibt seine gewünschte Anzahl ein und nachdem er sich einen Kaffee geholt hat kann er diese benutzen. Die Rechner sind bereits mit der Eigenentwicklung sowie allen Abhängigkeiten ausgestattet und über eine Tabwahl wechselt er zwischen den Sitzungen. Idealerweise hat er nun die Möglichkeit die zu testende Datei auf alle Rechner zu übertragen. Dann startet er seine Tests. Nach der Auswertung fährt er die Rechner runter und diese werden gelöscht. Monatlich wird dann eine Rechnung erstellt über die Rechenzeit sowie Windowslizenz. Ein Rechner sollte übrigens über zwei performante vCPUS verfügen sowie mindestens 4GB Ram. Also eigentlich überschaubar.

Ich hoffe das war einigermaßen verständlich und freue mich auf Fragen oder Diskussionen dazu.
Bin gespannt ob ich am Ende dann doch einfach die 30 Rechner in Azure einrichten werde...

Gruß