In diesem Dokument werden die Funktionen von Hyperdisk ML beschrieben, das den höchsten Durchsatz aller Google Cloud-Hyperdisk-Typen bietet. Google empfiehlt die Verwendung von Hyperdisk ML für maschinelles Lernen und für Arbeitslasten, die einen hohen Lesedurchsatz für unveränderliche Datasets erfordern. Der hohe Durchsatz von Hyperdisk ML führt zu schnelleren Datenladezeiten, kürzeren Inaktivitätszeiten des Accelerators und geringeren Rechenkosten.
Bei großen Inferenz-, Trainings- und HPC-Arbeitslasten können Sie ein einzelnes Hyperdisk-ML-Volume im Lesemodus an mehrere Compute-Instanzen anhängen.
Sie können für ein einzelnes Hyperdisk ML-Volume einen Durchsatz von bis zu 2 TiB/s (2.097.152 MiB/s) angeben. Sie können keine IOPS-Stufe bereitstellen, aber jeder MiB/s des bereitgestellten Durchsatzes umfasst 16 IOPS, bis zu 33.554.432 IOPS.
Weitere Informationen zu Hyperdisk und den anderen Hyperdisk-Typen finden Sie unter Informationen zu Hyperdisk.
Informationen zum Erstellen eines Hyperdisk ML-Volumes finden Sie unter Hyperdisk-Volume erstellen.
Anwendungsfälle
Hyperdisk ML eignet sich gut für die folgenden Anwendungsfälle:
- HPC-Arbeitslasten
- Maschinelles Lernen
- Beschleunigungsoptimierte Arbeitslasten
Unterstützung von Maschinenserien
Sie können Hyperdisk ML mit den folgenden Maschinenserien verwenden:
Einschränkungen beim Anhängen von Hyperdisk ML-Volumes an Instanzen der 4. Generation
Hyperdisk ML-Volumes, die vor dem 4. Februar 2026 erstellt wurden, können nicht an Maschinen der 4. Generation angehängt werden, z. B. C4- oder G4-Maschinen.
Um diese Einschränkung zu umgehen, erstellen Sie einen Snapshot des Laufwerks und erstellen Sie dann ein neues Laufwerk aus dem Snapshot. Sie können das neue Laufwerk an eine beliebige unterstützte Instanz anhängen.
Bereitgestellte Leistung
Sie müssen keine Leistung bereitstellen, wenn Sie Hyperdisk-Volumes erstellen. Wenn Sie keine Leistung bereitstellen, erstellt Compute Engine das Volume mit Standardwerten, die Sie später ändern können. Weitere Informationen zu Standardwerten finden Sie unter Standardwerte für IOPS und Durchsatz.
Wenn Sie Ihre Leistungsanforderungen kennen, können Sie beim Erstellen eines Hyperdisk ML-Volumes IOPS- und Durchsatzlimits angeben. Die bereitgestellten Werte lassen sich nach der Volume-Erstellung ändern. Sie können kein IOPS- oder Durchsatzniveau angeben, wenn Sie keine Größe angeben.
Größen- und Leistungslimits
Die folgenden Limits gelten für die Größe, den Durchsatz und die IOPS-Werte, die Sie für ein Hyperdisk ML-Volume angeben können.
Größe: zwischen 4 GiB und 64 TiB. Die Standardgröße beträgt 100 GiB.
Durchsatz: zwischen 400 MiB/s und 2 TiB/s (2.097.152 MiB/s). Sowohl der minimale als auch der maximale Durchsatz haben eigene Grenzwerte, die auf der Größe des Volumes basieren:
Mindestdurchsatz: Bei Volumes mit einer Größe von 4 bis 3.341 GiB beträgt der Mindestwert 400 MiB/s. Bei Volumes mit einer Größe von mindestens 3.342 GiB hängt der Mindestwert von der Größe ab und liegt zwischen 401 und 7.680 MiB/s.
Maximaler Durchsatz: Bei Volumes mit einer Größe von mindestens 1.311 GiB beträgt der maximale Wert 2 TiB/s (2.097.152 MiB/s). Bei Volumes mit einer Größe von bis zu 1.310 GiB hängt der Maximalwert von der Größe ab und liegt zwischen 6.400 und 2.097.152 MiB/s.
Beispiele finden Sie unter Limits für bereitgestellten Durchsatz.
IOPS: Sie können für Hyperdisk ML-Volumes kein IOPS-Limit angeben. Stattdessen hängen die bereitgestellten IOPS vom bereitgestellten Durchsatz ab. Für jedes Hyperdisk-ML-Volume werden 16 IOPS für jedes MiB/s Durchsatz bereitgestellt, bis zu einem Maximum von 33.554.432 IOPS.
Limits für bereitgestellten Durchsatz
In der folgenden Tabelle sind die Limits für den bereitgestellten Durchsatz für gängige Volume-Größen aufgeführt. Wenn eine Größe nicht aufgeführt ist, verwenden Sie die folgende Formel, um die zulässigen Werte zu berechnen, wobei x die Größe des Volumes in GiB ist:
- Minimal konfigurierbarer Durchsatz:
MAX (400, 0.12x) - Maximal konfigurierbarer Durchsatz:
MIN (2,097,152, 1600x)
| Größe | Mindestdurchsatz (MiB/s) | Maximaler Durchsatz (MiB/s) |
|---|---|---|
| 4 | 400 | 6.400 |
| 10 | 400 | 16.000 |
| 50 | 400 | 80.000 |
| 64 | 400 | 102.400 |
| 100 | 400 | 160.000 |
| 300 | 400 | 480.000 |
| 500 | 400 | 800.000 |
| 1.000 | 400 | 1.600.000 |
| 5.000 | 600 | 2.097.152 |
| 25.000 | 3.000 | 2.097.152 |
| 64.000 | 7.680 | 2.097.152 |
Standardwerte für Größe, IOPS und Durchsatz
Wenn Sie beim Erstellen eines Hyperdisk ML-Volumes keine Größe oder keinen Durchsatzwert angeben, weist Compute Engine Standardwerte zu.
Die Standardgröße für Hyperdisk ML-Volumes beträgt 100 GiB.
Die Standard-IOPS und der Standarddurchsatz basieren auf den folgenden Formeln.
- Standarddurchsatz:
MAX (24x, 400)MiB/s, wobeixdie Größe des Volumes in GiB ist. - Standard-IOPS:
16t, wobeitder Standarddurchsatz ist. Sie können die IOPS-Stufe nicht direkt konfigurieren.
Bereitgestellte Leistung oder Größe ändern
Sie können die bereitgestellte Größe alle vier Stunden und den Durchsatz alle sechs Stunden ändern. Eine Anleitung zum Ändern der Größe oder Leistung finden Sie unter Hyperdisk-Volume ändern.
Leistungsgrenzen bei Anhängen an eine Instanz
In diesem Abschnitt werden die Leistungslimits für Hyperdisk ML aufgeführt. Sie können für ein einzelnes Hyperdisk ML-Volume einen Durchsatz von bis zu 2 TiB/s (2.097.152 MiB/s) angeben. Sie können keine IOPS-Stufe bereitstellen, aber jeder MiB/s des bereitgestellten Durchsatzes umfasst 16 IOPS, bis zu 33.554.432 IOPS.
In diesem Abschnitt wird die maximale Leistung aufgeführt, die Hyperdisk ML-Volumes für jede unterstützte Instanz erreichen können. Die Leistung eines Hyperdisk ML-Volumes, wenn es an eine Instanz angehängt ist, darf die Limits für den Maschinentyp der Instanz nicht überschreiten. Die Leistungsgrenzen werden auch für alle Hyperdisk ML-Volumes freigegeben, die an dieselbe Instanz angehängt sind, unabhängig von der bereitgestellten Leistung der einzelnen Volumes.
Szenarien, in denen mehrere Instanzen erforderlich sind, um die bereitgestellte Leistung zu erreichen
Der bereitgestellte Durchsatz für ein Hyperdisk-ML-Volume wird zwischen den einzelnen Instanzen aufgeteilt, an die das Volume angehängt ist, bis zum maximalen Limit für den Maschinentyp, der in der folgenden Tabelle aufgeführt ist. Wenn die bereitgestellte Leistung eines Hyperdisk ML-Volumes höher ist als das Leistungslimit einer Instanz, kann das Volume seine bereitgestellte Leistung nur erreichen, wenn es an mehrere Instanzen angehängt ist.
Angenommen, Sie haben ein Hyperdisk ML-Volume, das mit einem Durchsatz von 500.000 MiB/s bereitgestellt wurde, und Sie möchten das Volume an a3-ultragpu-8-Instanzen anhängen. Eine einzelne a3-ultragpu-8-Instanz kann nicht mehr als 4.000 MiB/s Durchsatz erreichen. Um den bereitgestellten Durchsatz des Volumes zu erreichen, müssen Sie das Volume daher an mindestens 125 (500.000/4.000) a3-ultragpu-8-Instanzen anhängen. Für den Maschinentyp a2-highgpu-1g wären dagegen 272 Instanzen erforderlich.
| Maschinentyp der Instanz | Maximale IOPS | Maximaler Durchsatz (MiB/s) |
|---|---|---|
| A2 | ||
a2-*-1g | 28.800 | 1.800 |
a2-*-2g | 38.400 | 2.400 |
a2-*-4g | 38.400 | 2.400 |
a2-*-8g | 38.400 | 2.400 |
a2-megagpu-16g | 38.400 | 2.400 |
| A3 (A3+H100) | ||
a3-*-1g | 6.400 | 400 |
a3-*-2g | 28.800 | 1.800 |
a3-*-4g | 38.400 | 2.400 |
a3-*-8g | 76.800 | 4.800 |
| A3 (A3+H200) | ||
a3-ultragpu-8g1 | 160.000 | 10.000 |
| A41 | ||
a4-highgpu-8g1 | 160.000 | 10.000 |
| A4X1 | ||
a4x-highgpu-4g1 | 200.000 | 12.500 |
| A4X Max1 | ||
a4x-maxgpu-4g-metal1 | 200.000 | 12.500 |
| C3 | ||
c3-*-4 | 6.400 | 400 |
c3-*-8 | 12.800 | 800 |
c3-*-22 | 28.800 | 1.800 |
c3-*-44 | 38.400 | 2.400 |
c3-*-88 | 76.800 | 4.800 |
c3-*-176 | 160.000 | 10.000 |
c3-*-192-metal | 76.800 | 4.800 |
| C3D | ||
c3d-*-4 | 6.400 | 400 |
c3d-*-8 | 12.800 | 800 |
c3d-*-16 | 19.200 | 1.200 |
c3d-*-30 | 19.200 | 1.200 |
c3d-*-60 | 38.400 | 2.400 |
c3d-*-90 | 38.400 | 2.400 |
c3d-*-180 | 38.400 | 2.400 |
c3d-*-360 | 38.400 | 2.400 |
| C41 | ||
c4-*-21 | 6.400 | 400 |
c4-*-41 | 6.400 | 400 |
c4-*-81 | 12.800 | 800 |
c4-*-161 | 25.600 | 1600 |
c4-*-241 | 25.600 | 1.600 |
c4-*-321 | 25.600 | 1.600 |
c4-*-481 | 38.400 | 2.400 |
c4-*-961 | 80.000 | 5.000 |
c4-*-1441 | 100.000 | 6.250 |
c4-*-1921 | 160.000 | 10.000 |
c4-*-2881 | 160.000 | 10.000 |
c4-*-288-lssd-metal1 | 200.000 | 12.500 |
| C4A | ||
c4a-*-1 | 6.400 | 400 |
c4a-*-2 | 12.800 | 800 |
c4a-*-4 | 12.800 | 800 |
c4a-*-8 | 16.000 | 1.000 |
c4a-*-16 | 25.600 | 1.600 |
c4a-*-32 | 38.400 | 2.400 |
c4a-*-48 | 52.800 | 3.300 |
c4a-*-64 | 70.400 | 4.400 |
c4a-*-72 | 80.000 | 5.000 |
c4a-highmem-96-metal (Vorschau) | 80.000 | 5.000 |
| C4D1 | ||
c4d-*-21 | 6.400 | 400 |
c4d-*-41 | 6.400 | 400 |
c4d-*-81 | 12.800 | 800 |
c4d-*-161 | 19.200 | 1.200 |
c4d-*-321 | 25.600 | 1.600 |
c4d-*-481 | 25.600 | 1.600 |
c4d-*-641 | 38.400 | 2.400 |
c4d-*-961 | 50.000 | 3.125 |
c4d-*-1921 | 100.000 | 6.250 |
c4d-*-3841 | 160.000 | 10.000 |
c4d-*-384-metal1 | 160.000 | 10.000 |
| G2 | ||
g2-standard-4 | 12.800 | 800 |
g2-standard-8 | 19.200 | 1.200 |
g2-standard-12 | 28.800 | 1.800 |
g2-standard-16 | 38.400 | 2.400 |
g2-standard-24 | 38.400 | 2.400 |
g2-standard-32 | 38.400 | 2.400 |
g2-standard-48 | 38.400 | 2.400 |
g2-standard-96 | 38.400 | 2.400 |
| G4 | ||
g4-standard-6 | 6.400 | 400 |
g4-standard-12 | 12.800 | 800 |
g4-standard-24 | 19.200 | 1.200 |
g4-standard-48 | 25.600 | 1.600 |
g4-standard-96 | 44.800 | 2.800 |
g4-standard-192 | 76.800 | 4.800 |
g4-standard-384 | 160.000 | 10.000 |
| N4 | ||
n4-*-2 | 3.840 | 240 |
n4-*-4 | 3.840 | 240 |
n4-*-8 | 7.680 | 480 |
| Benutzerdefinierte N4-Typen mit 10 bis 14 vCPUs | 7.680 | 480 |
n4-*-16 | 19.200 | 1.200 |
| Benutzerdefinierte N4-Typen mit 18 bis 30 vCPUs | 19.200 | 1.200 |
n4-*-32 | 25.600 | 1.600 |
| Benutzerdefinierte N4-Typen mit 34 bis 46 vCPUs | 25.600 | 1.600 |
n4-*-48 | 38.400 | 2.400 |
| Benutzerdefinierte N4-Typen mit 50 bis 62 vCPUs | 38.400 | 2.400 |
n4-*-64 | 38.400 | 2.400 |
| Benutzerdefinierte N4-Typen mit 66 bis 78 vCPUs | 38.400 | 2.400 |
n4-*-80 | 38.400 | 2.400 |
| N4A | ||
n4a-*-1 | 3.840 | 240 |
n4a-*-2 | 3.840 | 240 |
n4a-*-4 | 3.840 | 240 |
n4a-*-8 | 7.680 | 480 |
n4a-*-16 | 19.200 | 1.200 |
n4a-*-32 | 25.600 | 1.600 |
n4a-*-48 | 38.400 | 2.400 |
n4a-*-64 | 38.400 | 2400 |
| N4D | ||
n4d-*-2 | 3.840 | 240 |
n4d-*-4 | 3.840 | 240 |
n4d-*-8 | 7.680 | 480 |
n4d-*-16 | 19.200 | 1.200 |
n4d-*-32 | 25.600 | 1.600 |
n4d-*-48 | 38.400 | 2.400 |
n4d-*-64 | 38.400 | 2.400 |
n4d-*-80 | 38.400 | 2.400 |
n4d-*-96 | 38.400 | 2.400 |
| TPU v5e | ||
ct5lp-hightpu-1t | 19.200 | 1.200 |
ct5lp-hightpu-4t | 28.800 | 1.800 |
ct5lp-hightpu-8t | 28.800 | 1.800 |
| TPU v5p | ||
ct5p-hightpu-4t | 76.800 | 4.800 |
| TPU v6e | ||
ct6e-standard-1t | 19.200 | 1.200 |
ct6e-standard-4t | 38.400 | 2.400 |
ct6e-standard-8t | 38.400 | 2.400 |
| TPU7x1 | ||
tpu7x-standard-4t1 | 96.000 | 6.000 |
1 Bietet auch eine Steady-State-Leistung. Weitere Informationen finden Sie unter Leistungsgrenzen für Maschinentypen mit Steady-State-Leistung.
Regionale Verfügbarkeit von Hyperdisk ML
Hyperdisk ML ist in Regionen mit unterstützten Maschinenserien verfügbar.
Schutz vor Katastrophen für Hyperdisk ML-Volumes
Sie können ein Hyperdisk ML-Volume mit Standard-Snapshots sichern. Mit Snapshots werden die Daten auf einem Hyperdisk ML-Volume zu einem bestimmten Zeitpunkt gesichert.
Zonenübergreifende Replikation
Hyperdisk ML-Volumes sind immer zonal und können nicht in eine andere Zone repliziert werden. Wenn Sie Daten in eine andere Zone in derselben Region replizieren möchten, müssen Sie Hyperdisk Balanced High Availability-Volumes verwenden.
Hyperdisk ML-Volume zwischen Instanzen freigeben
Bei beschleunigungsoptimierten Arbeitslasten für maschinelles Lernen können Sie dasselbe Hyperdisk ML-Volume an mehrere Instanzen anhängen. Dies ermöglicht den gleichzeitigen schreibgeschützten Zugriff auf ein einzelnes Volume von mehreren Instanzen aus. Das ist kostengünstiger als mehrere Laufwerke mit denselben Daten.
Für die gemeinsame Nutzung eines Laufwerks zwischen Instanzen fallen keine zusätzlichen Kosten an. Das Anhängen eines Laufwerks im Nur-Lese-Modus an mehrere Instanzen hat keine Auswirkungen auf die Leistung des Laufwerks. Jede VM kann weiterhin die maximale Laufwerksleistung erreichen, die für die Maschinenserie der VM möglich ist.
Einschränkungen für die gemeinsame Nutzung von Hyperdisk ML zwischen Instanzen
- Hyperdisk ML-Volumes unterstützen den Modus für mehrere Autoren nicht. Sie können ein Hyperdisk ML-Volume für mehrere Instanzen freigeben, wenn sich das Volume im Lesemodus befindet.
- Hyperdisk ML-Volumes können nicht im Lesemodus an eine einzelne Instanz angehängt werden.
- Wenn Sie ein Hyperdisk ML-Volume im Lesemodus freigeben, können Sie den Schreibzugriff auf das Laufwerk nicht wieder aktivieren.
- Sie können ein Hyperdisk ML-Volume in jedem 30-Sekunden-Intervall an bis zu 100 Instanzen anhängen.
- Bei Hyperdisk ML-Volumes hängt die maximale Anzahl von Instanzen von Folgendem ab: die bereitgestellte Größe, wie unten beschrieben:
- Volumes mit einer Kapazität von bis zu 512 GiB: 2.500 Instanzen
- Volumes mit einer Kapazität zwischen 513 GiB und 1,5 TiB: 1.000 Instanzen
- Volumes mit einer Kapazität zwischen 1,501 TiB und 2 TiB: 600 Instanzen
- Volumes mit einer Kapazität zwischen 2,001 TiB und 4 TiB: 300 Instanzen
- Volumes mit einer Kapazität von 4,001 TiB und 16 TiB: 128 Instanzen
- Volumes mit einer Kapazität von mindestens 16,001 TiB: 30 Instanzen
Wenn das Volume an mehr als 20 Instanzen angehängt ist, müssen Sie für jede VM mindestens 100 MiB/s Durchsatz bereitstellen. Wenn Sie beispielsweise ein Laufwerk an 500 Instanzen anhängen, müssen Sie das Volume mit einem Durchsatz von mindestens 50.000 MiB/s bereitstellen.
Weitere Informationen finden Sie unter Schreibgeschützter Modus für Hyperdisk.
Preise
Ihnen wird die gesamte bereitgestellte Größe und der gesamte bereitgestellte Durchsatz Ihrer Hyperdisk ML-Volumes in Rechnung gestellt, bis Sie sie löschen. Kosten fallen auch dann an, wenn das Volume an keine Instanzen angehängt ist oder wenn die Instanz angehalten oder beendet wurde. Weitere Informationen finden Sie unter Laufwerk-Preise.
Beschränkungen
- Hyperdisk ML-Volumes sind zonal und können nur über die Zone aufgerufen werden, in der Sie das Volume erstellt haben.
- Sie können aus einem Hyperdisk-Volume kein Maschinen-Image erstellen.
- Sie können keinen Instant Snapshot aus einem Hyperdisk ML-Volume erstellen.
- Hyperdisk ML können nicht als Bootlaufwerke verwendet werden.
- Sie können kein Hyperdisk ML-Laufwerk im Lese-/Schreibmodus für einen einzelnen Autor aus einem Snapshot oder einem Laufwerk-Image erstellen. Sie müssen das Laufwerk im Modus „Nur-Lese-Modus für viele“ erstellen.
- Sie können die Größe eines Hyperdisk-ML-Volumes alle 4 Stunden und den Durchsatz alle 6 Stunden ändern.