RDMA-Netzwerkprofile

Auf dieser Seite finden Sie eine Übersicht über RDMA-Netzwerkprofile (Remote Direct Memory Access) in Google Cloud.

Übersicht

Mit RDMA-Netzwerkprofilen können Sie VPC-Netzwerke (Virtual Private Cloud) erstellen, die eine RDMA-Kommunikation mit niedriger Latenz und hoher Bandbreite zwischen dem Arbeitsspeicher oder den GPUs von Compute Engine-Instanzen ermöglichen, die im Netzwerk erstellt werden.

RDMA-Netzwerkprofile sind nützlich für die Ausführung von KI-Arbeitslasten. Weitere Informationen zum Ausführen von KI-Arbeitslasten in Google Cloudfinden Sie in der Übersicht zu AI Hypercomputer.

Sie können die folgenden Arten von VPC-Netzwerken mit RDMA-Netzwerkprofilen erstellen:

VPC-Netzwerktyp Protokoll Ressourcenname des Netzwerkprofils Instanztypen vNIC-Typ
Falcon-VPC-Netzwerk RDMA über Falcon-Transport ZONE-vpc-falcon

VM:
H4D, Z4M

Bare Metal:
Z4M

IRDMA
RoCE-VPC-Netzwerk RDMA over Converged Ethernet v2 (RoCE v2)

Für VM-Instanzen:
ZONE-vpc-roce

Für Bare-Metal-Instanzen:
ZONE-vpc-roce-metal

VM:
A3 Ultra, A4, A4X

Bare Metal:
A4X Max

MRDMA

Unterstützte Zonen

RDMA-Netzwerkprofile sind nur in einer begrenzten Anzahl von Zonen verfügbar. Sie können ein Falcon-VPC-Netzwerk oder ein RoCE-VPC-Netzwerk nur in einer Zone erstellen, in der das entsprechende Netzwerkprofil verfügbar ist.

Eine Liste der unterstützten Zonen finden Sie unter Netzwerkprofile auflisten.

Alternativ können Sie sich die unterstützten Zonen für den Maschinentyp ansehen, den Sie im Netzwerk erstellen möchten. RDMA-Netzwerkprofile sind in denselben Zonen wie die unterstützten Maschinentypen verfügbar. Hier finden Sie weitere Informationen:

Spezifikationen

VPC-Netzwerke, die mit einem RDMA-Netzwerkprofil erstellt wurden, haben die folgenden Spezifikationen:

  • Zonale Einschränkung. Ressourcen, die ein VPC-Netzwerk mit einem RDMA-Netzwerkprofil verwenden, sind auf dieselbe Zone wie das RDMA-Netzwerkprofil beschränkt, das dem VPC-Netzwerk bei der Netzwerkerstellung zugeordnet ist. Dieses zonale Limit hat die folgenden Auswirkungen:

    • Alle Instanzen mit virtuellen Netzwerkschnittstellen (vNICs) im VPC-Netzwerk müssen in der Zone erstellt werden, die der Zone des vom VPC-Netzwerk verwendeten RDMA-Netzwerkprofils entspricht.

    • Alle im VPC-Netzwerk erstellten Subnetze müssen sich in der Region befinden, die die Zone des vom VPC-Netzwerk verwendeten RDMA-Netzwerkprofils enthält.

  • Nur RDMA-Netzwerkschnittstellen. Ein VPC-Netzwerk mit einem RDMA-Netzwerkprofil unterstützt nur Anhänge von bestimmten Netzwerkschnittstellen:

    • Falcon-VPC-Netzwerke unterstützen nur IRDMA-vNICs.
    • RoCE-VPC-Netzwerke unterstützen nur MRDMA-vNICs.

    Alle Nicht-RDMA-vNICs einer Instanz, z. B. die GVNIC- oder IDPF-vNICs, müssen an ein reguläres VPC-Netzwerk angehängt sein. Reguläre VPC-Netzwerke haben kein Netzwerkprofil. Daher gelten die für RDMA-Netzwerkprofile aufgeführten unterstützten und nicht unterstützten Funktionen nicht für die Nicht-RDMA-vNICs einer Instanz.

  • MTU mit 8.896 Byte. Für eine optimale Leistung empfehlen wir eine maximale Übertragungseinheit (MTU) von 8896 Byte für VPC-Netzwerke mit einem RDMA-Netzwerkprofil. So kann der RDMA-Treiber im Gastbetriebssystem der Instanz bei Bedarf kleinere MTUs verwenden.

    Wenn Sie ein VPC-Netzwerk mit einem RDMA-Netzwerkprofil erstellen, ist 8896 Byte die Standard-MTU.

  • Unterschiede bei Firewalls Im Folgenden finden Sie Informationen zu den Unterschieden bei Firewalls in VPC-Netzwerken mit einem RDMA-Netzwerkprofil:

    • Für VPC-Netzwerke mit einem RDMA-Netzwerkprofil werden die folgenden impliziten Firewallregeln verwendet, die sich von den impliziten Firewallregeln für reguläre VPC-Netzwerke unterscheiden:

      • Implizierte Zulassung für ausgehenden Traffic
      • Implizite Zulassung von eingehendem Traffic

    • Die Unterstützung von Cloud NGFW hängt vom Typ des VPC-Netzwerk ab:

      • Informationen zu RoCE-VPC-Netzwerken finden Sie hier:

        • RoCE-VPC-Netzwerke für VM-Instanzen unterstützen nur regionale Netzwerk-Firewallrichtlinien mit dem Firewallrichtlinientyp „RoCE“. Die Parameter für Regeln in einer unterstützten regionalen Netzwerk-Firewallrichtlinie sind begrenzt. Weitere Informationen finden Sie unter Cloud NGFW für RoCE-VPC-Netzwerke.
        • In RoCE-VPC-Netzwerken für Bare-Metal-Instanzen können keine Cloud NGFW-Regeln oder -Richtlinien konfiguriert werden.

      • In Falcon-VPC-Netzwerken können keine Cloud NGFW-Regeln oder -Richtlinien konfiguriert werden.

  • Keine Unterstützung für Konnektivitätstests. Konnektivitätstests unterstützen keine VPC-Netzwerke mit einem RDMA-Netzwerkprofil.

  • Weitere VPC-Funktionen VPC-Netzwerke mit einem RDMA-Netzwerkprofil unterstützen nur eine begrenzte Anzahl anderer VPC-Funktionen. Weitere Informationen finden Sie im Abschnitt Unterstützte und nicht unterstützte Funktionen.

Unterstützte und nicht unterstützte Funktionen

In den folgenden Abschnitten wird beschrieben, welche VPC-Funktionen für die einzelnen VPC-Netzwerk unterstützt werden, die Sie mit einem RDMA-Netzwerkprofil erstellen können:

Falcon-VPC-Netzwerke (falcon)

In der folgenden Tabelle sind die Funktionen aufgeführt, die von Falcon-VPC-Netzwerken unterstützt werden, die mit dem Netzwerkprofil falcon erstellt werden.

Funktion Unterstützt Netzwerkprofil-Property Attributwert des Netzwerkprofils Details
RDMA-NICs interfaceTypes IRDMA

Falcon-VPC-Netzwerke unterstützen nur IRDMA NICs

Andere NIC-Typen wie MRDMA, GVNIC, IDPF und VIRTIO_NET werden nicht unterstützt.
Mehrere NICs im selben Netzwerk allowMultiNicInSameNetwork MULTI_NIC_IN_SAME_NETWORK_ALLOWED

Falcon-VPC-Netzwerke unterstützen Multi-NIC-Instanzen, sodass sich zwei oder mehr RDMA-NICs derselben Instanz im selben VPC-Netzwerk befinden können. Jede NIC muss an ein eindeutiges Subnetz im VPC-Netzwerk angehängt werden.
Nur-IPv4-Subnetze subnetworkStackTypes SUBNET_STACK_TYPE_IPV4_ONLY

Falcon-VPC-Netzwerke unterstützen Nur-IPv4-Subnetze, einschließlich derselben gültigen IPv4-Bereiche wie reguläre VPC-Netzwerke.

Falcon-VPC-Netzwerke unterstützen keine Dual-Stack- oder reinen IPv6-Subnetze. Weitere Informationen finden Sie unter Subnetztypen.
Zweck des Subnetzes PRIVATE subnetworkPurposes SUBNET_PURPOSE_PRIVATE

Falcon-VPC-Netzwerke unterstützen reguläre Subnetze mit dem purpose-Attributwert PRIVATE.

Falcon-VPC-Netzwerke unterstützen keine Private Service Connect-Subnetze, Proxy-only-Subnetze oder Private NAT-Subnetze. Weitere Informationen finden Sie unter Zwecke von Subnetzen.
GCE_ENDPOINT Adresszweck addressPurposes GCE_ENDPOINT

Falcon-VPC-Netzwerke unterstützen IP-Adressen mit dem purpose-Attributwert GCE_ENDPOINT, der von internen IP-Adressen von Instanz-NICs verwendet wird.

Falcon-VPC-Netzwerke unterstützen keine IP-Adressen für spezielle Zwecke, z. B. den Zweck SHARED_LOADBALANCER_VIP. Weitere Informationen finden Sie in der Referenz zur Ressource „addresses“.
Private Service Connect-Schnittstellen allowPscInterface PSC_INTERFACE_ALLOWED

Falcon-VPC-Netzwerke unterstützen Netzwerkanhänge und Verbindungen von virtuellen Private Service Connect-Schnittstellen.
Dynamic Network Interfaces allowSubInterfaces SUBINTERFACES_BLOCKED Falcon-VPC-Netzwerke unterstützen keine dynamischen NICs.
Anhänge von nic0 allowDefaultNicAttachment DEFAULT_NIC_ATTACHMENT_BLOCKED Falcon-VPC-Netzwerke unterstützen das Anhängen der Netzwerkschnittstelle nic0 einer Instanz an das Netzwerk nicht. Jede an das VPC-Netzwerk angehängte RDMA-NIC darf nicht nic0 sein.
Externe IP-Adressen für Instanzen allowExternalIpAccess EXTERNAL_IP_ACCESS_BLOCKED In Falcon-VPC-Netzwerken kann RDMA-NICs keine externen IP-Adressen zugewiesen werden. Daher haben RDMA-NICs keinen Internetzugriff.
Alias-IP-Bereiche allowAliasIpRanges ALIAS_IP_RANGE_BLOCKED Falcon-VPC-Netzwerke unterstützen nicht das Zuweisen von Alias-IP-Bereichen zu RDMA-NICs.
IP-Weiterleitung allowIpForwarding IP_FORWARDING_BLOCKED Falcon-VPC-Netzwerke unterstützen IP-Weiterleitung nicht.
Migration von Instanznetzwerken allowNetworkMigration NETWORK_MIGRATION_BLOCKED Falcon-VPC-Netzwerke unterstützen die Migration von Instanz-NICs zwischen Netzwerken nicht.
Automatischer Modus allowAutoModeSubnet AUTO_MODE_SUBNET_BLOCKED Falcon-VPC-Netzwerke können keine Netzwerke im automatischen Modus sein. Weitere Informationen finden Sie unter Modus für Subnetzerstellung.
VPC-Netzwerk-Peering allowVpcPeering VPC_PEERING_BLOCKED Falcon-VPC-Netzwerke unterstützen keine Verbindung zu anderen VPC-Netzwerken über VPC-Netzwerk-Peering. Daher wird in Falcon-VPC-Netzwerken keine Verbindung zu Diensten über den Zugriff auf private Dienste unterstützt.
Statische Routen allowStaticRoutes STATIC_ROUTES_BLOCKED Falcon-VPC-Netzwerke unterstützen keine statischen Routen.
Paketspiegelung allowPacketMirroring PACKET_MIRRORING_BLOCKED Falcon-VPC-Netzwerke unterstützen keine Paketspiegelung.
Cloud NAT allowCloudNat CLOUD_NAT_BLOCKED Falcon-VPC-Netzwerke unterstützen Cloud NAT nicht.
Cloud Router allowCloudRouter CLOUD_ROUTER_BLOCKED Falcon-VPC-Netzwerke unterstützen keine Cloud Router und dynamischen Routen.
Cloud Interconnect allowInterconnect INTERCONNECT_BLOCKED Falcon-VPC-Netzwerke unterstützen keine Cloud Interconnect-VLAN-Anhänge.
Cloud VPN allowVpn VPN_BLOCKED Falcon-VPC-Netzwerke unterstützen keine Cloud VPN-Tunnel.
Network Connectivity Center allowNcc NCC_BLOCKED Falcon-VPC-Netzwerke unterstützen kein NCC. Sie können ein Falcon-VPC-Netzwerk nicht als VPC-Spoke zu einem NCC-Hub hinzufügen.
Cloud Load Balancing allowLoadBalancing LOAD_BALANCING_BLOCKED Falcon-VPC-Netzwerke unterstützen kein Cloud Load Balancing. Daher unterstützen Falcon-VPC-Netzwerke keine Load-Balancer-Features, einschließlich Google Cloud Armor.
Privater Google-Zugriff allowPrivateGoogleAccess PRIVATE_GOOGLE_ACCESS_BLOCKED Falcon-VPC-Netzwerke unterstützen keinen privaten Google-Zugriff.
Private Service Connect allowPsc PSC_BLOCKED Falcon-VPC-Netzwerke unterstützen keine veröffentlichten Dienste, Endpunkte oder Backends von Private Service Connect.

RoCE-VPC-Netzwerke für VM-Instanzen (roce)

In der folgenden Tabelle sind die Funktionen aufgeführt, die von RoCE-VPC-Netzwerken für VM-Instanzen unterstützt werden, die mit dem Netzwerkprofil roce erstellt werden.

Funktion Unterstützt Netzwerkprofil-Property Attributwert des Netzwerkprofils Details
RDMA-NICs interfaceTypes MRDMA

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen nur MRDMA-NICs

Andere NIC-Typen wie IRDMA, GVNIC, IDPF und VIRTIO_NET werden nicht unterstützt.
Mehrere NICs im selben Netzwerk allowMultiNicInSameNetwork MULTI_NIC_IN_SAME_NETWORK_ALLOWED

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen Instanzen mit mehreren NICs. So können sich zwei oder mehr RDMA-NICs derselben Instanz im selben VPC-Netzwerk befinden. Jede NIC muss an ein eindeutiges Subnetz im VPC-Netzwerk angehängt werden.

Weitere Informationen finden Sie unter Überlegungen zu mehreren NICs für VPC-Netzwerk-Netzwerke.
Nur-IPv4-Subnetze subnetworkStackTypes SUBNET_STACK_TYPE_IPV4_ONLY

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen Nur-IPv4-Subnetze, einschließlich derselben gültigen IPv4-Bereiche wie reguläre VPC-Netzwerke.

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Dual-Stack- oder reinen IPv6-Subnetze. Weitere Informationen finden Sie unter Subnetztypen.
Subnetzzweck PRIVATE subnetworkPurposes SUBNET_PURPOSE_PRIVATE

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen reguläre Subnetze mit dem purpose-Attributwert PRIVATE.

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Private Service Connect-Subnetze, Proxy-only-Subnetze oder private NAT-Subnetze. Weitere Informationen finden Sie unter Zwecke von Subnetzen.
GCE_ENDPOINT Adresszweck addressPurposes GCE_ENDPOINT

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen IP-Adressen mit dem Attributwert purpose von GCE_ENDPOINT, der von internen IP-Adressen von Instanz-NICs verwendet wird.

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine IP-Adressen für spezielle Zwecke, z. B. den Zweck SHARED_LOADBALANCER_VIP. Weitere Informationen finden Sie in der Referenz zur Adressressource.
Alias-IP-Bereiche allowAliasIpRanges ALIAS_IP_RANGES_ALLOWED

RoCE-VPC-Netzwerke für VM-Instanzen unterstützen das Zuweisen von Alias-IP-Bereichen zu MRDMA-NICs.

Weitere Informationen finden Sie unter Überlegungen zu RoCE-VPC-Netzwerken in der Übersicht zu Alias-IP-Bereichen.
Anhänge von nic0 allowDefaultNicAttachment DEFAULT_NIC_ATTACHMENT_BLOCKED In RoCE-VPC-Netzwerken für VM-Instanzen wird das Anhängen der nic0-Netzwerkschnittstellen einer Instanz an das Netzwerk nicht unterstützt. Jede RDMA-NIC, die an das VPC-Netzwerk angehängt ist, darf nicht nic0 sein.
Externe IP-Adressen für Instanzen allowExternalIpAccess EXTERNAL_IP_ACCESS_BLOCKED In RoCE-VPC-Netzwerken für VM-Instanzen wird die Zuweisung externer IP-Adressen zu RDMA-NICs nicht unterstützt. Daher haben RDMA-NICs keinen Internetzugriff.
Dynamic Network Interfaces allowSubInterfaces SUBINTERFACES_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine dynamischen NICs.
Private Service Connect-Schnittstellen allowPscInterface PSC_INTERFACE_BLOCKED

RoCE-VPC-Netzwerke unterstützen keine Netzwerkanhänge oder Verbindungen von Private Service Connect-Schnittstellen.
IP-Weiterleitung allowIpForwarding IP_FORWARDING_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine IP-Weiterleitung.
Migration des Instanznetzwerks allowNetworkMigration NETWORK_MIGRATION_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen die Migration von Instanz-NICs zwischen Netzwerken nicht.
Automatischer Modus allowAutoModeSubnet AUTO_MODE_SUBNET_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen können keine Netzwerke im automatischen Modus sein. Weitere Informationen dazu finden Sie unter Modus für Subnetzerstellung.
VPC-Netzwerk-Peering allowVpcPeering VPC_PEERING_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Verbindung zu anderen VPC-Netzwerken über VPC-Netzwerk-Peering. Daher unterstützen RoCE-VPC-Netzwerke für VM-Instanzen keine Verbindung zu Diensten über den Zugriff auf private Dienste.
Statische Routen allowStaticRoutes STATIC_ROUTES_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine statischen Routen.
Paketspiegelung allowPacketMirroring PACKET_MIRRORING_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Paketspiegelung.
Cloud NAT allowCloudNat CLOUD_NAT_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen Cloud NAT nicht.
Cloud Router allowCloudRouter CLOUD_ROUTER_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Cloud Router und dynamischen Routen.
Cloud Interconnect allowInterconnect INTERCONNECT_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Cloud Interconnect-VLAN-Anhänge.
Cloud VPN allowVpn VPN_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keine Cloud VPN-Tunnel.
Network Connectivity Center allowNcc NCC_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen NCC nicht. Sie können ein VPC-Netzwerk mit einem RDMA-Netzwerkprofil nicht als VPC-Spoke zu einem NCC-Hub hinzufügen.
Cloud Load Balancing allowLoadBalancing LOAD_BALANCING_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen Cloud Load Balancing nicht. Daher unterstützen RoCE-VPC-Netzwerke für VM-Instanzen keine Load-Balancer-Funktionen, einschließlich Google Cloud Armor.
Privater Google-Zugriff allowPrivateGoogleAccess PRIVATE_GOOGLE_ACCESS_BLOCKED RoCE-VPC-Netzwerke für VM-Instanzen unterstützen keinen privaten Google-Zugriff.
Private Service Connect allowPsc PSC_BLOCKED RoCE-VPC-Netzwerke unterstützen keine veröffentlichten Dienste, Endpunkte oder Backends von Private Service Connect.

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen (roce-metal)

In der folgenden Tabelle sind die Funktionen aufgeführt, die von RoCE-VPC-Netzwerken für Bare-Metal-Instanzen unterstützt werden, die mit dem Netzwerkprofil roce-metal erstellt werden.

Zusätzlich zu den in der Tabelle beschriebenen Eigenschaften gelten die folgenden Einschränkungen für GPU-Bare-Metal-Instanzen:

  • GPU-Bare-Metal-Instanzen können die folgenden UDP-Ports in RoCE-VPC-Netzwerken nicht verwenden, da sie von Google Cloudreserviert sind: 3882-3895 und 13882-13895.
  • GPU-Bare-Metal-Instanzen können den folgenden IPv6-Link-Local-Adressbereich nicht verwenden, da er von Google Cloudreserviert ist: fe80::badd:c0de:cafe:0/120.
Funktion Unterstützt Netzwerkprofil-Property Attributwert des Netzwerkprofils Details
RDMA-NICs interfaceTypes MRDMA

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen nur MRDMA NICs

Andere NIC-Typen wie IRDMA, GVNIC, IDPF und VIRTIO_NET werden nicht unterstützt.
Mehrere NICs im selben Netzwerk allowMultiNicInSameNetwork MULTI_NIC_IN_SAME_NETWORK_ALLOWED

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen Instanzen mit mehreren NICs, sodass sich zwei oder mehr RDMA-NICs derselben Instanz im selben VPC-Netzwerk befinden können.

Siehe auch Überlegungen zu RoCE-VPC-Netzwerk mit mehreren NICs.
Multi-NIC im selben Subnetz allowMultiNicInSameSubnetwork MULTI_NIC_IN_SAME_SUBNETWORK_ALLOWED

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen Instanzen mit mehreren NICs, sodass sich zwei oder mehr RDMA-NICs derselben Instanz im selben Subnetz eines VPC-Netzwerks befinden können.

Siehe auch Überlegungen zu RoCE-VPC-Netzwerk mit mehreren NICs.
Vordefinierter ULA-IPv6-Bereich für das Netzwerk predefinedNetworkInternalIpv6Range ULA_IPV6_RANGE

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen internes IPv6 und haben einen vordefinierten /48-Bereich für eindeutige lokale Adressen (ULA).

Der vordefinierte Bereich wird von Google Cloud für jede Netzwerkprofilinstanz bereitgestellt und kann nicht konfiguriert werden.
Ein Nur-IPv6-Subnetz subnetworkStackTypes SUBNET_STACK_TYPE_IPV6_ONLY

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen ein einzelnes, automatisch bereitgestelltes reines IPv6-Subnetz, das einen vordefinierten IPv6-Subnetzbereich und eine vordefinierte Namenskonvention verwendet, wie in der folgenden Tabellenzeile beschrieben.

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Dual-Stack- oder reinen IPv4-Subnetze und auch nicht das Erstellen zusätzlicher reiner IPv6-Subnetze. Weitere Informationen finden Sie unter Subnetztypen.
Vordefinierter IPv6-Subnetzbereich und Namenspräfix predefinedSubnetworkRanges ipv6Range: ULA_IPV6_RANGE

namePrefix: default-subnet-1

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen haben ein einzelnes Subnetz, das automatisch bereitgestellt wird und die folgenden Eigenschaften hat:

  • Das Subnetz verwendet einen vordefinierten IPv6-Bereich /48, der genau mit dem Bereich /48 des Netzwerks übereinstimmt.
  • Das Subnetz verwendet das folgende Namensformat: default-subnet-1-NETWORK_NAME, wobei NETWORK_NAME der Name ist, den Sie beim Erstellen des Netzwerks angegeben haben.
Subnetzzweck PRIVATE subnetworkPurposes SUBNET_PURPOSE_PRIVATE

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen reguläre Subnetze mit dem Attributwert purpose von PRIVATE.

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Private Service Connect-Subnetze, Nur-Proxy-Subnetze oder private NAT-Subnetze. Weitere Informationen finden Sie unter Zwecke von Subnetzen.
GCE_ENDPOINT Adresszweck addressPurposes GCE_ENDPOINT

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen IP-Adressen mit dem Attributwert purpose von GCE_ENDPOINT, der von internen IP-Adressen von Instanz-NICs verwendet wird.

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine IP-Adressen für spezielle Zwecke, z. B. für SHARED_LOADBALANCER_VIP. Weitere Informationen finden Sie in der Referenz zur Ressource „addresses“.
Subnetzerstellung allowSubnetworkCreation SUBNETWORK_CREATION_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen das Erstellen von Subnetzen im Netzwerk nicht.
Anhänge von nic0 allowDefaultNicAttachment DEFAULT_NIC_ATTACHMENT_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen nicht das Anhängen der nic0-Netzwerkschnittstellen einer Instanz an das Netzwerk. Jede an das VPC-Netzwerk angehängte RDMA-NIC darf nicht nic0 sein.
Statische IP-Adressen für Instanzen allowAddressCreation ADDRESS_CREATION_BLOCKED

RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen nicht das Reservieren statischer interner oder externer IP-Adressen oder das Konfigurieren statischer interner oder externer IP-Adressen für Instanzen.

Daher können Instanzen im Netzwerk nur sitzungsspezifische interne IP-Adressen verwenden.

Externe IP-Adressen für Instanzen allowExternalIpAccess EXTERNAL_IP_ACCESS_BLOCKED In RoCE-VPC-Netzwerken für Bare-Metal-Instanzen wird das Zuweisen von externen IP-Adressen (statisch oder sitzungsspezifisch) zu RDMA-NICs nicht unterstützt. Daher haben RDMA-NICs keinen Internetzugriff.
Dynamic Network Interfaces allowSubInterfaces SUBINTERFACES_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine dynamischen NICs.
Private Service Connect-Schnittstellen allowPscInterface PSC_INTERFACE_BLOCKED

RoCE-VPC-Netzwerke unterstützen keine Netzwerkanhänge oder Verbindungen von Private Service Connect-Schnittstellen.
Alias-IP-Bereiche allowAliasIpRanges ALIAS_IP_RANGE_BLOCKED In RoCE-VPC-Netzwerken für Bare-Metal-Instanzen können RDMA-NICs keine Alias-IP-Bereiche zugewiesen werden.
IP-Weiterleitung allowIpForwarding IP_FORWARDING_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine IP-Weiterleitung.
Migration des Instanznetzwerks allowNetworkMigration NETWORK_MIGRATION_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Migration von Instanz-NICs zwischen Netzwerken.
Automatischer Modus allowAutoModeSubnet AUTO_MODE_SUBNET_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen können keine Netzwerke im automatischen Modus sein. Weitere Informationen finden Sie unter Modus für Subnetzerstellung.
VPC-Netzwerk-Peering allowVpcPeering VPC_PEERING_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Verbindung zu anderen VPC-Netzwerken über VPC-Netzwerk-Peering. Daher unterstützen RoCE-VPC-Netzwerke für Bare-Metal-Instanzen keine Verbindung zu Diensten über den Zugriff auf private Dienste.
Statische Routen allowStaticRoutes STATIC_ROUTES_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine statischen Routen.
VPC-Firewallregeln allowVpcFirewallRules VPC_FIREWALL_RULES_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine VPC-Firewallregeln.
Firewallrichtlinien allowFirewallPolicy FIREWALL_POLICY_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Firewallrichtlinien.
Paketspiegelung allowPacketMirroring PACKET_MIRRORING_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Paketspiegelung.
Cloud NAT allowCloudNat CLOUD_NAT_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen Cloud NAT nicht.
Cloud Router allowCloudRouter CLOUD_ROUTER_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Cloud Router und dynamischen Routen.
Cloud Interconnect allowInterconnect INTERCONNECT_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Cloud Interconnect-VLAN-Anhänge.
Cloud VPN allowVpn VPN_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine Cloud VPN-Tunnel.
Network Connectivity Center allowNcc NCC_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen NCC nicht. Sie können ein RoCE-VPC-Netzwerk nicht als VPC-Spoke zu einem NCC-Hub hinzufügen.
Cloud Load Balancing allowLoadBalancing LOAD_BALANCING_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen kein Cloud Load Balancing. Daher unterstützen RoCE-VPC-Netzwerke für Bare-Metal-Instanzen keine Load-Balancer-Funktionen, einschließlich Google Cloud Armor.
Privater Google-Zugriff allowPrivateGoogleAccess PRIVATE_GOOGLE_ACCESS_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keinen privaten Google-Zugriff.
Private Service Connect allowPsc PSC_BLOCKED RoCE-VPC-Netzwerke für Bare-Metal-Instanzen unterstützen keine veröffentlichten Dienste, Endpunkte oder Backends von Private Service Connect.

Überlegungen zu mehreren NICs für RoCE-VPC-Netzwerke

Zur Unterstützung von Arbeitslasten, die von der GPU-zu-GPU-Kommunikation über mehrere Rails profitieren, unterstützen RoCE-VPC-Netzwerke Instanzen mit mehreren MRDMA-NICs im Netzwerk. Wenn Sie zwei oder mehr MRDMA-NICs im selben RoCE-VPC-Netzwerk platzieren, kann dies die Netzwerkleistung beeinträchtigen und die Latenz erhöhen. MRDMA NICs verwenden NCCL. NCCL versucht, alle Netzwerkübertragungen auszurichten, auch für die Kommunikation zwischen den Rails. Beispielsweise wird PXN verwendet, um Daten über NVlink auf eine Rail-GPU zu kopieren, bevor sie über das Netzwerk übertragen werden.

Limit für die Anzahl der Verbindungen für RoCE-VPC-Netzwerke

Für ein bestimmtes RoCE-VPC-Netzwerk gilt das folgende Systemlimit:

Element Limit Hinweise
Maximale Anzahl von Verbindungen 20.000

Die maximale Anzahl von Verbindungen über MRDMA vNICs pro 2-Tupel (Quell-IP-Adresse, Ziel-IP-Adresse).

Eine Verbindung wird hergestellt, wenn eine Quell-IP-Adresse und eine Ziel-IP-Adresse zum ersten Mal kommunizieren. Bei einem bestimmten 2‑Tupel teilen sich mehrere Empfangs- und Übertragungswarteschlangenpaare die Verbindung.

Angenommen, instance-a und instance-b haben jeweils 8 MRDMA-vNICs mit jeweils 2 routingfähigen IP-Adressen:

  • Die anfängliche Anzahl der Verbindungen ist 0.
  • Wenn die erste IP-Adresse auf der ersten vNIC von instance-a mit der ersten IP-Adresse auf der ersten vNIC von instance-b kommuniziert, beträgt die Anzahl der Verbindungen 1.
  • Wenn instance-a ein weiteres Warteschlangenpaar zu instance-b mit denselben IP-Adressen auf denselben vNICs öffnet, bleibt die Anzahl der Verbindungen bei 1.
  • Wenn instance-a einen Rail-ausgerichteten All-to-All-Kommunikator startet, der alle 8 vNICs einbezieht, beträgt die Anzahl der Verbindungen 8.

Wenn die Anzahl der Verbindungen das Limit von 20.000 überschreitet, können bei neuen Verbindungen Fehler auftreten. Bestehende Verbindungen sind davon jedoch nicht betroffen.

Nächste Schritte