Verwaltungsnetz und Out-of-Band-Zugriff für OT-Netzgeräte entwerfen

Design des OT-Verwaltungsnetzes: Verwaltungs-VLAN und VRF, Out-of-Band-Netz, Konsolenserver, Härtung von SSH und SNMPv3, Standort der Verwaltungsstation und ein Beispiel unter Cisco IOS XE.
Technische Zusammenfassung
Technologie
Verwaltungs-VLAN, VRF, Out-of-Band, Konsolenserver, SSHv2, SNMPv3, TACACS+/RADIUS, Cisco IOS XE
Thema
Trennung der Verwaltungsebene von OT-Netzgeräten vom Produktionsverkehr
Niveau
Mittel bis fortgeschritten
Voraussetzungen
  • Kenntnisse zu VLAN und Layer-3-Routing
  • Erfahrung mit CLI-Verwaltung von Switches und Firewalls
In diesem Beitrag7 Abschnitte

Im Ring ist eine Schleife entstanden, ein Broadcast-Sturm hat begonnen, und Sie wollen sich per SSH mit dem Switch verbinden. Es gelingt nicht, weil Ihr Verwaltungsverkehr genau durch das Netz läuft, das die Störung ist. Switches, Firewalls, Router und Protokoll-Gateways im OT-Netz tragen zwei Arten von Verkehr: Produktionsverkehr und den Verkehr, mit dem die Geräte selbst verwaltet werden. In den meisten Anlagen fließen beide im selben Netz, sogar im selben VLAN. Im Folgenden beschreiben wir, wie die Verwaltungsebene der OT-Netzgeräte von der Produktion getrennt wird: Verwaltungs-VLAN und VRF, Out-of-Band-Netz und Konsolenserver, Härtung der Verwaltungsprotokolle und der Standort der Verwaltungsstation. Die Segmentierung des Produktionsverkehrs behandeln andere Beiträge; hier geht es nur um den Verwaltungszugriff.

Warum die Verwaltungsebene getrennt werden muss

Es gibt drei konkrete Gründe.

Angriffsfläche: Kann jedes Gerät im Produktions-VLAN den SSH-, Web- oder SNMP-Dienst eines Switches erreichen, kann ein kompromittiertes HMI oder eine Engineering-Station die Netzgeräte angreifen. Wer ein Netzgerät übernimmt, kann Verkehr umleiten, per Port-Mirroring mithören oder die Ringstruktur stören. Ein Gerät, die ganze Linie.

Zugriff im Störungsfall: Gibt es im Produktionsnetz eine Schleife, einen Broadcast-Sturm oder eine fehlerhafte VLAN-Änderung, ist das Gerät über dasselbe Netz womöglich nicht erreichbar. Der Zugriff, der die Störung beheben soll, darf von ihr nicht betroffen sein.

Änderungssicherheit: Werden in Segmentierungsprojekten VLAN- und Adressänderungen vorgenommen, muss die Verwaltungsverbindung außerhalb der geänderten Struktur bleiben. Sonst schneidet ein falscher Befehl den Zugriff ab, und die Arbeit endet mit einem Gang vor Ort. Das häufige Szenario: Das Verwaltungs-VLAN wird versehentlich vom Trunk entfernt, die Sitzung friert ein, das Gerät steckt in einem entfernten Schaltschrank. Deshalb ist das Verwaltungsnetz im Plan zur Segmentierung eines flachen OT-Netzes die erste Welle.

Ansatz mit In-Band-Verwaltungs-VLAN und VRF

Der verbreitetste erste Schritt ist, die Verwaltungsschnittstellen aller Netzgeräte in ein eigenes Verwaltungs-VLAN zu legen. An Access-Switches wird die Verwaltungs-IP nur an der Schnittstelle dieses VLAN definiert; in Produktions-VLANs hat der Switch keine IP-Adresse. Weil das Verwaltungs-VLAN über Trunks transportiert wird, nutzt es physisch dieselben Verbindungen; deshalb heißt es „In-Band“.

Auf einem Layer-3-Switch oder Router liegt die Schnittstelle des Verwaltungs-VLAN dagegen standardmäßig in derselben Routingtabelle wie die Produktions-VLANs. Ohne ACL ist das Verwaltungsnetz aus Produktions-VLANs per Routing erreichbar. Ein eigenes VLAN ist kein eigenes Netz. VRF (Virtual Routing and Forwarding) löst das, indem für die Verwaltung eine eigene Routingtabelle angelegt wird: Zwischen Schnittstellen in der Verwaltungs-VRF und Produktionsschnittstellen gibt es keinen Weg, solange kein Route Leaking ausdrücklich definiert ist.

Nicht jedes Gerät unterstützt VRF. Viele industrielle Layer-2-Switches bieten nur eine Verwaltungsschnittstelle und ein Standard-Gateway; bei diesen Geräten wird die Trennung über das Verwaltungs-VLAN und VRF oder ACL am routenden Layer-3-Gerät erreicht. Manche Geräte haben einen physisch eigenen Verwaltungsport; dieser arbeitet meist mit eigener Routingtabelle und eignet sich zum Anschluss ans Out-of-Band-Netz.

Out-of-Band-Netz und Konsolenserver

Bei der Out-of-Band-Verwaltung (OOB) nutzt der Verwaltungsverkehr keine Verbindung und kein Gerät des Produktionsnetzes. Sie hat zwei Komponenten:

  • Eigenes Verwaltungsnetz: Die eigenen Verwaltungsports der Geräte werden über nur dafür aufgebaute Switches mit den Verwaltungsstationen verbunden. Dieses Netz wird an keiner Stelle mit dem Produktionsnetz überbrückt.
  • Konsolenserver: Die seriellen Konsolenports kritischer Geräte werden an einen Konsolenserver angeschlossen. Selbst wenn die IP-Konfiguration des Geräts völlig zerstört ist, ein Software-Update abbricht oder das Gerät beim Booten hängt, ist es über die Konsole erreichbar. Eine offene Konsolensitzung während eines Firmware-Updates ist eine Möglichkeit, ohne Gang vor Ort zu sehen, warum das Gerät nicht hochfährt.

OOB hat ihren Preis: zusätzliche Kabel, Switches, Konsolenserver und deren Wartung. Deshalb wird sie stufenweise umgesetzt. Core-Switches, IT/OT-Grenz-Firewalls, Zellen-Firewalls und Switches in der Rolle des Ring-Managers kommen in die OOB; die vielen Access-Switches in den Zellen werden über das In-Band-Verwaltungs-VLAN verwaltet.

An entfernten Standorten ist ein Ersatzzugang zum Konsolenserver per Mobilfunkmodem eine verbreitete Wahl. Das fügt der OT einen neuen externen Verbindungspunkt hinzu; er bleibt standardmäßig geschlossen, verbindet sich per VPN oder privatem APN nur mit dem Verwaltungspunkt der Organisation, und seine Nutzung wird protokolliert.

Härtung der Verwaltungsprotokolle

Auch bei getrenntem Verwaltungsnetz werden die Verwaltungsdienste auf dem Gerät gesondert gehärtet. Ein eigenes Netz schaltet offenes Telnet nicht ab.

  • SSH: Nur SSH Version 2; Telnet abgeschaltet. Der Zugriff wird mit einer ACL geschützt, die auf das Verwaltungssubnetz beschränkt ist.
  • Weboberfläche: Wird sie nicht genutzt, wird sie abgeschaltet; wird sie genutzt, nur HTTPS und nur aus dem Verwaltungssubnetz.
  • SNMP: Community-Strings von SNMPv1/v2c werden entfernt; es wird SNMPv3 authPriv genutzt. Das benutzerbasierte Sicherheitsmodell von SNMPv3 ist in RFC 3414 definiert. Schreibrechte werden nur bei Bedarf vergeben. Vor Ort begegnen noch industrielle Switches mit Community-Strings aus der Werkseinstellung; bei einem Inventarscan ist das eine der ersten Prüfstellen.
  • Authentifizierung: Zentrale Authentifizierung per TACACS+ oder RADIUS; ein einziges lokales Notfallkonto, falls der Server nicht erreichbar ist.
  • Ungenutzte Dienste: Es wird geprüft, ob CDP/LLDP an Produktionsports nötig ist. Da die PROFINET-Topologiediagnose auf LLDP beruht, beeinträchtigt das Abschalten von LLDP in PROFINET-Netzen die Diagnosefähigkeit.
  • Zeit und Logs: NTP- und Syslog-Ziele im Verwaltungsnetz; die Zeitstempel der Logeinträge sind konsistent.

Zu Details der SNMPv3-Konfiguration kann der Leitfaden zur SNMPv3-Konfiguration genutzt werden.

Standort von Verwaltungsstation und Werkzeugen

Das Verwaltungsnetz ist so sicher wie die Station, die darauf zugreift. Stationen und Werkzeuge zur Verwaltung der Netzgeräte werden nach diesen Grundsätzen platziert:

  1. In der OT, in eigener Zone: Die Verwaltungsstation steht in der OT in einer Zone, die nur auf das Verwaltungsnetz Zugriff hat. Von Unternehmens-Laptops aus wird nicht direkt verwaltet.
  2. Fernzugriff über die DMZ: Ist Fernverwaltung nötig, erfolgt der Zugriff durch Anmeldung an der Verwaltungsstation über den Jump-Host in der DMZ. Diese Platzierung beruht auf den Grundsätzen aus dem Beitrag OT-DMZ-Design.
  3. Überwachungs- und Sicherungswerkzeuge: SNMP-Überwachungsserver, Syslog-Sammler und Konfigurationssicherungswerkzeug stehen ebenfalls im Verwaltungsnetz oder in der OT-Server-Zone, die es nur über die nötigen Ports erreicht.
  4. Mobile Rechner: Instandhaltungsrechner, die vor Ort per Konsolenkabel angeschlossen werden, sollten OT-eigene Geräte sein, die nicht ans Unternehmensnetz kommen. Ein Laptop, der unter der Woche im Büro E-Mails liest und am Wochenende per Konsole am Core-Switch hängt, ist eine Brücke, die zwischen zwei Netzen getragen wird.

Bei der Auswahl industrieller Switches werden Verwaltungsfunktionen (eigener Verwaltungsport, VRF, SNMPv3, TACACS+/RADIUS-Unterstützung, Konsolenport) vorab geprüft; zu den Auswahlkriterien siehe den Beitrag Auswahl industrieller Switches.

Vergleichstabelle und Konfigurationsbeispiel

Kriterium Flach (ohne Trennung) In-Band VLAN/VRF Out-of-Band
Zugriff aus der Produktion Aktiviert Per ACL/VRF gesperrt Physisch nicht vorhanden
Zugriff im Störungsfall Von der Störung betroffen Teilweise betroffen Nicht betroffen
Zusätzliche Hardware Keine Keine oder gering Switch, Konsolenserver
Geeignet für Nicht empfohlen Access-Switches Core, Firewall, Ring-Manager

Das folgende Beispiel zeigt Verwaltungs-VRF, SSH-Beschränkung und SNMPv3-Konfiguration auf einem Layer-3-Switch auf Basis von Cisco IOS XE. Adressen und Namen sind Beispiele; Befehle können je nach Plattform und Softwareversion abweichen.

hostname OT-CORE-1
ip domain name otnet.beispiel.de
!
vrf definition MGMT
 address-family ipv4
 exit-address-family
!
interface Vlan900
 description OT-VERWALTUNG
 vrf forwarding MGMT
 ip address 10.90.0.11 255.255.255.0
!
ip route vrf MGMT 0.0.0.0 0.0.0.0 10.90.0.1
!
crypto key generate rsa modulus 2048
ip ssh version 2
ip access-list standard VERWALTUNGSSTATIONEN
 permit 10.90.10.0 0.0.0.255
!
line vty 0 15
 access-class VERWALTUNGSSTATIONEN in vrf-also
 transport input ssh
 login local
!
no ip http server
ip http secure-server
!
snmp-server group OTMON v3 priv
snmp-server user nms01 OTMON v3 auth sha <auth-passwort> priv aes 128 <priv-passwort>
snmp-server host 10.90.10.20 vrf MGMT version 3 priv nms01
logging host 10.90.10.30 vrf MGMT
ntp server vrf MGMT 10.90.10.5

Nach der Konfiguration folgen drei Tests: Funktioniert der SSH-Zugriff von der Verwaltungsstation, wird ein SSH-Versuch von einem Gerät im Produktions-VLAN abgelehnt, kann der SNMP-Überwachungsserver das Gerät per SNMPv3 abfragen? Nur den ersten Test zu machen und aufzuhören, ist ein häufiges Versäumnis; der eigentliche Nachweis ist der abgelehnte Versuch. In der Ausgabe von show ip route vrf MGMT wird geprüft, dass nur Verwaltungsnetze enthalten sind. Statt der Zeile login local im Beispiel sollte in der Produktion eine AAA-Konfiguration auf Basis von TACACS+ oder RADIUS genutzt werden.

Für die kontinuierliche Überwachung des Verwaltungsnetzes und das Erkennen von Abweichungen an Netzgeräten sehen Sie sich die Seite Industrielle Netzüberwachung und Störungsanalyse an, um die Verwaltungsebene zusammen mit dem Segmentierungsdesign zu behandeln, OT-Cybersicherheit und Segmentierung.

Häufig gestellte Fragen

Ist Out-of-Band-Verwaltung in einem kleinen OT-Netz nötig?

Nicht für jedes Gerät. In kleinen Netzen decken ein eigenes Verwaltungs-VLAN und Regeln, die den Verwaltungszugriff auf bestimmte Stationen beschränken, die meisten Bedarfe ab. Out-of-Band-Zugriff wird mindestens für Geräte erwogen, die bei Zugriffsverlust nicht ohne Gang vor Ort wiederhergestellt werden können, wie Core-Switches, Grenz-Firewalls und Ring-Manager.

Was ist der Unterschied zwischen Verwaltungs-VLAN und VRF?

Das Verwaltungs-VLAN legt die Verwaltungsschnittstellen auf Schicht 2 in eine eigene Broadcast-Domäne; auf einem Layer-3-Switch teilt die Schnittstelle dieses VLAN aber dieselbe Routingtabelle mit den anderen VLANs. VRF legt für die Verwaltung eine eigene Routingtabelle an; ohne ausdrückliche Definition ist das Verwaltungsnetz aus Produktions-VLANs per Routing nicht erreichbar. VRF-Unterstützung hängt von Gerätemodell und Softwarelizenz ab.

Ist der Zugriff auf den Konsolenserver per Mobilfunkmodem sicher?

Richtig entworfen ist er akzeptabel, er fügt der OT aber eine neue externe Verbindung hinzu. Das Modem darf keine im öffentlichen Internet offene Verwaltungsoberfläche anbieten; es sollte per privatem APN oder VPN nur mit dem Verwaltungspunkt der Organisation verbunden sein, standardmäßig ausgeschaltet bleiben und seine Nutzung protokollieren. Diese Verbindung wird als eigener Conduit in die OT-Sicherheitsrisikobewertung aufgenommen.

Warum SNMPv3 statt SNMPv2c nutzen?

SNMPv2c sendet den Community-String im Klartext, und die Authentifizierung beruht nur auf diesem Namen. Wer das Netz mithört, kann den Community-String erfahren; wird ein Community-String mit Schreibrecht erbeutet, lässt sich die Gerätekonfiguration ändern. SNMPv3 im Modus authPriv bietet benutzerbasierte Authentifizierung und Verschlüsselung.

Support

Kontaktieren Sie uns für Support oder eine Bestandsaufnahme zu diesem Thema.

Kontaktformular
[email protected]

Eretek Industrie

SPS-, PROFINET/PROFIBUS- und SCADA-Kommunikation, IT/OT-Netzwerksegmentierung und industrielle Feldanbindungen. Wir installieren und überwachen, ohne die Produktionslinie anzuhalten.

Wissenszentrum

Weitere Beiträge