In vielen Fabriken ist das OT-Netz über die Jahre durch ständige Ergänzungen in einem einzigen VLAN und Subnetz gewachsen: SPS, HMI, SCADA-Server, Engineering-Stationen, Kameras, manchmal sogar Bürodrucker liegen in derselben Broadcast-Domäne. Dass es geteilt werden muss, weiß jeder. Die eigentliche Frage ist, wie das in geplanten Fenstern und mit begrenzter Wirkung auf die Produktion gelingt. Im Folgenden beschreiben wir, wie ein flaches OT-Netz mit einem Plan segmentiert wird, der auf Verkehrsmessung beruht, Zelle für Zelle vorgeht und jeden Schritt rücknehmbar hält.
Risiken des flachen Netzes und Ziel der Migration
Das Problem des flachen Netzes ist nicht nur die Sicherheit. Die Risiken lassen sich in drei Punkten zusammenfassen:
- Ausbreitung: Schadsoftware auf einer Engineering-Station erreicht jede SPS und jeden Server im Netz direkt. Dazwischen gibt es keinen Punkt zum Filtern.
- Störungswirkung: Ein Broadcast-Sturm, eine Schleife oder der Verkehr eines defekten Geräts trifft alle Linien gleichzeitig. Bis der Ort der Störung gefunden ist, ist das ganze Werk betroffen. Vor Ort sehen wir das meist so: Ein Instandhalter steckt an einem Feld-Switch ein Kabel, dessen beide Enden zum selben Switch führen, und innerhalb weniger Sekunden gehen alle HMI in Kommunikationsalarm.
- Unsichtbarkeit: Wer mit wem spricht, ist unbekannt; ein neu hinzugefügtes Gerät oder eine unerwartete Verbindung fällt kaum auf.
Das Ziel ist nicht, „alles zu trennen“. Das Ziel ist, nach gemessenem Kommunikationsbedarf Zonen zu bilden und die Flüsse zwischen Zonen auf das Nötige zu beschränken. Zum Rahmen von Zonen und Conduits siehe den Beitrag Der Zonen- und Conduit-Ansatz in IEC 62443. Thema ist hier nicht die IT–OT-Trennung, sondern die Aufteilung des OT-Netzes in sich.
Verkehrs-Baseline und Kommunikationsmatrix erstellen
Die Segmentierungsentscheidung wird nicht nach Annahmen, sondern nach Messung getroffen. Der erste Schritt ist die passive Verkehrsaufzeichnung. Die dafür nötige Port-Mirroring-Konfiguration oder TAP-Installation wird gesondert geplant. Per SPAN (Port-Mirroring) am Core- oder Verteil-Switch oder mit einem in die Leitung gesetzten TAP wird der Verkehr kopiert und an ein Erfassungsgerät gesendet. Beispiel für VLAN-basiertes SPAN an einem Switch auf Cisco-IOS-Basis:
monitor session 1 source vlan 10
monitor session 1 destination interface GigabitEthernet1/0/24
show monitor session 1
SPAN nutzt Switch-Ressourcen und kann bei starkem Verkehr Pakete verwerfen; bei verkehrsreichen Verbindungen ist ein TAP verlässlicher. Achten Sie auch auf die Geschwindigkeit des Zielports: Übersteigt der Gesamtverkehr des Quell-VLAN den Zielport, ist die Aufzeichnung unvollständig, und niemand bemerkt die Lücke. Nach der Aufzeichnung werden Gesprächslisten erstellt. Mit tshark, dem Kommandozeilenwerkzeug von Wireshark:
tshark -r ot-linie3.pcapng -q -z conv,ip
tshark -r ot-linie3.pcapng -q -z conv,eth
tshark -r ot-linie3.pcapng -q -z io,phs
Der erste Befehl liefert Gespräche auf IP-Ebene, der zweite auf Schicht 2, der dritte die Protokollhierarchie. Überspringen Sie die Schicht-2-Übersicht nicht. Verkehr ohne IP wie PROFINET RT erscheint in der IP-Übersicht nicht. Für einen umfassenderen Ansatz lassen sich Werkzeuge zur passiven Asset-Erkennung nutzen; Methode und Grenzen beschreibt der Leitfaden Passive Asset-Erkennung in OT-Netzen.
Jede Zeile der aus den Rohdaten erstellten Kommunikationsmatrix enthält Quelle, Ziel, Protokoll/Port, Richtung und Zweck. Die meiste Arbeit steckt in der Spalte Zweck: Für jeden Fluss wird die Frage „wofür ist das, wer ist verantwortlich“ gemeinsam mit Produktions- und Instandhaltungsteam beantwortet. Flüsse mit unbekanntem Zweck werden gesondert markiert. Sie sind entweder eine vergessene Abhängigkeit oder eine Verbindung, die entfernt werden muss. Ohne diese Unterscheidung wird keine Regel geschrieben.
Festlegung der Ziel-Segmentstruktur
Liegt die Matrix vor, werden die Zonengrenzen gezogen. Regeln, die sich vor Ort bewähren:
- Die Zelle ist die Grenze der Schicht-2-Abhängigkeit: PROFINET-IO-Verkehr arbeitet auf Schicht 2; IO-Controller und IO-Devices bleiben im selben Segment. Nutzt EtherNet/IP-Implicit-(I/O-)Messaging Multicast, müssen Producer- und Consumer-Geräte womöglich im selben Subnetz liegen; der Standard-TTL-Wert für Multicast erlaubt meist kein Routing.
- Gemeinsame Dienste in eigener Zone: SCADA-Server, Historian, OT-Domänencontroller und Patchserver werden in einer Zone „OT-Server“ zusammengefasst.
- Engineering-Stationen in eigener Zone: Systeme mit Schreibrecht auf die SPS werden von den Bediener-HMI getrennt gehalten.
- Nicht-OT-Geräte hinaus: Kameras, Drucker, Gebäudeautomation und Bürogeräte werden in eigene Segmente verlegt. Oft ist das der einfachste und risikoärmste erste Schritt.
Die Zielstruktur enthält schriftlich: je Zone ein VLAN/Subnetz, eine filternde Grenze zwischen den Zonen (ACL auf einem Layer-3-Switch oder industrielle Firewall) und eine aus der Kommunikationsmatrix abgeleitete Regelliste. Soll an der Zellgrenze eine Firewall stehen, wird die Wahl des Betriebsmodus im Beitrag Firewall auf Zellenebene: transparenter oder gerouteter Modus ausführlich behandelt. Für die Trennung von Multicast-Verkehr in Zellen mit EtherNet/IP hilft auch der Beitrag IGMP Snooping in EtherNet/IP-Netzen.
Regeln im Überwachungsmodus anwenden
Regeln werden nicht vom ersten Tag an im Blockiermodus in Betrieb genommen. Zuerst wird das Grenzgerät platziert und mit einer einzigen allgemeinen Regel betrieben, die allen Verkehr durchlässt, aber jeden Fluss protokolliert. Danach werden die aus der Matrix abgeleiteten Erlaubnisregeln über dieser allgemeinen Regel ergänzt; jede wird protokolliert. Nach einiger Zeit werden die Flüsse geprüft, die noch auf die allgemeine Regel fallen. Das sind die in der Matrix fehlenden Flüsse.
Diese Phase endet, wenn keine Flüsse mehr auf die allgemeine Regel fallen oder für jeden verbleibenden Fluss bewusst entschieden wurde, ihn abzulehnen. Erst dann wird die unterste allgemeine Regel von „erlauben und protokollieren“ auf „ablehnen und protokollieren“ umgestellt. Auch diese Umstellung ist eine Änderung und erfolgt in einem Fenster. Ein häufiger Fehler ist, diesen letzten Schritt nie zu gehen: Die Firewall bleibt jahrelang im Überwachungsmodus, auf dem Papier gibt es Segmentierung, in der Praxis nicht.
Wellenplan: Umzug Zelle für Zelle
Die Migration wird in voneinander unabhängige Wellen geteilt. Jede Welle ist so groß, dass sie in einem einzigen Änderungsfenster abgeschlossen werden kann. Beispielplan:
| Welle | Umfang | Fenster | Risiko |
|---|---|---|---|
| 0 | Verwaltungsnetz und Überwachungsinfrastruktur | Während der Produktion | Niedrig |
| 1 | Auslagerung von Kameras, Druckern, Gebäudeautomation | Während der Produktion | Niedrig |
| 2 | OT-Server-Zone und Engineering-Zone | Wochenende | Mittel |
| 3 | Pilotzelle (am wenigsten kritische Linie) | Geplanter Stillstand | Mittel |
| 4..n | Übrige Zellen, je Fenster eine oder zwei | Geplanter Stillstand | Hoch |
| Letzte | Umstellung der allgemeinen Regel auf Ablehnen | Wochenende | Mittel |
Unterschätzen Sie Welle 0 nicht. Gibt es keinen vom Produktionsverkehr unabhängigen Verwaltungsweg zu den Netzgeräten, schneidet in der nächsten Welle eine falsche VLAN-Änderung den Zugriff auf das Gerät ab, und jemand muss mit der Leiter zum Feldschaltschrank. Zum Design dieses Weges siehe den Beitrag OT-Verwaltungsnetz und Out-of-Band-Zugriff. Jede Welle ist zudem selbst ein Änderungsfenster; Planvorlage und Go/No-Go-Ansatz stützen sich auf die Methode aus dem Beitrag Engineering von Änderungsfenstern in der OT.
Verifizierung und Rückfall für jede Welle
Zu Beginn jeder Welle werden Switch-Konfigurationen, Adressdefinitionen in SPS/HMI-Projekten und das Firewall-Regelwerk gesichert. Der Umzug erfolgt in dieser Reihenfolge: Vorbereitung von neuem VLAN und Subnetz am Grenzgerät, Ergänzen der Regeln im Überwachungsmodus, Umstellen der Zellenports auf das neue VLAN, bei Bedarf Ändern von Geräteadressen und Gateways, Funktionstest. Häufig übersehen: das Gateway. Die IP-Adresse der SPS ändert sich, das Gateway im Projekt bleibt alt, die zelleninterne Kommunikation funktioniert, die zellenübergreifende nicht.
Verifiziert wird, indem gezeigt wird, dass der Prozess läuft, nicht das Netz. Ping reicht nicht.
- Keine Verbindungsfehler zwischen SPS und IO-Devices; keine neuen Fehlereinträge im Diagnosepuffer.
- HMI und SCADA lesen alle Tags mit aktuellem Wert; kein Kommunikationsalarm.
- Keine Lücken in den Daten der Zelle im Historian.
- Von der Engineering-Station lässt sich eine Online-Verbindung zur SPS aufbauen.
- Nötiger Datenaustausch zwischen Zellen (Verriegelung, Signalaustausch) funktioniert.
- Am Grenzgerät fallen keine unerwarteten Flüsse der Welle auf die allgemeine Regel.
Rückfallkriterium und -methode werden vorab festgeschrieben: Ports zurück ins alte VLAN, Geräteadressen auf alte Werte, alte Konfiguration wiederherstellen. Die Rückfalldauer muss gemessen sein und ins Fenster passen.
Checkliste für die Umstellung
- Die Verkehrsaufzeichnung deckt alle üblichen Betriebszyklen ab; Gespräche auf Schicht 2 und Schicht 3 wurden getrennt erfasst.
- Zweck und Verantwortliche jedes Flusses in der Kommunikationsmatrix sind bekannt; über solche mit unbekanntem Zweck wurde entschieden.
- Zonengrenzen teilen keine Schicht-2-Abhängigkeiten.
- Das Verwaltungsnetz steht vor den Segmentierungswellen bereit.
- Für jede Welle sind Sicherung, Umsetzungsschritte, Verifizierungsliste und Rückfallkriterium schriftlich festgehalten.
- Regeln zuerst im Überwachungsmodus; der Wechsel auf Ablehnen ist als eigene Änderung geplant.
- Aktueller Netzplan, VLAN/Subnetz-Tabelle und Regelliste werden nach jeder Welle aktualisiert.
Mit dem Abschluss der Segmentierung ist die Arbeit nicht vorbei. Die Überwachung der Flüsse zwischen Zonen und das Erkennen neuer Geräte und Regelabweichungen brauchen Kontinuität. Um die Verkehrs-Baseline Ihres vorhandenen Netzes zu erfassen und den Migrationsplan gemeinsam aufzustellen, sehen Sie sich die Seiten OT-Infrastruktur-Bestandsaufnahme in der Fabrik, Industrielle Netzüberwachung und Störungsanalyse und OT-Cybersicherheit und Segmentierung an. Alle Statistikoptionen von Wireshark stehen in der Wireshark-Dokumentation.
Häufig gestellte Fragen
Wie lange muss für die Verkehrs-Baseline aufgezeichnet werden?
Es gibt keine feste Dauer; die Aufzeichnung muss alle üblichen Betriebszyklen der Anlage abdecken. Das bedeutet mindestens einen vollständigen Schichtzyklus, einen Rezeptur- oder Produktwechsel, wöchentliche Sicherungs- und Reportingjobs und möglichst eine Wartungsarbeit. Bei kurzen Aufzeichnungen fallen selten laufende, aber nötige Flüsse wie der Monatsabschlussbericht oder eine Lizenzprüfung aus der Matrix.
Muss für die Segmentierung die IP-Adresse aller Geräte geändert werden?
Nicht immer. Eine Zelle in ein neues VLAN und Subnetz zu verlegen, erfordert meist eine IP-Änderung. Sind in SPS- und HMI-Projekten viele feste Adressen definiert, lässt sich in der ersten Phase mit einer Firewall im transparenten Modus vor der Zelle eine Grenze ohne IP-Änderung schaffen. Die Neuadressierung erfolgt später, zusammen mit einer geplanten Modernisierung.
Können PROFINET-Geräte auf verschiedene VLANs verteilt werden?
PROFINET-IO-Echtzeitverkehr arbeitet auf Schicht 2; IO-Controller und die angeschlossenen IO-Devices müssen in derselben Broadcast-Domäne bleiben. Deshalb wird an Zellgrenzen geteilt, die eine SPS samt ihren I/O-Geräten umfassen. Ist Datenaustausch zwischen Zellen nötig, wird er über routbare Kommunikation oder Geräte mit Gateway-Funktion entworfen.
Muss bei einem Problem in einer Welle das ganze Projekt zurückgenommen werden?
Nein. Werden die Wellen unabhängig voneinander geplant, betrifft der Rückfall nur die problematische Welle. Jede Welle hat eigene Rückfallschritte, eine Sicherung der alten VLAN- und Portkonfiguration und ein vorab festgeschriebenes Entscheidungskriterium. Abgeschlossene Wellen bleiben bestehen.