Mehrfachstreams bei Kameras: Haupt-, Sub- und Aufzeichnungsstreamprofile

Streamprofile von Kameras: Aufteilung von Haupt-, Sub- und drittem Stream auf Aufzeichnung, Live-Ansicht, Mobilzugriff und Analyse, ONVIF-Profil-Token und häufige Fehler aus der Praxis.
Technische Zusammenfassung
Technologie
ONVIF Profile S/T, Media2, RTSP, H.264, H.265, adaptives Streaming, ffprobe
Thema
Aufgabenverteilung der Kamerastreams auf Aufzeichnung, Ansicht und Analyse
Niveau
Mittel
Voraussetzungen
  • Weboberfläche der IP-Kamera und VMS-Administration
  • Grundbegriffe zu Codec und Bitrate
In diesem Beitrag8 Abschnitte

Die Bedienerarbeitsstation ruckelt im 16er-Raster, in der mobilen App kommt kein Bild an, die GPU des Analyseservers läuft am Anschlag. Diese drei Beschwerden haben oft dieselbe Wurzel: Die Streams der Kamera sind nicht nach Aufgaben getrennt. Eine IP-Kamera kann gleichzeitig mehrere Streams erzeugen: einen Hauptstream in voller Auflösung für die Aufzeichnung, einen Substream niedriger Auflösung für das Live-Raster und bei den meisten Modellen einen dritten Stream für Mobilzugriff oder Analyse. Im Folgenden beschreiben wir die Streamarten, Startwerte je Stream, die clientabhängige Streamauswahl des VMS und die Grenzen der Verarbeitungskapazität der Kamera. Bitrate- und GOP-Einstellung innerhalb eines Streams sind Thema des Beitrags Bitrate-Einstellung mit CBR, VBR und Smart Codec.

Warum Mehrfachstreams nötig sind

In einem System mit nur einem Stream läuft alles über den Hauptstream. In einem Raster mit 16 Kameras muss der Client 16 Streams mit 4 MP decodieren, auf Mobilverbindungen ruckelt das Bild, der Analyseserver verarbeitet unnötig große Frames. Beispielrechnung: Einen 4-MP-Stream mit 20 fps zu decodieren, heißt pro Frame 16-mal mehr Pixel zu verarbeiten als bei einem 640×360-Stream (2560×1440 ÷ 640×360). Belegt jede Kachel im Raster ohnehin etwa 640×360 auf dem Bildschirm, fügt diese Mehrarbeit dem Bild nichts hinzu. Sie verbrennt nur Rechenleistung.

Bei Mehrfachstreams erhält jeder Verbraucher so viele Daten, wie er braucht:

  • Aufzeichnung: Höchste Auflösung und Bildrate, die für den Beweiswert nötig sind.
  • Live-Raster: Kleiner Stream passend zur Kachelgröße, damit die Arbeitsstation viele Kameras gleichzeitig decodieren kann.
  • Einzelkamera im Vollbild: Hauptstream oder ein Stream nahe daran.
  • Mobil- und Fernzugriff: Stream mit niedriger Bitrate, robust bei begrenzter Bandbreite.
  • Analyse: Stream gewählt nach Eingabegröße des Modells und benötigter Pixeldichte des Ziels.

Streamarten und ONVIF-Profile

In der Kameraoberfläche heißen die Streams meist „Hauptstream“, „Substream“ und „dritter Stream“. Auf ONVIF-Seite entspricht jeder Stream einem Medienprofil, und jedes Profil hat ein Token. Verbindet sich das VMS per ONVIF mit der Kamera, liest es mit dem Aufruf GetProfiles die Profile und die zugehörigen Videoencoder-Konfigurationen und holt dann mit GetStreamUri die RTSP-Adresse des gewählten Profils. Bei Profile-S-Kameras wird der Media-Dienst, bei Profile-T-Kameras der Media2-Dienst genutzt; Media2 definiert auch die H.265-Unterstützung. Die Unterschiede zwischen den Profilen beschreiben der Beitrag Unterschiede zwischen ONVIF Profile T, G und M und die ONVIF-Profilseite.

Ein häufiges Problem ist ein Zuordnungsfehler. Profil-Token werden von Hersteller zu Hersteller unterschiedlich benannt, und bei manchen Kameras entsprechen die ONVIF-Profile nicht eins zu eins den Streams der Weboberfläche. Ergebnis: Das VMS hat für die Aufzeichnung den Substream übernommen, und niemand hat es bemerkt, bis Bilder eines Ereignisses angefordert werden. Prüfen Sie nach dem Hinzufügen der Kamera im VMS, welches Profil welcher Aufgabe zugewiesen ist. Verlassen Sie sich nicht auf die automatische Zuordnung.

Einstellungstabelle je Stream

Die folgenden Werte sind ein Ausgangspunkt für allgemeine Unternehmenskameras. Die genauen Werte bestimmen Szene, Ziel-Pixeldichte und das Streamauswahlverhalten des VMS.

Stream Auflösung Bildrate Verwendung
Haupt Volle Auflösung der Kamera 12–25 fps (je nach Szene) Aufzeichnung, Vollbildansicht
Sub 640×360 (16:9) oder 640×480 (4:3) 10–15 fps Rasteransicht, sekundäre Aufzeichnung mit langer Aufbewahrung
Dritter 1280×720 10–15 fps Mobil, entfernter Standort, mittelgroße Kacheln
Analytics Nach Bedarf des Modells So viel, wie die Analyse erfordert Serverbasierte Analyse

Drei Regeln vereinfachen das Design:

  1. Dasselbe Seitenverhältnis in allen Streams: Ist der Hauptstream 16:9, sollte auch der Substream 16:9 sein (etwa 640×360). Der im Substream häufige Wert 704×576 (PAL D1) ist für 4:3-Bilder definiert; zusammen mit einem 16:9-Hauptstream verschieben sich Bewegungszonen, Privatzonen und Analyseboxen. Ein in der Werkseinstellung belassener Substream ist die häufigste Quelle dieses Fehlers.
  2. Codec-Konsistenz: Unterstützt hardwarebeschleunigte Decodierung im Client H.265, können alle Streams H.265 sein; wenn nicht, erhält H.264 im Substream die Rasterleistung. Die Kompatibilitätsseite der Codec-Wahl steht im Beitrag H.265 und H.264 im Vergleich.
  3. GOP-Länge: Eine sehr lange GOP im Substream verzögert beim Wechsel zur Kamera in der Live-Ansicht das erste Bild; der Client wartet auf den ersten I-Frame. Der Bediener meldet das als „Kamera öffnet sich verzögert“.

Streamauswahl und adaptive Ansicht im VMS

Die meisten Unternehmens-VMS wählen mit der Funktion „adaptives Streaming“ den Stream nach der Pixelgröße der Kachel im Client. Ist der Bediener im 4×4-Raster, wird der Substream gezeigt; doppelklickt er auf die Kamera und wechselt ins Vollbild, der Hauptstream. Damit das effizient funktioniert:

  • In der Kamera müssen mindestens zwei Streams mit unterschiedlicher Auflösung definiert sein; zwei Streams gleicher Auflösung machen die Auswahllogik wirkungslos.
  • Im VMS muss für jeden Stream ausdrücklich festgelegt sein, ob er für Aufzeichnung, Live oder beides genutzt wird.
  • Bei der Wiedergabe aufgezeichneter Bilder ist nur der aufgezeichnete Stream verfügbar. Wird der Substream nicht aufgezeichnet, ist bei der Wiedergabe keine adaptive Auswahl möglich, und der Client decodiert den Hauptstream; ein Wiedergaberaster mit 16 Kameras läuft deshalb viel schwerer als das Live-Raster. Manche VMS unterstützen daher das gemeinsame Aufzeichnen beider Streams oder eine längere Aufbewahrung des Substreams.
  • Für mobile Clients führen manche VMS eine serverseitige Neucodierung (Transcoding) durch. Das erzeugt hohe Prozessorlast auf dem Mobilserver; den dritten Stream der Kamera direkt zu nutzen, ist meist effizienter.

Auch die Zahl gleichzeitiger Sitzungen pro Kamera fließt ins Design ein. Die Zahl gleichzeitiger RTSP-Verbindungen, die Kameras unterstützen, ist begrenzt. In einer Struktur, in der sich jeder Client direkt mit der Kamera verbindet, lehnt die Kamera ab einem gewissen Punkt neue Verbindungen ab oder verliert in allen Streams Frames. Die richtige Struktur: Das VMS holt den Stream einmal und verteilt ihn an die Clients, oder es wird Multicast genutzt. Das Multicast-Design beschreibt der Beitrag Multicast und IGMP Snooping im Kameranetz.

Eigener Stream für die Analyse

Serverbasierte Videoanalyse erhält von der Kamera einen eigenen Stream. Dessen Wahl balanciert zwei Bedürfnisse: dass das Ziel mit ausreichender Pixeldichte sichtbar ist und die Last aus Decodierung und Inferenz auf dem Analyseserver.

  • Auflösung: Objekterkennungsmodelle verkleinern die Eingabe meist auf eine feste Größe. Einen 4-MP-Stream zu decodieren und dann zu verkleinern, verbraucht mehr GPU/CPU als einen 720p-Stream zu holen. Kennzeichenerkennung oder kleine Ziele in der Ferne brauchen dagegen hohe Auflösung; dann wird der Hauptstream oder ein zugeschnittener Bereichsstream genutzt.
  • Bildrate: Schnell bewegte Ziele (Fahrzeuge) brauchen eine hohe Bildrate; bei Szenarien wie Perimeterverletzung kann eine niedrige Bildrate genügen. Maßgeblich ist die vom Analysehersteller empfohlene Bildrate.
  • Bitrate: Aggressive Kompression und Smart Codec beschädigen Objektkanten, die Erkennungsgenauigkeit sinkt. Erwägen Sie, Smart Codec im Analysestream abzuschalten; eine für die Aufzeichnung nützliche Einstellung kann der Analyse schaden.

Ob die Analyse in der Kamera oder auf dem Server läuft, ändert das Streamdesign von Grund auf; den Vergleich bietet der Beitrag Edge-Analyse oder serverbasierte Analyse.

Grenzen der Verarbeitungskapazität der Kamera

Der Encoder der Kamera ist durch die Gesamtzahl an Pixeln begrenzt, die er pro Sekunde verarbeiten kann. Deshalb sind die Streams nicht unabhängig voneinander. Werden im Hauptstream höchste Auflösung und Bildrate gewählt, kann der dritte Stream deaktiviert werden, die Auflösungsoptionen des Substreams können schrumpfen, oder die Analyse in der Kamera muss abgeschaltet werden. Bei manchen Modellen ändern auch Korridormodus, Bilddrehung oder hohe WDR-Modi die Streamoptionen. Das Budget ist eines.

Die Streamkombinationen im Herstellerdatenblatt sind Bestwerte. Messen Sie nach den Einstellungen, ob jeder Stream tatsächlich mit den gewünschten Werten ankommt. Mit ffprobe aus dem FFmpeg-Paket lassen sich Codec, Auflösung und Bildrate schnell prüfen (die RTSP-Adresse ist die, die das VMS per ONVIF erhalten hat oder die in der Kameraoberfläche angezeigt wird):

ffprobe -v error -rtsp_transport tcp -select_streams v:0 \
  -show_entries stream=codec_name,width,height,avg_frame_rate \
  -of compact "rtsp://benutzer:[email protected]:554/<stream-pfad>"

Für tatsächliche Bildrate und Bitrate ist die Kamerastatistik des VMS verlässlicher; betrachten Sie einen Durchschnitt über einige Minuten. Sehen Sie im Hauptstream Bildverluste, schalten Sie den dritten Stream oder die Analyse in der Kamera ab und messen Sie den Unterschied. Die Reihenfolge zählt: erst messen, dann abschalten, dann erneut messen.

Checkliste zur Konfiguration

  • Für jede Kameragruppe sind die Streamaufgaben (Aufzeichnung, Live, Mobil, Analyse) schriftlich definiert.
  • Auflösung und Bildrate des Hauptstreams sind nach Ziel-Pixeldichte und Szenenbewegung gewählt.
  • Alle Streams haben dasselbe Seitenverhältnis.
  • Die Substream-Auflösung passt zur Kachelgröße im Client; die Decodierkapazität der Clients ist getestet.
  • Stream-Aufgaben-Zuordnung und Schwellen des adaptiven Streamings im VMS sind geprüft.
  • Wird auch bei der Wiedergabe ein Stream niedriger Auflösung benötigt, sind Substream-Aufzeichnung und Aufbewahrungsdauer festgelegt.
  • Für den Mobilzugriff ist über dritten Stream oder serverseitiges Transcoding entschieden.
  • Auflösung, Bildrate und Smart-Codec-Einstellungen des Analysestreams folgen der Empfehlung des Analyseherstellers.
  • Zahl gleichzeitiger Sitzungen pro Kamera und Multicast-Bedarf sind bewertet.
  • Tatsächliche Auflösung, Bildrate und Bitrate jedes Streams sind gemessen und dokumentiert.

Das Streamdesign ist Input für den Verkehr im Kameranetz und den Aufzeichnungsspeicher; in der Bandbreitenrechnung wird jeder Stream einzeln addiert. Den Umfang für eine saubere ONVIF-Profilzuordnung bei Kameras verschiedener Hersteller finden Sie auf der Leistungsseite ONVIF- und RTSP-Kameraintegration.

Häufig gestellte Fragen

Kann der Substream für die Aufzeichnung genutzt werden?

Ja, aber die Auflösung des Substreams reicht meist nicht für Identifizierung und Erkennung. Eine Substream-Aufzeichnung ist sinnvoll bei Übersichtskameras mit langer Aufbewahrung oder als zweite Aufzeichnung geringer Qualität, die neben dem Hauptstream länger aufbewahrt wird. Aufzeichnungen mit Beweiswert stammen aus dem Hauptstream.

Senkt das Aktivieren des dritten Streams die Qualität des Hauptstreams?

Ja, wenn die Encoderkapazität der Kamera begrenzt ist. Bei manchen Modellen schrumpfen mit aktivem drittem Stream die Optionen für Bildrate oder Auflösung des Hauptstreams. Sehen Sie in die Tabelle der Streamkombinationen des Herstellers und messen Sie nach der Änderung die tatsächliche Bildrate des Hauptstreams.

Wie entscheidet das VMS, welchen Stream es in der Live-Ansicht zeigt?

VMS mit adaptivem Streaming vergleichen die Pixelgröße der Kachel im Client mit den Auflösungen der Kamerastreams und wählen den kleinsten Stream, der die Kachel abdeckt. Wechselt der Bediener in den Vollbildmodus, wird auf den Hauptstream umgeschaltet. Die Auswahlschwellen werden in der VMS-Konfiguration eingestellt.

Was passiert, wenn Sub- und Hauptstream unterschiedliche Seitenverhältnisse haben?

Bewegungserkennungszonen, Privatzonen und Analyseboxen verschieben sich zwischen den Streams; beim Wechsel von Live-Ansicht zu Aufzeichnung wirkt das Bild beschnitten oder verschoben. Dasselbe Seitenverhältnis in allen Streams beseitigt dieses Problem.

Support

Kontaktieren Sie uns für Support oder eine Bestandsaufnahme zu diesem Thema.

Kontaktformular
[email protected]

Eretek Videoüberwachung

IP-Kameras, Aufzeichnung und zentrale Verwaltung. Tote Winkel, Aufbewahrungsdauer und Kameranetz planen wir nach dem Risiko des Standorts.

Wissenszentrum

Weitere Beiträge