Ein Mehrsensor-Pod betreibt einen 30-Hz-Wärmebildkern, einen EO-Kanal mit 25 oder 30 Hz, einen Laser mit wenigen Hertz und eine IMU, die mit mehreren hundert Hertz abtastet. Nichts davon ist von sich aus ausgerichtet. Jedes fusionierte Bild, jede eingeblendete Spur und jede gemeldete Koordinate hängt von einer Zeitarchitektur ab, die im Datenblatt nie erwähnt wird.
Kernaussagen
- Der Versatz zwischen Wärmebild-, EO- und Lagedaten wird sichtbar, sobald jemand ein bewegtes Ziel geolokalisieren will.
- Zeitarchitekturen unterscheiden sich darin, wo der Zeitstempel gesetzt wird — am Sensor, am Encoder oder am Rekorder — und nur das Erste ist vertretbar.
- Unterschiedliche Bildraten von Wärmebild und EO bedeuten, dass immer ein Datenstrom interpoliert wird; man sollte wissen, welcher und um wie viel.
- Fragen Sie den Hersteller nach der Zeitstempelquelle und dem gemessenen Versatz zwischen den Sensoren, nicht nach der Behauptung, die Ströme seien synchronisiert.
Auf dieser Seite
Warum der Versatz sichtbar wird
If the thermal and EO frames used for a picture-in-picture overlay are 40 ms apart and the gimbal is slewing at 30 °/s, the two images are looking 1.2° apart. At 30x zoom that is most of the field of view. The overlay separates, and operators report it as „boresight drift“ when it is actually a timing error.
Die Geolokalisierung leidet genauso. Die Koordinatenlösung verbindet Gimbalwinkel, Fluglage und Laserentfernung. Ist die verwendete Lagestichprobe 50 ms älter als die Laserrückkehr, hat sich das Luftfahrzeug zwischenzeitlich bewegt und gedreht, und dieser Fehler geht direkt in die Koordinate ein.
Das dritte Opfer ist die KI-Verfolgung. Ein Tracker, der Bilder mit unregelmäßigen Zeitstempeln erhält, liefert zitternde Geschwindigkeitsschätzungen, was wiederum die Nachführschleife des Gimbals pendeln lässt.
Möglichkeiten der Zeitarchitektur
| Ansatz | Typischer Restfehler | Kosten | Wo eingesetzt |
|---|---|---|---|
| Software-Zeitstempel beim Eintreffen | 5–40 ms | Keine | Einfache Integrationen |
| Hardware-Zeitstempel bei der Aufnahme | 0,5–2 ms | Etwas FPGA-/MCU-Logik | Die meisten modernen Nutzlasten |
| Gemeinsame Taktdomäne, ein SoC | < 0.5 ms | Architektonisch | Integrierte Mehrsensor-Pods |
| PPS-Disziplinierung vom GNSS | < 100 µs zu UTC | GNSS-Eingang erforderlich | Nutzlasten, die absolute Zeit brauchen |
| Genlock-getriggerte Sensoren | < 1 Bild, deterministisch | Sensorunterstützung erforderlich | Photogrammetrie und Kartierung |
| PTP / IEEE 1588 über Ethernet | 10–100 µs | Ethernet-Stack | Verteilte Systeme mit mehreren Nutzlasten |
Das Problem unterschiedlicher Bildraten
Ein 30-Hz-Wärmebildkanal und ein 25-Hz-EO-Kanal laufen fortwährend in und aus der Phase. Es gibt kein gleichzeitiges Paar; das Beste ist, den nächstliegenden Nachbarn zu wählen und festzuhalten, wie weit er entfernt war. Nutzlasten, die diesen Versatz offenlegen, erlauben der nachgelagerten Software eine Korrektur; Nutzlasten, die stillschweigend das jeweils jüngste Bild beider Ströme paaren, führen einen unbegrenzten Fehler ein, den der Nutzer nicht sehen kann.
Für den Laser gilt dasselbe. Ein Entfernungsmesser, der mit 4 Hz auslöst, muss einer bestimmten Lagestichprobe des Gimbals zugeordnet werden. Ordnet man ihn der Lage in dem Moment zu, in dem das Ergebnis eintrifft, statt in dem Moment, in dem der Puls austrat, geht die gesamte Messlatenz in die Geolokalisierungslösung ein.
IMU-Daten auf den Bildzeitstempel zu interpolieren — statt die nächstgelegene Stichprobe zu nehmen — beseitigt den größten Teil des Rests. Das ist billig, und sein Fehlen ist eines der deutlichsten Kennzeichen einer übereilten Integration.
Was Sie einen Nutzlasthersteller fragen sollten
- Werden Bildzeitstempel in Hardware erfasst oder beim Eintreffen per Software vergeben?
- Teilen sich Wärmebild, EO und Laser eine einzige Taktdomäne?
- Wird der Zeitstempel in den Metadaten des Videostroms oder in SEI offengelegt, damit nachgelagerte Werkzeuge ihn nutzen können?
- Kann die Nutzlast ein PPS-Signal oder eine absolute Zeitreferenz zur Abstimmung mit anderen Systemen verarbeiten?
- Werden IMU-Daten auf die Bildzeit interpoliert oder einfach als nächstgelegene Stichprobe genommen?
Wie sich das in unseren Nutzlasten zeigt
Mehrsensor-Pods wie OP-125A und OP-90A betreiben ihren Wärmebild-, EO- und Entfernungsmesskanal innerhalb einer Verarbeitungsdomäne, was den geräteübergreifenden Taktversatz vollständig beseitigt — den am schwersten zu charakterisierenden und architektonisch am leichtesten zu vermeidenden Fehler. Die Strom-Metadaten führen die Koordinate des Aufnahmepunkts mit, sodass nachgelagerte Werkzeuge die Ausrichtung erben statt sie neu herzuleiten.
Weiterführend
Technologie: EO/IR-Fusion und Boresight-Ausrichtung und Fehlerbudget der Zielgeolokalisierung.
Feldpraxis: Videolatenz in Nutzlastsystemen, Bild-in-Bild- und Fusionsdarstellung und ONVIF und IP-Video.
Synchronisation ohne Laborausrüstung prüfen
Zeitprobleme übersieht man auf dem Prüfstand leicht und im Flug gar nicht — die schlechteste Kombination. Zwei einfache Feldtests fangen die meisten davon ohne Spezialausrüstung ab.
Der Schwenktest trennt Zeitfehler von Visierlinienfehler. Richten Sie die Nutzlast auf ein kontrastreiches Ziel und prüfen Sie die Wärmebild-EO-Überlagerung im Stillstand, dann erneut beim Schwenken mit mäßiger Rate. Ein in beiden Fällen konstanter Versatz ist ein Visierlinienfehler und wird durch Kalibrierung behoben. Ein Versatz, der mit der Schwenkrate wächst, ist ein Zeitfehler, und Kalibrierung berührt ihn nicht.
Der Bewegtzieltest prüft die Geolokalisierungskette. Messen Sie die Entfernung zu einem ruhenden, eingemessenen Objekt aus mehreren Positionen und Steuerkursen. Liegen die gemeldeten Koordinaten eng beieinander, ist die Kette ausgerichtet; streuen sie in Richtung der Flugbewegung, stammen Lage- und Entfernungsstichproben nicht aus demselben Augenblick.
Beide Tests dauern zehn Minuten und sollten zur Inbetriebnahme jeder Mehrsensor-Nutzlast gehören, nicht bloß eine Diagnose sein, zu der man greift, wenn schon etwas falsch aussieht.
- Schwenktest: Überlagerung im Stillstand mit der beim Schwenken vergleichen, um Zeitfehler von Visierlinienfehler zu trennen.
- Test am eingemessenen Ziel: einen bekannten Punkt aus mehreren Positionen anmessen und die Koordinatenstreuung prüfen.
- Fragen Sie, ob Zeitstempel in Hardware erfasst und ob sie in den Strom-Metadaten offengelegt werden.
- Wenn Sie das Video in einem fremden Videomanagementsystem verarbeiten, prüfen Sie, ob SEI-Metadaten den Transkodierpfad überstehen.
- Wiederholen Sie beide Tests nach Firmware-Updates, die den Video- oder Sensorpfad berühren.
FAQ
Meine Wärmebild- und Sichtkanal-Überlagerung geht beim Schwenken auseinander. Ist das ein Visierlinienproblem?
Häufiger ist es ein Zeitproblem. Liegen die beiden Bilder zig Millisekunden auseinander und bewegt sich das Gimbal, blicken die Bilder tatsächlich in verschiedene Richtungen. Der Visierlinienfehler ist unabhängig von der Schwenkrate; der Zeitfehler wächst mit ihr — diese Unterscheidung benennt die Ursache.
Beeinflusst die Zeitsynchronisation die Geolokalisierungsgenauigkeit?
Unmittelbar. Die Koordinatenlösung verbindet Lage, Gimbalwinkel und Entfernung; stammen diese Stichproben nicht aus demselben Augenblick, geht die dazwischenliegende Flugbewegung in das Ergebnis ein. Bei einem schnell fliegenden Luftfahrzeug können 50 ms Versatz mehrere Meter beitragen.
Brauche ich PPS-Synchronisation?
Nur wenn Sie eine Abstimmung mit Systemen außerhalb der Nutzlast benötigen — externe Kartendaten, andere Luftfahrzeuge, Bodensensoren. Für die Abstimmung der Kanäle innerhalb eines Pods ist ein gemeinsamer interner Takt sowohl ausreichend als auch genauer.