EIRS

Alle Demos · Industrielle Herausforderungen

Robotische Telepräsenz · Ferninspektion · Immersive Robotik

Immersive Telepräsenz für Navigation und Inspektion

Bedienpersonen können einen mobilen Roboter durch schwer zugängliche oder unsichere Bereiche steuern und seine Live-Kamerabilder in VR betrachten. Mit Orten in der Szene verknüpfte Bilder unterstützen die spätere fachliche Auswertung. Das Framework verbindet Roboterfernsteuerung, räumlichen Kontext und vertiefte Nachbereitung und lässt sich auf andere Roboter und Aufnahmesysteme anpassen.

Immersive Telepräsenz für Navigation und Inspektion
Roboternavigation mit Kamerabildern und immersiv arbeitender Bedienperson.

Warum Ferninspektion wichtig ist

Manche Umgebungen sind schwer oder unsicher zugänglich, etwa schwer erreichbare Industriebereiche, Gefahren- und Unfallbereiche oder entfernte Infrastruktur. Mobile Roboter können Kameras dorthin bringen und während der Steuerung Live-Bilder liefern. Aufnahmen und markierte Punkte ermöglichen Fachleuten die spätere Detailprüfung.

Was der Ansatz ermöglicht

  • Schwer erreichbare Bereiche aus der Ferne beurteilen, bevor Menschen sie betreten.
  • Einen mobilen Roboter führen und seine Kamerabilder überwachen.
  • Blickwinkel wechseln, um Details und räumliche Zusammenhänge zu verstehen.
  • Wichtige Bilder und interessante Stellen für die fachliche Prüfung erfassen.
  • Einen Ferninspektionsablauf evaluieren, bevor er auf einen Standort oder eine Roboterflotte angepasst wird.

Prüfumgebung und Ausstattung

Der Prüfstand verbindet einen vierbeinigen Unitree AlienGo und seine Kameras mit einer Unity-VR-Anwendung. Bedienpersonen nutzen Meta Quest Pro und Omnideck oder einen Joystick zur Fortbewegung. Kopfbewegung oder Joystick verändern die Kamerasicht. Ein Matterport-LiDAR-Scan liefert ein lasererfasstes Raummodell für Navigation und räumlichen Kontext.

So funktioniert das Inspektionsframework

Das Framework verbindet Bedienoberfläche, Roboterkommunikation und Inspektionsauswertung. Ein Matterport-LiDAR-Scan wird als räumliches Modell in Unity importiert. Live-Kameravideo zeigt die Roboterperspektive, die rekonstruierte Umgebung liefert Kontext. Erfasste Szeneninformationen lassen sich später detailliert untersuchen.

Drei auf ROS, dem Robot Operating System, basierende Ebenen verbinden Roboter und immersive Anwendung. Roboterknoten übernehmen Sensorik und Bewegung. Middleware übersetzt Gerätedaten und Befehle. Containerisierte Dienste in einer Docker-basierten privaten Cloud koordinieren die Kommunikation. Bewegungsbefehle gehen von VR zum Roboter, Live-Video und Szenenaktualisierungen zurück zur Bedienperson.

Bedienpersonen können georeferenzierte Screenshots speichern und Beobachtungen mit Szenenpositionen verknüpfen. Diese Punkte lassen sich über eine zentrale Plattform teilen, damit Fachleute Details prüfen und Folgemaßnahmen empfehlen können.

So nutzen Bedienpersonen das System

Die Bewegung wird per Omnideck oder Joystick gesteuert, die Kamerasicht per Kopfbewegung oder Joystick. Live-Video unterstützt die Inspektion während der Navigation. Bei auffälligen Details wird ein mit dem Szenenort verknüpftes Bild aufgenommen. Fachleute können es zusammen mit der rekonstruierten Umgebung prüfen.

Mögliche Einsatzbereiche

Teams können schwer oder unsicher erreichbare Bereiche beurteilen, Roboter gezielt zu Inspektionspunkten führen und Bilder an Fachleute weitergeben. Einsatzmöglichkeiten umfassen beengte Prozessräume, entfernte Infrastruktur, unfallgefährdete Orte und Notfalleinsätze. Eine Standortanpassung stimmt Steuerungen, Kamerasichten und Nachweisübergabe auf den Inspektionsablauf ab.

Nächste Entwicklungsmöglichkeiten

Weitere Entwicklungen könnten zusätzliche Bodenroboter und Drohnen, Kameras und Sensoren wie Wärmebild oder LiDAR sowie mehrere Live-Blickwinkel und gemeinsame Fachauswertung integrieren. Standortanpassungen könnten Bedienung, Sicherheitsabläufe und Übergabe an die Bedürfnisse des Teams anpassen.

Industrielle Anwendungen

Ferninspektion erfordert mehr als eine Kamera an einem schwer erreichbaren Ort. Bedienpersonen müssen Umgebung und Details verstehen, Bewegung steuern und hilfreiche Beobachtungen verständlich weitergeben.

Immersive Roboterfernsteuerung

Fernsteuerungen und immersive Ansichten passend zur Roboteraufgabe entwickeln. Ein Projekt könnte untersuchen, wie Eingaben und Feedback die Führung unterstützen.

Einen Ablauf für Ihren Standort und Roboter entwickeln

Eine Zusammenarbeit könnte Roboter, Kameras und Inspektionsverfahren anbinden und den gesamten Ablauf von der Fernbedienung bis zur fachlichen Auswertung evaluieren.

Forschung und Zusammenarbeit entdecken →

Medien

Videos

Bilder

Framework-Überblick mit VR-Steuerung, Roboterkameras und fachlicher Auswertung.
Framework-Überblick mit VR-Steuerung, Roboterkameras und fachlicher Auswertung.
Mobiler Roboter mit Kamera- und Sensorausstattung.
Mobiler Roboter mit Kamera- und Sensorausstattung.
Kamera- und Rechentechnik auf dem mobilen Roboter.
Kamera- und Rechentechnik auf dem mobilen Roboter.
Eine Bedienperson steuert einen mobilen Roboter über die omnidirektionale Omnideck-VR-Laufplattform.
Eine Bedienperson steuert einen mobilen Roboter über die omnidirektionale Omnideck-VR-Laufplattform.
Bewegungs- und Kamerasteuerungen für immersive Robotertelepräsenz.
Bewegungs- und Kamerasteuerungen für immersive Robotertelepräsenz.
VR-Ansicht eines rekonstruierten Tunnels mit eingeblendeter Bedienperson.
VR-Ansicht eines rekonstruierten Tunnels mit eingeblendeter Bedienperson.
Detailansicht der Tunnelgeometrie und räumlicher Markierungen in VR.
Detailansicht der Tunnelgeometrie und räumlicher Markierungen in VR.
Immersive Ansicht einer Tunnelkreuzung mit Rohrleitungen.
Immersive Ansicht einer Tunnelkreuzung mit Rohrleitungen.
Mobiler Roboter und VR-Bedienperson im gemeinsamen Omnideck-Aufbau.
Mobiler Roboter und VR-Bedienperson im gemeinsamen Omnideck-Aufbau.

Forschung und Berichte

Publikation
Remotely Operated Robots for Underground Applications
Berg Huettenmaenn Monatsh · 2025

Projekt und Programm

Diese Arbeit ist Teil von DDIA, Data Driven Immersive Analytics in Digital Industries.

DDIA ist ein FFG COMET-Modul (2022–2026) bei Know Center Research GmbH.

↑ Nach oben