Univerzální software pro imerzivní teleprezenci (VR-ORCTRL)

Universal software for immersive telepresence (VR-ORCTRL)

Software

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL) představuje softwarový systém pro pokročilé dálkové ovládání mobilních robotických prostředků s využitím imerzivního zobrazení ve virtuální realitě. Software byl vyvinut jako univerzální operátorské rozhraní umožňující intuitivní řízení robotických systémů a současně poskytující operátorovi rozšířený situační přehled. VR-ORCTRL umožňuje zobrazování video streamů a telemetrických dat robotu v imerzivním prostředí VR helmy, podobně jako se zobrazuje na klasické operátorské obrazovce. Systém je navržen tak, aby podporoval souběžný běh imerzivní VR teleprezence se standardní teleprezencí přes obrazovku operátorské stanice, a operátor tak měl možnost plynulé přepínat mezi imerzivním a standardním režimem bez změny ovládacích prvků. Z tohoto důvodu zůstává ovládání robotu realizováno standardními vstupními zařízeními operátorské stanice, zatímco tento SW ve VR helmě slouží jako zobrazovací a interakční rozhraní. To umožňuje flexibilní nasazení v různých podmínkách a současně zachování provozní spolehlivosti. Software integruje vizualizaci senzorických dat, mapových podkladů, plánování tras a správu autonomních funkcí robotu. Umožňuje zobrazovat obraz z více senzorů včetně RGB a termální kamery, podporuje datovou fúzi a zobrazení polohy robotu na mapě. Součástí systému jsou rovněž nástroje pro plánování trajektorií, definici automatizovaných akcí a monitorování stavu robotu v reálném čase. Architektura VR-ORCTRL je modulární a navržena pro integraci s robotickými platformami využívajícími middleware ROS. Systém je koncipován jako univerzální software využitelný pro různé typy mobilních robotů a teleprezenčních aplikací, včetně bezpečnostních, průmyslových a inspekčních scénářů. Výsledkem je flexibilní operátorské rozhraní zvyšující efektivitu, ergonomii a bezpečnost dálkového řízení robotických systémů.

The universal software for immersive telepresence (VR-ORCTRL) represents a software system for advanced remote control of mobile robotic platforms using immersive visualization in virtual reality. The software was developed as a universal operator interface enabling intuitive control of robotic systems while simultaneously providing the operator with enhanced situational awareness. VR-ORCTRL enables the display of video streams and robot telemetry data in an immersive VR headset environment, similar to the display on a conventional operator screen. The system is designed to support the simultaneous operation of immersive VR telepresence together with standard screen-based telepresence at the operator station, allowing the operator to seamlessly switch between immersive and standard modes without changing control elements. For this reason, robot control remains implemented through standard operator station input devices, while the VR software serves as a visualization and interaction interface within the headset. This allows flexible deployment in various conditions while maintaining operational reliability. The software integrates visualization of sensor data, map layers, route planning, and management of the robot’s autonomous functions. It enables visualization of data from multiple sensors, including RGB and thermal cameras, supports data fusion, and displays the robot’s position on a map. The system also includes tools for trajectory planning, definition of automated actions, and real-time monitoring of the robot’s status. The VR-ORCTRL architecture is modular and designed for integration with robotic platforms using ROS middleware. The system is conceived as universal software applicable to various types of mobile robots and telepresence applications, including security, industrial, and inspection scenarios. The result is a flexible operator interface that increases the efficiency, ergonomics, and safety of remote control of robotic systems.

imerzivní teleprezence; virtuální realita; VR operátorské rozhraní; dálkové řízení robotu; human-machine interface; ROS integrace; vizualizace senzorických dat; plánování tras; autonomní navigace; datová fúze; telemetrie; průmyslová robotika

immersive telepresence; virtual reality; VR operator interface; remote robot control; human-machine interface; ROS integration; sensor data visualization; path planning; autonomous navigation; data fusion; telemetry; industrial robotics

K využití výsledku jiným subjektem je vždy nutné nabytí licence

https://www.vut.cz/vav/vysledky/detail/201228