Während der Operation helfen die Bilddaten des Organs den Ärztinnen und Ärzten, sich zu orientieren und Entscheidungen zu treffen. Dazu entwickelt das VIVATOP-Team eine sogenannte Augmented-Reality-Anwendung („erweiterte Realität“), mit der die relevanten Informationen im Sichtfeld einer Brille angezeigt werden. Über die Sprachsteuerung können Chirurginnen und Chirurgen das Gerät bedienen, ohne die Hände einsetzen zu müssen.

Gleichzeitig besteht die Möglichkeit, die Operation live in Virtual Reality darzustellen, damit externe Expertinnen und Experten außerhalb des Operationssaals interaktiv hinzugezogen werden können („remote, kollaborative, immersive Chirurgen-Konsultation“). Mit Hilfe von Tiefenkameras, Sensoren und einem Bündel weiterer modernster Technologien werden dabei die Handbewegungen des Ärzte-Teams sowie die Eingriffe am operierten Organ aufgezeichnet und in VR dargestellt. Parallel können in der VR-Welt auch die Planungsdaten angezeigt werden. So ermöglicht das System die weltweite Zusammenarbeit von Fachleuten bei einer Operation.