Patent ES-2908588-T3 (ES)
Title: Método para controlar una pantalla de presentación visual, programa informático y dispositivo de presentación visual de realidad mixta
Inventor: PELZL SIRKO
IPC: G06T7/10
Filed: 2019-09-09
Granted: 2022-05-03
Abstract: Método para controlar una pantalla de presentación visual de un dispositivo (1) de presentación visual de realidad mixta, comprendiendo el método al menos las siguientes etapas: a) proporcionar un conjunto de datos de imagen que comprende una pluralidad de imágenes de un objeto (15) de tratamiento, en el que el objeto (15) de tratamiento es el cuerpo de un paciente o una parte del mismo y las imágenes representan el objeto (15) de tratamiento desde diferentes perspectivas, b) generar una nube (23) de puntos objetivo 3D a partir del conjunto de datos de imagen, en el que la nube (23) de puntos objetivo comprende una multitud de puntos definidos en un sistema de coordenadas tridimensional y los puntos representan la superficie del objeto de tratamiento, c) determinar un número de máscaras (25a, 25b, 25c) de segmentación semántica en la nube (23) de puntos objetivo aplicando la segmentación semántica, d) proporcionar un conjunto de datos de formación de imágenes médicas que comprende datos de formación de imágenes médicas del objeto (15) de tratamiento, e) generar una nube (27) de puntos fuente 3D a partir del conjunto de datos de formación de imágenes médicas, en el que la nube (27) de puntos fuente comprende una multitud de puntos definidos en un sistema de coordenadas tridimensional y los puntos también representan la superficie del objeto de tratamiento, f) determinar un número de máscaras (29a, 29b, 29c) de segmentación semántica en la nube (27) de puntos fuente aplicando la segmentación semántica, g) determinar una transformación entre la nube (27) de puntos fuente y la nube (23) de puntos objetivo usando las máscaras (29a, 29b, 29c) de segmentación de la nube (27) de puntos fuente y las máscaras (25a, 25b, 25c) de segmentación de la nube (23) de puntos objetivo, y h) visualizar al menos una parte de los datos de formación de imágenes médicas en la pantalla (3) de presentación visual, en el que los datos de formación de imágenes médicas se superponen sobre el objeto (15) de tratamiento y se alinean con el objeto (15) de tratamiento usando la transformación entre la nube (27) de puntos fuente y la nube (23) de puntos objetivo, en el que la etapa c) comprende - determinar un número de máscaras de segmentación semántica en las imágenes del conjunto de datos de imagen aplicando la segmentación semántica a las imágenes del conjunto de datos de imagen, y - determinar las máscaras (25a, 25b, 25c) de segmentación semántica en la nube (23) de puntos objetivo usando las máscaras de segmentación semántica en las imágenes del conjunto de datos de imagen. y/o la etapa f) comprende - determinar un número de máscaras de segmentación semántica en los datos de formación de imágenes médicas del conjunto de datos de formación de imágenes médicas aplicando la segmentación semántica a los datos de formación de imágenes médicas del conjunto de datos de formación de imágenes médicas, y - determinar las máscaras (29a, 29b, 29c) de segmentación semántica en la nube (27) de puntos fuente usando las máscaras de segmentación semántica en los datos de formación de imágenes médicas del conjunto de datos de formación de imágenes médicas, en el que cada máscara de segmentación semántica se refiere a un segmento de la imagen que se ha determinado, usando la segmentación semántica, como perteneciente a la misma clase de objeto.