УСТРОЙСТВО ОБРАБОТКИ ИНФОРМАЦИИ, СПОСОБ ОБРАБОТКИ ИНФОРМАЦИИ И СИСТЕМА ОБРАБОТКИ ИНФОРМАЦИИ
DEVICE FOR INFORMATION PROCESSING, METHOD FOR INFORMATION PROCESSING AND INFORMATION PROCESSING SYSTEM

Область техники, к которой относится изобретение
[0001] Настоящее изобретение относится к устройствам обработки информации.
Уровень техники
[0002] Известно укрепляемое на голове устройство отображения (головной дисплей (HMD)), которое представляет собой устройство отображения, устанавливаемое на голове. Например, укрепляемое на голове устройство отображения формирует свет изображения для изображения с использованием жидкокристаллического дисплея и источника света и проводит сформированный свет изображения к глазам пользователя с использованием. проекционной оптической системы, световодной панели и т.п., и, таким образом, пользователю дается возможность распознать виртуальное изображение.
[0003] Литература PTL 1 раскрывает систему, в которой используется укрепляемое на голове устройство отображения, которое улучшает отображение информации в медицинской области. В технологии, раскрытой в литературе PTL 1, информация извлекается из множества источников информации на основе запроса. Извлеченная информация подвергается процессу фильтрации на основе правил и проецируется на окуляры средства просмотра в виде головной гарнитуры с очками. В технологии, раскрытой в литературе PTL 1, право управления и право приоритета для отображения информации на фиксированном большом дисплее определяются на основе зрительной оси человека, который носит укрепляемое на голове устройство отображения. Литература PTL 2 раскрывает видеодисплей, укрепляемый на лице, для медицинского использования (укрепляемое на голове устройство отображения). В технологии, раскрытой в литературе PTL 2, информация операционного состояния периферийных устройств эндоскопа, которые используются с эндоскопом для эндоскопического исследования или эндоскопической хирургии, отображается на укрепляемом на голове устройстве отображения. Литература PTL 3 и PTL 4 раскрывает способ, в котором применяется технология дополненной реальности для отображения информации стоматологической хирургии в укрепляемом на голове устройстве отображения. В технологии, раскрытой в литературе PTL 3 и PTL 4, отображение предоперационного изображения, моделированное изображение и т.п.для оперируемого участка накладываются на фактическое изображение оперируемого участка.
Библиография
Патентная литература
[0004] [PTL 1] JP-A-2006-102495.
[PTL 2] JP-A-2001-104331.
[PTL 3] JP-A-2010-259497.
[PTL 4] JP-A-2013-34764.
Раскрытие изобретения
Техническая проблема
[0005] Успехи в медицине и в области электронных устройств вызвали быстрый прогресс текущих медицинских помещений. В медицинских помещениях используются различные устройства для медицинского использования (в дальнейшем называемые "медицинскими устройствами"), такие как электрокардиограф, измеритель частоты сердечных сокращений, измеритель кровяного давления, пульсоксиметр, измеритель глюкозы крови, рентгеновский аппарат и эндоскоп. Большой нагрузкой для сотрудников в медицинских помещениях является понимание информации различных медицинских устройств и выполнения задач. Поэтому возникла потребность в системе, в которой может быть объединена вся информация различных медицинских устройств. В технологии, раскрытой в PTL 1, информация может быть получена от множества источников информации (медицинских устройств), но нет упоминания о том, как полученная информация отображается на множестве укрепляемых на голове устройств отображения. В технологиях, раскрытых в PTL 2 PTL 4, целевые медицинские устройства ограничены, и, таким образом, существует проблема в том, что информация различных медицинских устройств не может быть объединена.
[0006] Проблема не ограничена укрепляемым на голове устройством отображения, но является общей для всех устройств обработки информации, которые формируют информацию, которая будет отображена на устройстве отображения изображения, таком как укрепляемое на голове устройство отображения. Также имеется потребность в устройстве обработки информации, которое может объединять информацию различных медицинских устройств и которое может управлять отображением информации на множестве устройств отображения изображения. Кроме того, существуют следующие различные потребности в устройстве обработки информации: увеличение универсальности, увеличение удобства, сокращение стоимости производства и увеличение надежности.
Решение проблемы
[0007] Преимущество некоторых аспектов изобретения должно заключаться в решении, по меньшей мере, части описанных выше проблем, и изобретение может быть реализовано как следующие аспекты.
[0008] (1) Аспект изобретения обеспечивает устройство обработки информации. Устройство обработки информации включает в себя блок сбора данных, который получает множественные фрагменты информации медицинских устройств, которые являются множественными фрагментами информации, полученными от множества медицинских устройств; блок формирования, который формирует множественные фрагменты информации представления, которые соответственно содержат, по меньшей мере, часть множественных фрагментов информации медицинских устройств, полученных блоком сбора данных; и блок представления, который выводит сформированную информацию представления множеству устройств отображения изображения. В устройстве обработки информации в соответствии с аспектом блок формирования формирует информацию представления с использованием множественных фрагментов информации медицинских устройств, полученных блоком сбора данных, и, таким образом, информация (информация медицинских устройств) различных медицинских устройств, которые соединены с устройством обработки информации, может быть объединена. Блок представления выводит сформированную информацию представления множеству устройств отображения изображения, и, таким образом, блок формирования может управлять отображением на множестве устройств отображения изображения. В результате, можно объединить информацию различных медицинских устройств, и возможно реализовать устройство обработки информации, которое может управлять отображением на множестве устройств отображения изображения.
[0009] (2) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что блок формирования имеет первый режим, в котором формируется информация представления, общая для множества устройств отображения изображения, и второй режим, в котором формируются множественные фрагменты информации представления, соответствующие множеству устройств отображения изображения. В устройстве обработки информации в соответствии с этим аспектом блок формирования имеет первый режим, в котором формируется информация представления, общая для множества устройств отображения изображения, с использованием объединенной информации медицинских устройств, и второй режим, в котором формируются множественные фрагменты информации представления, соответствующие множеству устройств отображения изображения. Блок формирования использует режимы отдельно, и, таким образом, устройство обработки информации может управлять отображением на множестве устройств отображения изображения.
[0010] (3) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что в первом режиме блок формирования формирует общую информацию представления, которая содержит, по меньшей мере, информацию медицинского устройства, выбранную пользователем заданного устройства отображения изображения. В устройстве обработки информации в соответствии с этим аспектом блок формирования формирует общую информацию представления, которая содержит, по меньшей мере, информацию медицинского устройства, выбранную пользователем заданного устройства отображения изображения, и блок представления выводит сформированную общую информацию представления множеству устройств отображения изображения. В результате устройство обработки информации может управлять отображением на множестве устройств отображения изображения на основе выбора пользователя заданного устройства отображения изображения.
[0011] (4) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что устройство обработки информации дополнительно включает в себя блок хранения отношений между устройствами, который хранит информацию для индивидуальной идентификации множества устройств отображения изображения совместно с информацией для указания, является ли устройство отображения изображения заданным устройством отображения изображения, и в первом режиме блок формирования идентифицирует заданное устройство отображения изображения с использованием блока хранения отношений между устройствами. В устройстве обработки информации в соответствии с этим аспектом блок формирования может просто идентифицировать заданное устройство отображения изображения из множества устройств отображения изображения с использованием блока хранения отношений между устройствами.
[0012] (5) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что во втором режиме блок формирования формирует множественные фрагменты информации представления, которые соответственно содержат по меньшей мере фрагменты полученной информации медицинских устройств, которые соответственно выбраны пользователями множества устройств отображения изображения. В устройстве обработки информации в соответствии с этим аспектом блок формирования формирует множественные фрагменты информации представления, которые соответственно содержат по меньшей мере фрагменты информации медицинского устройства, которые соответственно выбраны пользователями множества устройств отображения изображения. Блок представления выводит множественные фрагменты сформированной информации представления множеству устройств отображения изображения. В результате устройство обработки информации может индивидуально управлять отображением на множестве устройств отображения изображения на основе выбора каждого пользователя устройства отображения изображения.
[0013] (6) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что во втором режиме блок формирования формирует множественные фрагменты информации представления, которые соответственно содержат по меньшей мере фрагменты информации медицинских устройств, полученные от медицинских устройств на основе роли каждого пользователя. В устройстве обработки информации в соответствии с этим аспектом блок формирования формирует множественные фрагменты информации представления, которые соответственно содержат по меньшей мере фрагменты информации медицинских устройств, которые получены от медицинских устройств на основе роли каждого пользователя. Блок представления выводит множественные фрагменты сформированной информации представления множеству устройств отображения изображения. В результате устройство обработки информации может индивидуально управлять отображением на множестве устройств отображения изображения на основе роли каждого пользователя устройства отображения изображения, и возможно увеличить удобство каждого пользователя устройства отображения изображения.
[0014] (7) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что устройство обработки информации дополнительно включает в себя блок хранения ролей, который хранит информацию для индивидуальной идентификации множества устройств отображения изображения совместно с ролью пользователя устройства отображения изображения, и во втором режиме блок формирования идентифицирует роль пользователя с использованием блока хранения ролей. В устройстве обработки информации в соответствии с этим аспектом блок формирования может просто идентифицировать роль каждого пользователя с использованием блока хранения ролей.
[0015] (8) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что во втором режиме блок формирования дополнительно формирует объединенную информацию, в которой множественные фрагменты сформированной информации представления объединены вместе, и блок представления выводит объединенную информацию, которая сформирована для заданного устройства отображения изображения. В устройстве обработки информации в соответствии с этим аспектом блок формирования формирует объединенную информацию, в которой множественные фрагменты сформированной информации представления объединены вместе, и блок представления выводит объединенную информацию, которая сформирована для заданного устройства отображения изображения. В результате пользователь заданного устройства отображения изображения может понять, какая информация представления отображается на множестве устройств отображения изображения, соединенных с устройством обработки информации. В результате возможно увеличить удобство пользователя заданного устройства отображения изображения.
[0016] (9) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что когда блок формирования формирует информацию представления, блок формирования увеличивает или уменьшает изображение, сохраняя при этом соотношение сторон изображения, которое содержится в информации медицинского устройства. В устройстве обработки информации в соответствии с этим аспектом блок формирования увеличивает или уменьшает изображение, сохраняя при этом соотношение сторон изображения, которое содержится в информации медицинского устройства, и, таким образом, можно устранить нежелательное искажение информации медицинского устройства, полученной медицинским устройством, когда информация представления формируется.
[0017] (10) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что устройство обработки информации соединено с укрепляемым на голове устройством отображения как устройством отображения изображения, на котором пользователь может видеть виртуальное изображение и внешнюю обстановку. В устройстве обработки информации в соответствии с этим аспектом можно объединить информацию различных медицинских устройств и можно реализовать устройство обработки информации, которое может управлять отображением на множестве укрепляемых на голове устройств отображения.
[0018] (11) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что блок представления дополнительно получает от укрепляемого на голове устройства отображения изображение в направлении поля зрения пользователя, который носит укрепляемое на голове устройство отображения, блок представления дополнительно извлекает характеристики объекта, содержащегося во внешней обстановке, посредством распознавания изображения, полученного в направлении поля зрения, и блок представления дополнительно компенсирует информацию представления, сформированную блоком формирования, на основе извлеченных характеристик и выводит компенсированную информацию представления. В устройстве обработки информации в соответствии с этим аспектом блок представления извлекает характеристики объекта, содержащегося во внешней сцене, посредством распознавания изображения в направлении поля зрения пользователя укрепляемого на голове устройства отображения, и блок представления компенсирует сформированную информацию представления на основе извлеченных характеристик. Поэтому, когда информация представления содержит информацию невидимых частей, такую как изображение СТ, изображение MRI или рентгеновское изображение, возможно выровнять информацию невидимых частей с объектом (например, с телом пациента), содержащимся во внешней обстановке. В результате можно увеличить удобство пользователя укрепляемого на голове устройства отображения. Кроме того, поскольку укрепляемое на голове устройство отображения может принять компенсированную информацию представления, укрепляемое на голове устройство отображения может отобразить принятую информацию представления как есть. В результате можно упростить конфигурацию укрепляемого на голове устройства отображения.
[0019] (12) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что устройство обработки информации дополнительно включает в себя блок управления этапами, который передает информацию заданного этапа блоку формирования и который изменяет этап, который будет передан, на основе множественных фрагментов информации медицинских устройств, полученных блоком сбора данных, и блок формирования формирует информацию представления, которая содержит принятый этап. В устройстве обработки информации в соответствии с этим аспектом блок управления этапами передает информацию заданного этапа блоку формирования, и блок формирования формирует информацию представления, которая содержит принятый этап. Поэтому устройство обработки информации может отобразить заданный этап на множестве устройств отображения изображения, соединенных с устройством обработки информации. Блок управления этапами изменяет этап, который будет передан, на основе множественных фрагментов информации медицинских устройств, которые получены блоком сбора данных. Поэтому устройство обработки информации может изменить этап, который будет отображен на множестве устройств отображения изображения, на основе множественных фрагментов информации медицинских устройств, которые получены множеством медицинских устройств. В результате возможно обеспечить устройство обработки информации, которое может гибко изменять заданный этап на основе информации медицинских устройств и может направить каждого пользователя устройства отображения изображения через этап.
[0020] (13) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что блок управления этапами с повторениями получает множественные фрагменты информации медицинских устройств и изменяет этап, который будет передан блоку формирования, на основе множественных фрагментов последней информации медицинских устройств. В устройстве обработки информации в соответствии с этим аспектом блок управления этапами с повторениями получает множественные фрагменты информации медицинских устройств и изменяет этап, который будет передан блоку формирования, на основе множественных фрагментов последней информации медицинских устройств. Поэтому устройство обработки информации может изменить этап, который будет отображен на множестве устройств отображения изображения, в режиме реального времени на основе множественных фрагментов информации медицинских устройств, которые получены от множества медицинских устройств.
[0021] (14) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что блок управления этапами передает блоку формирования информацию последовательности заданных этапов, которая сформирована из множества этапов, и блок управления этапами изменяет этапы, выполняя по меньшей мере одну из следующих процедур: добавление нового этапа к последовательности этапов, удаление по меньшей мере части этапов из последовательности этапов и замена по меньшей мере части этапов в последовательности этапов. В устройстве обработки информации в соответствии с этим аспектом блок управления этапами может изменять этапы, выполняя по меньшей мере одну из следующих процедур: добавление нового этапа к последовательности этапов, удаление по меньшей мере части этапов из последовательности этапов и замена по меньшей мере части этапов в последовательности этапов.
[0022] (15) Устройство обработки информации в соответствии с этим описанным выше аспектом может быть выполнено таким образом, что блок управления этапами последовательно передает блоку формирования последовательность заданных этапов один за другим, которая сформирована из множества этапов, и блок управления этапами изменяет этапы посредством остановки передачи единственного этапа. В устройстве обработки информации в соответствии с этим аспектом блок управления этапа может изменять этапы посредством остановки передачи этапа.
[0023] (16) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что в первом режиме блок управления этапами передает этапы для пользователя заданного устройства отображения изображения блоку формирования. В устройстве обработки информации в соответствии с этим аспектом в первом режиме блок управления этапами передает этапы для пользователя заданного устройства отображения изображения блоку формирования. Поэтому устройство обработки информации может отобразить общие "этапы для пользователя заданного устройства отображения изображения" на множестве устройств отображения изображения.
[0024] (17) Устройство обработки информации в соответствии с описанным выше аспектом может быть выполнено таким образом, что во втором режиме блок управления этапами передает блоку формирования этапы, которые соответствуют ролям пользователей. В устройстве обработки информации в соответствии с этим аспектом во втором режиме блок управления этапами передает блоку формирования этапы, которые соответствуют ролям пользователей. Поэтому устройство обработки информации может индивидуально отобразить "этапы, которые соответствуют ролям пользователей устройств отображения изображения" на множестве устройств отображения изображения.
[0025] (18) Другой аспект изобретения обеспечивает систему обработки информации. Система обработки информации включает в себя множество медицинских устройств; устройство обработки информации; и множество укрепляемых на голове устройств отображения, на каждом из которых пользователь может видеть виртуальное изображение и внешнюю обстановку. Устройство обработки информации включает в себя блок сбора данных, который получает множественные фрагменты информации медицинских устройств, которые получены от множества медицинских устройств; блок формирования, который формирует информацию представления, которая содержит по меньшей мере часть множественных фрагментов информации медицинских устройств, полученных блоком сбора данных; и блок представления, который выводит сформированную информацию представления множеству укрепляемых на голове устройств отображения. Укрепляемое на голове устройство отображения включает в себя блок получения информации представления, который получает информацию представления из устройства обработки информации; и блок отображения изображения, на котором пользователь укрепляемого на голове устройства отображения просматривает полученную информацию представления как виртуальное изображение. В системе обработки информации в соответствии с аспектом возможно объединить информацию различных медицинских устройств (информацию медицинских устройств) с использованием устройства обработки информации и можно реализовать систему обработки информации, в которой можно управлять отображением на множестве укрепляемых на голове устройств отображения.
[0026] Не все из множества элементов конфигурации каждого аспекта изобретения являются существенными. Можно должным образом изменить, удалить, заменить часть из множества элементов конфигурации новыми элементами конфигурации или удалить часть ограниченного содержания, чтобы решить часть или все проблемы, или достигнуть части или всех преимуществ, описанных в этом описании. Часть или все технические характеристики, содержащиеся в одном аспекте изобретения, могут быть объединены с частью или всеми техническими характеристиками, содержащимися в других аспектах изобретения, или могут являться независимым аспектом изобретения для решения части или всех проблем или достижения части или всех преимуществ, описанных в этом описании.
[0027] Например, аспект изобретения может быть реализован как устройство, которое включает в себя часть или все три элемента конфигурации, которыми являются блок сбора данных, блок формирования и блок представления. Таким образом, устройство может включать или не включать в себя блок сбора данных. Устройство может включать или не включать в себя блок формирования. Устройство может включать или не включать в себя блок представления. Например, устройство может быть реализовано как устройство обработки информации, но устройство также может быть реализовано как устройства, отличающиеся от устройства обработки информации. Часть или все технические характеристики каждого аспекта устройства обработки информации могут быть применены к любому устройству.
[0028] Изобретение может быть реализовано в различных формах. Например, возможно реализовать изобретение в следующих формах: устройство обработки информации; способ обработки информации; система обработки информации; укрепляемое на голове устройство отображения; способ управления укрепляемым на голове устройством отображения; система головного дисплея; компьютерная программа для реализации функций способов, устройств и систем, носитель записи, на котором записана компьютерная программа, и т.п.
Краткое списание чертежей
[0029] Фиг. 1 - схема, иллюстрирующая схематическую конфигурацию системы обработки информации в соответствии с вариантом осуществления изобретения.
Фиг. 2 - блок-схема, иллюстрирующая функциональную конфигурацию устройства обработки информации.
Фиг. 3 - таблица, иллюстрирующая пример общей видеоспецификации.
Фиг. 4 - таблица, иллюстрирующей пример таблицы управления.
Фиг. 5 - блок-схема, иллюстрирующая функциональную конфигурацию головного дисплея.
Фиг. 6 - блок-схема последовательности операций, иллюстрирующей процедуры процесса формирования информации представления...
Фиг. 7А иллюстрирует вид, описывающий способ формирования информации представления.
Фиг. 7В иллюстрирует вид, описывающий способ формирования информации представления.
Фиг. 8 - вид, описывающий способ формирования информации представления.
Фиг. 9А иллюстрирует вид, показывающий первый пример информации представления.
Фиг. 9В иллюстрирует вид, показывающий первый пример информации представления.
Фиг. 10А иллюстрирует вид, показывающий второй пример информации представления.
Фиг. 10B иллюстрирует вид, показывающий второй пример информации представления.
Фиг. 11 - вид, иллюстрирующий третий пример информации представления.
Фиг. 12 - вид, иллюстрирующий состояние, в котором информация представления отображается как виртуальное изображение на множестве головных дисплеев.
Фиг. 13 - вид, иллюстрирующий состояние, в котором информация представления отображается как виртуальное изображение на множестве головных дисплеев, которые помещены в разные места.
Фиг. 14 - вид, иллюстрирующий состояние, в котором информация представления отображается как виртуальное изображение на множестве головных дисплеев после того, как этапы S122-S134 исполнены два раза.
Фиг. 15 - блок-схема, иллюстрирующая функциональную конфигурацию устройства обработки информации в соответствии со вторым вариантом осуществления.
Фиг. 16 - блок-схема последовательности операций, иллюстрирующая процедуры процесса формирования объединенной информации.
Фиг. 17 - вид, описывающий способ формирования объединенной информации.
Фиг. 18 - вид, иллюстрирующий состояние, в котором объединенная информация отображается как виртуальное изображение на головном дисплее.
Фиг. 19 - блок-схема, иллюстрирующая функциональную конфигурацию устройства обработки информации в соответствии с третьим вариантом осуществления.
Фиг. 20 - схема, иллюстрирующая пример информации этапов.
Фиг. 21 - таблица, иллюстрирующая пример информации экстренных действий.
Фиг. 22 - блок-схема последовательности операций, иллюстрирующая процедуры процесса управления этапами.
Фиг. 23А иллюстрирует вид, показывающий внешнюю конфигурацию каждого головного дисплея в примерах модификации.
Фиг. 23В иллюстрирует вид, показывающий внешнюю конфигурацию каждого головного дисплея в примерах модификации.
Осуществление изобретения
[0030] А. Первый вариант осуществления
А-1. Конфигурация системы обработки информации
Фиг. 1 является схемой, иллюстрирующей схематическую конфигурацию системы 1000 обработки информации в соответствии с вариантом осуществления изобретения. Система 1000 обработки информации включает в себя множество медицинских устройств 501-50n, устройство 300 обработки информации и устройство 100 отображения изображений. Система 1000 обработки информации является системой, используемой в медицинском помещении. Устройство 300 обработки информации получает информацию из множества медицинских устройств 501-50n, объединяет информацию и формирует информацию представления, которая будет отображена на устройстве 100 отображения изображений. Медицинские устройства 501-50n и устройство 100 отображения изображений соединены с устройством 300 обработки информации проводным соединением или беспроводным соединением. В дальнейшем n используется в качестве буквы, указывающей "множество с произвольным количеством". n является целым числом, равным или больше 1.
[0031] В варианте осуществления в качестве медицинского помещения проиллюстрирован операционный участок в операционной комнате. Однако система 1000 обработки информации может использоваться во врачебном кабинете, процедурном кабинете, лечебной палате, родильной палате и т.п. В варианте осуществления укрепляемое на голове устройство отображения проиллюстрировано как устройство 100 отображения изображений. Однако устройство 100 отображения изображений может представлять собой стационарный дисплей, переносной дисплей, смартфон и т.п. В дальнейшем укрепляемое на голове устройство 100 отображения также упоминается как "головной дисплей 100 (HMD)". На фиг. 1 проиллюстрирован единственный головной дисплей 100. Однако, как проиллюстрировано на фиг. 2, которая будет описана ниже, множество головных дисплеев 100а-100n может быть соединено с устройством 300 обработки информации.
[0032] В последующем описании, когда головные дисплеи 100а-100n не определяются отдельно и описываются в целом, головные дисплеи 100а-100n просто упоминаются как "головной дисплей 100". Аналогичным образом, когда медицинские устройства 501-50n не определяются отдельно и описываются в целом, медицинские устройства 501-50n просто упоминаются как "медицинское устройство 500".
[0033] Медицинские устройства 501-50n представляют собой различные устройства для медицинского использования. Например, в качестве медицинских устройств 501-50n могут использоваться следующие устройства: камера видимого света для фотографирования неподвижных изображений внутри помещения и вне помещения и динамических изображений внутри помещения и вне помещения, камера видимого света для фотографирования неподвижных и динамических изображений оперируемого участка, устройство электрокардиографического исследования, хирургический таймер, биологический монитор, измеритель частоты сердечных сокращений, пульсотахометр, измеритель кровяного давления, устройство ультразвукового исследования, пульсоксиметр, измеритель глюкозы в крови, устройство получения фотографических изображений с помощью компьютерной томографии (СТ), устройство получения фотографических изображений с помощью магнитно-резонансной томографии (MRI), устройство получения фотографических изображений с помощью рентгеновского излучения, флюороскопическое устройство получения фотографических изображений, эндоскопическое устройство получения фотографических изображений, термографическое устройство получения фотографических изображений и т.п.
[0034] А-2. Конфигурация устройства обработки информации Фиг. 2 является блок-схемой, иллюстрирующей функциональную конфигурацию устройства 300 обработки информации. Устройство 300 обработки информации включает в себя первый блок 310 ввода/вывода, постоянное запоминающее устройство 320 (ROM), оперативное запоминающее устройство 330 (RAM), интерфейс 340 связи, центральный процессор 350 и внешнее устройство 380 хранения. Блоки соединены друг с другом через шину.
[0035] Первый блок 310 ввода/вывода в качестве блока сбора данных включает в себя множество первых блоков 311-31n ввода/вывода. Например, первые блоки 311-31n ввода/вывода представляют собой следующие интерфейсы ввода/вывода, соответствующими стандарту связи: USB (универсальная последовательная шина), HDMI (мультимедийный интерфейс высокого разрешения), DVI (цифровой видеоинтерфейс), VGA (видеографическая матрица), композитный, RS-232C (рекомендованный стандарт 232), инфракрасный луч, ближняя беспроводная связь (например, Bluetooth (зарегистрированная торговая марка)), беспроводная локальная сеть (LAN) (например, IEEE802.11), проводная локальная сеть (например, IEEE802.3) и т.п. Первые блоки 311-31n ввода/вывода соответственно получают информацию, вводимую от медицинских устройств 501-50n, которые соответственно соединены с ними. Информация, введенная от медицинского устройства, представляет собой информацию, измеренную или сфотографированную медицинским устройством. В дальнейшем эта информация также упоминается как "информация медицинского устройства".
[0036] В варианте осуществления первый блок 311 ввода/вывода представляет собой интерфейс ввода/вывода, соответствующий стандарту DVI. Первый блок 312 ввода/вывода представляет собой интерфейс ввода/вывода, соответствующий стандарту HDMI. Первый блок 313 ввода/вывода представляет собой интерфейс ввода/вывода, соответствующий стандарту HDMI. Первый блок 31n представляет собой интерфейс ввода/вывода, соответствующий беспроводной локальной сети. На фиг. 2 медицинское устройство 501 и стационарный дисплей 700 соединены с первым блоком 311 ввода/вывода. Аналогичным образом, медицинское устройство 502 соединено с первым блоком 312 ввода/вывода, медицинское устройство 503 соединено с первым блоком 313 ввода/вывода, и медицинское устройство 50n соединено с первым блоком 31n ввода/вывода. Таким образом, первый блок 310 ввода/вывода выполнен с возможностью иметь первые блоки 311-31n ввода/вывода, соответствующие разным типам стандартов связи. Поэтому возможно соединить медицинские устройства, соответствующие разным стандартам связи, и первый блок 310 ввода/вывода и возможно улучшить универсальность устройства 300 обработки информации. Первый блок 310 ввода/вывода также может выводить на устройство отображения, такое как дисплей 700, входной сигнал как он есть.
[0037] Интерфейс 340 связи (I/F) представляет собой интерфейс проводной локальной сети. Интерфейс 340 связи с возможностью связи соединен с доктором PR во внешнем учреждении и с устройством 300 обработки информации через Интернет-линию INT. Интерфейс 340 связи с возможностью связи соединяет базу OD данных, соединенную с больничной локальной сетью, и устройство 300 обработки информации через интранет. Например, предполагается, что доктор PR является доктором, который контролирует пользователя головного дисплея 100, который соединен с устройством 300 обработки информации, или является сторонним экспертом. База OD данных хранит процедурную информацию, иллюстрирующую лечебную процедуру, такую как операция, электронную систему медицинской документации, электронные академические книги и т.п.
[0038] Центральный процессор 350 развертывает и исполняет компьютерную программу, хранящуюся в постоянном запоминающем устройстве 320, в оперативном запоминающем устройстве 330, чтобы, таким образом, управлять устройством 300 обработки информации. Центральный процессор 350 реализует каждую функцию блока 360 формирования и второго блока 370 ввода/вывода. Блок 360 формирования формирует информацию представления, которая будет отображена на головном дисплее 100, посредством исполнения процесса формирования информации представления, который будет описан ниже. Блок 360 формирования варианта осуществления имеет следующие два режима в качестве режимов обработки в процессе формирования информации представления.
(1) Первый режим, в котором формируется общая информация представления.
(2) Второй режим, в котором формируются множественные фрагменты информации представления, которые соответствуют головным дисплеям 100а-100n.
[0039] Второй блок 370 ввода/вывода в качестве блока представления включает в себя множество вторых блоков 371-37n ввода/вывода. Аналогично первому блоку 310 ввода/вывода вторые блоки 371-37n ввода/вывода представляют собой интерфейсы ввода/вывода, соответствующие различным стандартам связи. Поскольку подробные сведения совпадают с подробными сведениями для первого блока 310 ввода/вывода, их описания будут опущены.
[0040] В варианте осуществления второй блок 371 ввода/вывода и второй блок 372 ввода/вывода представляют собой интерфейсы ввода/вывода, соответствующие беспроводной локальной сети. Второй блок 37 3 ввода/вывода представляет собой интерфейс ввода/вывода, соответствующий USB. Второй блок 37n ввода/вывода представляет собой интерфейс ввода/вывода, соответствующий DVI. На фиг. 2 головной дисплей 100а в качестве устройства отображения изображения соединен со вторым блоком 371 ввода/вывода. Аналогичным образом, головной дисплей 100b соединен со вторым блоком 372 ввода/вывода, головной дисплей 100с соединен со вторым блоком 373 ввода/вывода, и головной дисплей 100n соединен со вторым блоком 37n ввода/вывода. Таким образом, второй блок 370 ввода/вывода выполнен с возможностью иметь вторые блоки 371-37n ввода/вывода, соответствующие разным типам стандартов связи. Поэтому возможно соединить головные дисплеи, соответствующие разным стандартам связи, и второй блок 370 ввода/вывода и возможно улучшить универсальность устройства 300 обработки информации.
[0041] Внешнее устройство 380 хранения выполнено с возможностью иметь постоянное запоминающее устройство, оперативное запоминающее устройство, оперативное запоминающее устройство (DEAM), жесткий диск, флэш-память и т.п., которые не проиллюстрированы. Внешнее устройство 380 хранения хранит общую видеоспецификацию 381, таблицу 382 управления, информацию 383 невидимых частей в качестве блока хранения информации невидимых частей, операционную запись 384 и операционный режим 385.
[0042] Фиг. 3 является таблицей, иллюстрирующей пример общей видеоспецификации 381. Общая видеоспецификация 381 представляет собой таблицу, которая определяет стандартную спецификацию относительно видеосигнала информации представления. Общая видеоспецификация 381 используется, когда блок 360 формирования формирует информацию представления в процессе формирования информации представления.
[0043] Общая видеоспецификация 381 варианта осуществления включает в себя количество пикселей, соотношение сторон и разрешение изображения, содержащегося в видеосигнале, способ сжатия изображения и способ кодирования изображения в качестве спецификации видеосигнала. Общая видеоспецификация 381 определяется заранее и сохраняется во внешнем устройстве 380 хранения. Когда определяется общая видеоспецификация 381, предпочтительно принимаются во внимание технические требования видеосигнала, которые применяются головными дисплеями 100а-100n, соединенными со вторым блоком 370 ввода/вывода.
[0044] Фиг. 4 является таблицей, иллюстрирующей пример таблицы 382 управления. Таблица 382 управления в качестве блока хранения ролей и блока хранения отношений между устройствами представляет собой таблицу для управления информацией головного дисплея 100, соединенного со вторым блоком 370 ввода/вывода, в частности, для управления информацией головных дисплеев 100а-100n, которые соответственно соединены со вторыми блоками 371-37n ввода/выгода. Таблица 382 управления используется, когда блок 360 формирования формирует информацию представления в процессе формирования информации представления, а также используется, когда вторые блоки 371-37n ввода/вывода передают информацию представления головным дисплеям 100а-100n соответственно.
[0045] Идентификатор, отношения между устройствами, роль и видеоспецификация сохранены в таблице 382 управления варианта осуществления в связи друг с другом. "Идентификатор" хранит каждый уникальный идентификатор для индивидуальной идентификации головных дисплеев 100, соединенных со вторыми блоками 370 ввода/вывода. "Отношения между устройствами" хранят строку букв, указывающую отношения "главный/подчиненный" между множеством головных дисплеев 100а-100n, которые соединены со вторыми блоками 370 ввода/вывода. В варианте осуществления один головной дисплей 100 устанавливается как "главный", и другие головные дисплеи 100 устанавливаются как "подчиненные". "Роль" хранит строку букв, указывающую роль, которую пользователь головного дисплея 100, идентифицированного идентификатором, берет на себя в медицинском помещении. "Видеоспецификация" хранит строку букв, указывающую шаблон спецификаций (количество пикселей, соотношение сторон, разрешение изображения, содержащегося в видеосигнале, способ сжатия изображения, способ кодирования изображения и т.п.) видеосигнала в головном дисплее 100, который идентифицирован идентификатором.
[0046] В примере, проиллюстрированном на фиг. 4, пользователь головного дисплея 100, идентифицированного идентификатором "1", является "оперирующим хирургом", и видеоспецификацией головного дисплея 100 является "спецификация А" (запись Е01). Аналогичным образом, пользователь головного дисплея 100, идентифицированного идентификатором "n", является "медсестрой", и видеоспецификацией головного дисплея 100 является "спецификация Е" (запись E0n). В примере, проиллюстрированном на фиг. 4, головной дисплей 100, идентифицированный идентификатором "1", является "главным", и головные дисплеи 100, идентифицированные другими идентификаторами, являются "подчиненными" (записи Е01-E0n).
[0047] Таблица 382 управления может быть определена заранее и сохранена во внешнем устройстве 380 хранения. В качестве альтернативы таблица 382 управления может быть автоматически сформирована в начальном процессе, когда головной дисплей 100 соединяется с устройством 300 обработки информации. В частности, например, когда блок 360 формирования обнаруживает соединение головного дисплея 100 и второго блока 370 ввода/вывода, блок 360 формирования задает уникальный идентификатор головному дисплею 100 и получает назначение "главного/подчиненного", роль пользователя и видеоспецификацию из головного дисплея 100. Блок 360 формирования сохраняет заданный идентификатор, назначение "главного/подчиненного", полученную роль и полученную видеоспецификацию в таблице 382 управления. Начальный процесс выполняется каждый раз, когда головные дисплеи 100а-100n соответственно соединяются со вторыми блоками 370 ввода/вывода, и, таким образом, блок 360 формирования может автоматически формировать таблицу 382 управления.
[0048] Как описано выше, "отношения между устройствами" в таблице 382 управления получаются от головного дисплея 100. Кроме того, например, "отношения между устройствами" могут быть определены следующими способами.
* "Отношения между устройствами" определяются на основе роли, которая получена от головного дисплея 100. Например, блок 360 формирования устанавливает головной дисплей 100 оперирующего хирурга как "главный" и устанавливает головные дисплеи 100 остальных пользователей как "подчиненные".
* "Отношения между устройствами" определяются на основе получения информации текущей позиции головного дисплея 100 и позиционных отношений между головными дисплеями. Например, блок 360 формирования получает информацию текущей позиции головного дисплея 100. Блок 360 формирования устанавливает головной дисплей 100, размещенный ближе всего к центру операционного стола как "главный" и устанавливает другие головные дисплеи 100 как "подчиненные".
* "Отношения между устройствами" определяются на основе различий аппаратных и программных конфигураций головного дисплея 100. Например, блок 360 формирования получает номер модели головного дисплея 100. Блок 360 формирования устанавливает головной дисплей 100 с конкретным номером модели как "главный" и устанавливает другие головные дисплеи 100 как "подчиненные".
[0049] Как описано выше "роль" в таблице 382 управления получается от головного дисплея 100. Кроме того, например, "роль" может быть определена следующими способами.
* "Роль" определяется на основе информации текущей позиции головного дисплея 100. Например, внешнее устройство 380 хранения устройства 300 обработки информации предварительно хранит информацию схемы расположения, которая содержит схему расположения оборудования (операционного стола и медицинского устройства 500) в операционной комнате и схему расположения позиций сотрудников на основе их ролей в операционной комнате. Блок 360 формирования получает информацию текущей позиции головного дисплея 100 и сравнивает полученную информацию текущей позиции с информацией схемы расположения, и, таким образом, определяется роль пользователя головного дисплея 100.
* "Роль" определяется на основе изображения (изображения внешней обстановки) в направлении поля зрения пользователя головного дисплея 100. Блок 360 формирования получает изображение внешней обстановки из головного дисплея 100 и распознает изображение внешней обстановки. В соответствии с этим блок 360 формирования определяет тип медицинского устройства 500, тип оборудования в операционной комнате, части тела пациента и т.п., которые видит пользователь. Блок 360 формирования определяет роль пользователя головного дисплея 100 на основе указанной информации.
[0050] Информация 383 невидимых частей (блок хранения информации невидимых частей), проиллюстрированная на фиг. 2, хранит информацию невидимых частей, которая не появляется во внешнем виде объекта. Информация невидимых частей представляет собой информацию изображения или символьную информацию, иллюстрирующую структуру объекта. Когда объект является живым организмом, информация невидимых частей представляет собой, например, изображение СТ, изображение MRI, рентгеновское изображение, флюороскопическое изображение, ультразвуковое диагностическое изображение, эндоскопическое изображение или термографическое изображение и символьную информацию, свойственную изображению. Информация невидимых частей сфотографирована заранее и сохранена в информации 383 невидимых частей.
[0051] Операционная запись 384, проиллюстрированная на фиг. 2, представляет собой записывающий блок, который записывает информацию медицинских устройств, полученную устройством 300 обработки информации, и информацию представления, сформированную устройством 300 обработки информации, совместно с датой и временем, когда информация получена или сформирована. Информация медицинских устройств, полученная устройством 300 обработки информации, указывает информацию медицинских устройств, которую устройство 300 обработки информации получает от множества медицинских устройств 501-50n, которые соответственно соединены с первыми блоками 311-31n ввода/вывода. Информация представления, сформированная устройством 300 обработки информации, указывает всю информацию представления, которую блок 360 формирования формирует в процессе формирования информации представления. Запись информации, полученной и сформированной устройством 300 обработки информации, может быть расценена, как в значительной степени то же самое, что и журнал операции (диагноз, терапия или лечение). В соответствии с этим, таким образом, после окончания операции и т.п. можно использовать журнал операции при анализе содержания операции, учебных и академических целей и т.п.
[0052] Операционный режим 385, проиллюстрированный на фиг. 2, хранит режим обработки (то есть, операционный режим блока 360 формирования) в процессе формирования информации представления блока 360 формирования. Содержание операционного режима 385 может быть изменено устройством ввода, которое включает в себя устройство 300 обработки информации и которое не проиллюстрировано. Содержание операционного режима 385 также может быть изменено командой изменения с головного дисплея 100.
[0053] А-3. Конфигурация головного дисплея
Фиг. 5 является блок-схемой, иллюстрирующей функциональную конфигурацию головного дисплея 100а. В дальнейшем головной дисплей 100а проиллюстрирован и описан в качестве примера конфигурации головного дисплея 100. Головной дисплей 100а является укрепляемым на голове устройством отображения с оптическим пропусканием, на котором пользователь может видеть виртуальное изображение и одновременно может непосредственно видеть внешнюю обстановку. Информация представления, полученная от устройства 300 обработки информации, отображается как виртуальное изображение на головном дисплее 100а. Головной дисплей 100а включает в себя блок 20 отображения изображения, на котором пользователь видит виртуальное изображение в состоянии, когда пользователь носит головной дисплей 100а на голове, и блок 10 управления, который управляет блоком 20 отображения изображения. Различные сигналы передаются между блоком 20 отображения изображения и блоком 10 управления через кабель 40.
[0054] А-3-1. Конфигурация блока управления
Блок 10 управления включает в себя следующие блоки: блок 100 получения входной информации, который получает операционный ввод в устройство ввода, такое как сенсорная панель, перекрестный ключ, педальный переключатель, устройство жестового ввода или микрофон; блок 120 хранения, выполненный с возможностью иметь постоянное запоминающее устройство, жесткий диск и т.п.; источник 130 питания, который подает электропитание на каждый блок головного дисплея 100а; блок 132 беспроводной связи, который беспроводным образом взаимодействует с другими устройствами в соответствии с заданным стандартом беспроводной связи, таким как беспроводная локальная сеть, Bluetooth и т.п.; блок 134 получения текущей позиции; центральный процессор 140; интерфейс 180, который соединяет устройство 300 обработки информации и различные внешние устройства OA; и передающие блоки (Тх) 51 и 52. Блоки соединены друг с другом через шину, которая не проиллюстрирована. Блок 134 получения текущей позиции обнаруживает текущую позицию пользователя головного дисплея 100а, принимая сигнал от спутника GPS, и формирует информацию текущей позиции, указывающую текущую позицию пользователя. Блок 134 получения текущей позиции может формировать информацию текущей позиции, принимая радиоволны от множества базовых станций и определяя интенсивность принятых радиоволн. Например, информация текущей позиции может быть реализована посредством координаты, указывающей широту/долготу. Аналогично первому блоку 310 ввода/вывода устройства 300 обработки информации интерфейс 180 может соответствовать различным стандартам связи.
[0055] Центральный процессор 140 считывает и исполняет компьютерную программу, хранящуюся в блоке 120 хранения, и, таким образом, функционирует как следующие блоки: операционная система (OS) 150; блок 160 обработки изображений; блок 170 обработки речи, который подает речевые сигналы на динамики правого наушника 32 и левого наушника 34; и блок 190 управления отображением. Блок 160 обработки изображений формирует сигнал на основе видеосигнала информации представления, которая вводится через интерфейс 180 как блок получения информации представления или блок 132 беспроводной связи. Блок 160 обработки изображений подает сформированный сигнал в блок 20 отображения изображения через передающие блоки 51 и 52 и кабель 40 и, таким образом, управляет отображением на блоке 20 отображения изображения. Сигнал, поданный на блок 20 отображения изображения, может являться аналоговым сигналом или цифровым сигналом, которые широко известны. Блок 190 управления отображением формирует управляющий сигнал для управления блоком 22 приведения в действие правого дисплея и блоком 24 приведения в действие левого дисплея блока 20 отображения изображения, и управляющий сигнал передается через передающие блоки 51 и 52. Управляющий сигнал является отдельным сигналом, через который блок 211 управления правым LCD включает или выключает приведение в действие правого LCD 241, через который блок 201 управления правой подсветкой включает или выключает приведение в действие правой подсветки 221, через который блок 212 управления левым LCD включает или выключает приведением в действие левого LCD 242 и через который блок 202 управления левой подсветкой 202 включает или выключает приведение в действие левой подсветки 222.
[0056] А-3-2. Конфигурация блока отображения изображения
Блок 20 отображения изображения представляет собой укрепляемый элемент, который пользователь носит на голове. В варианте осуществления блок 20 отображения изображения имеет форму очков. Блок 20 отображения изображения включает в себя блок 22 приведения в действие правого дисплея и блок 24 приведения в действие левого дисплея, которые формируют и излучают свет изображения для изображения; правый оптический блок 26 отображения изображения и левый оптический блок 28 отображения изображения (см. фиг. 2), которые проводят свет изображения к обоим глазам пользователя; камеру 61 в качестве блока получения изображения и девятиосный датчик 66.
[0057] Блок 22 приведения в действие правого дисплея включает в себя принимающий блок (Rx) 53; блок 201 управления правой подсветкой (BL) и правую подсветку (BL) 221, которые функционируют как источники света; блок 211 управления правым LCD (жидкокристаллическим дисплеем) и правый LCD 241, которые функционируют как отображающий элемент; и правую проекционную оптическую систему 251. Блок 201 управления правой подсветкой приводит в действие правую подсветку 221 на основе управляющего сигнала, который вводится через принимающий блок 53. Правая подсветка 221 представляет собой излучающий свет элемент, такой как светодиод (LED) или электролюминесцентный (EL) элемент. Блок 211 управления правым LCD приводит в действие правый LCD 241 на основе входного видеосигнала. Правый LCD 241 представляет собой пропускающую жидкокристаллическую панель, на которой множество пикселей размещены в форме матрицы. Правый LCD 241 управляет жидким кристаллом в позиции каждого из пикселей, которые размещены в форме матрицы. В соответствии с этим правый LCD 241 изменяет коэффициент пропускания света, который проходит через правый LCD 241, и модулирует свет освещения, испускаемый от правой подсветки 221, преобразовывая его в свет действительного изображения для изображения. Правая проекционная оптическая система 251 выполнена с возможностью иметь коллимирующую линзу, которая преобразовывает свет изображения, излучаемый из правого LCD 241, в параллельные световые потоки. Блок 24 приведения в действие левого дисплея имеет такую же конфигурацию, как конфигурация блока 22 приведения в действие правого дисплея, и функционирует аналогично блоку 22 приведения в действие правого дисплея.
[0058] Правый оптический блок 26 отображения изображения и левый оптический блок 28 отображения изображения размещены таким образом, что они помещаются перед правым и левым глазами пользователя, когда пользователь носит блок 20 отображения изображения (см. фиг. 2). Правый оптический блок 26 отображения изображения включает в себя правую световодную пластину 261, сформированную из пропускающего свет полимерного материала и т.п. Правая световодная пластина 261 отражает свет изображения вдоль заданного оптического пути, чтобы провести свет изображения, исходящий из блока 22 приведения в действие правого дисплея, к правому глазу RE пользователя. Дифракционная решетка или полупропускающая отражающая пленка могут использоваться в правой световодной пластине 261. Левый оптический блок 28 отображения изображения имеет такую же конфигурацию, как конфигурация правого оптического блока 26 отображения изображения, и функционирует аналогично правому оптическому блоку 26 отображения изображения. Таким образом, свет изображения, проводимый к обоим глазам пользователя головного дисплея 100а, фокусируется на сетчатках пользователя, и, таким образом, пользователь может видеть виртуальное изображение. Пользователь головного дисплея 100а варианта осуществления может одновременно видеть виртуальное изображение и внешнюю обстановку на фоне виртуального изображения в участке поля зрения, где отображается виртуальное изображение. В участке поля зрения, где виртуальное изображение не отображается, пользователь может непосредственно видеть внешнюю обстановку через правый оптический блок 26 отображения изображения и левый оптический блок 28 отображения изображения.
[0059] Девятиосный датчик 66 представляет собой датчик движения, который обнаруживает ускорение (три оси), угловые скорости (три оси) и геомагнетизм (три оси). Когда пользователь носит блок 20 отображения изображения на голове, девятиосный датчик 66 функционирует как блок обнаружения перемещения, который обнаруживает перемещение головы пользователя головного дисплея 100а. При этом перемещение головы включает в себя изменения скорости, ускорения, угловой скорости, направления и ориентации головы. Ориентация головы также упоминается как "информация ориентации". Камера 61 в качестве блока получения изображений поля зрения размещена в позиции, которая соответствует середине лба пользователя, когда пользователь носит блок 20 отображения изображения. Камера 61 фотографирует изображение внешней обстановки в переднем направлении блока 20 отображения изображения, другими словами, в направлении поля зрения пользователя в состоянии, когда пользователь носит головной дисплей 100а, и камера 61 получает изображение внешней обстановки. Камера 61 представляет собой так называемую камеру видимого света. Камера 61 варианта осуществления является монокулярной камерой, но может быть применена стереокамера.
[0060] А-4. Процесс формирования информации представления Фиг. 6 является блок-схемой последовательности операций, иллюстрирующей процедуры процесса формирования информации представления. Процесс формирования информации представления представляет собой процесс формирования информации представления, которая будет отображена на головном дисплее 100, и исполняется блоком 360 формирования устройства 300 обработки информации (см. фиг. 2). Процесс формирования информации представления разделен на первый режим, в котором формируется общая информация представления, и второй режим, в котором формируются множественные фрагменты информации представления, соответствующие головным дисплеям 100а-100n. Процесс, исполняемый во втором режиме, может быть в общих чертах разделен на начальный процесс этапов S120-S134 и индивидуальный процесс этапов S136-S142.
[0061] Блок 360 формирования подтверждает режим работы блока 360 формирования со ссылкой на содержание, которое сохранено в режиме 385 работы (этап S100).
[0062] А-4-1. Первый режим
Когда режимом работы является "первый режим" (этап S100: первый режим), блок 360 формирования получает главный головной дисплей 100 из таблицы 382 управления (этап S110). В частности, блок 360 формирования получает запись, у которой "отношение между устройствами" сохранено как "главный", со ссылкой на таблицу 382 управления, и блок 360 формирования получает "идентификатор" полученного элемента.
[0063] Блок 360 формирования получает запрос на выбор источника информации из главного головного дисплея 100 (этап S112). В частности, блок 360 формирования запрашивает у головного дисплея 100 с идентификатором, полученным на этапе S110, передать запрос на выбор источника информации. При этом, например, запрос на выбор источника информации указывает любой из запросов, перечисленных в следующих пунктах a1-а6:
(a1) Запрос на чтение информации медицинского устройства, полученной медицинским устройством 500;
(а2) Запрос на телефонный звонок доктору PR во внешнем учреждении;
(а3) Запрос на чтение данных, записанных в больничной базе OD данных;
(а4) Запрос на чтение данных, записанных в информации 383 невидимых частей;
(а5) Запрос на чтение данных, записанных в операционной записи 384;
(а6) Запрос на чтение информации медицинского устройства у медицинского устройства 500, блок отображения которого пользователь головного дисплея 100 может видеть с трудом.
[0064] Источником информации в запросе a1 является медицинское устройство 500. Аналогичным образом, источником информации в запросе а2 является доктор PR; источником информации в запросе а3 является база OD данных; источником информации в запросе а4 является информация 383 невидимых частей; источником информации в запросе а5 является операционная запись 384; и источником информации в запросе а6 является медицинское устройство 500, блок отображения которого пользователь может видеть с трудом. При этом, например, "медицинское устройство 500, блок отображения которого пользователь может видеть с трудом", является собирательным термином следующего медицинского устройства 500:
* медицинское устройство 500, блок отображения (дисплей и т.п.) которого пользователь не может видеть или может видеть с трудом, поскольку медицинское устройство 500 находится вне зоны видимости пользователя;
* медицинское устройство 500, блок отображения которого пользователь не может видеть или может видеть с трудом, поскольку медицинское устройство 500 находится в удаленном от пользователя месте;
* медицинское устройство 500, блок отображения которого пользователь не может видеть или может видеть с трудом, поскольку медицинское устройство 500 не находится вне зоны видимости пользователя и находится вблизи пользователя, но зрительная ось пользователя обращена к блоку отображения.
[0065] Запросы a1-а6 могут быть выданы индивидуально и могут быть объединены вместе. Однако в варианте осуществления запрос на получение источника информации включает в себя по меньшей мере запрос a1. Запрос на выбор источника информации должным образом задается на основе работы пользователя головного дисплея 100.
[0066] Головной дисплей 100 может передать запрос на выбор источника информации устройству 300 обработки информации, например, в соответствии со следующими процедурами b1-b5:
(b1) Пользователь головного дисплея 100 вводит требуемый источник информации и информацию для определения информации в источнике информации через устройство ввода (сенсорную панель, перекрестный ключ, педальный переключатель, устройство жестового ввода, микрофон и т.п.) головного дисплея 100. Если в качестве способа ввода применяется речевой ввод через микрофон, можно значительно улучшить удобство для пользователя, когда пользователю сложно управлять головным дисплеем 100 с помощью рук в медицинском помещении. В запросах a1-а6 не обязательно вводить "информацию для определения информации в источнике информации";
(b2) Блок 110 получения входной информации головного дисплея 100 получает сигнал на основе операционного ввода пользователя и передает сигнал операционной системе (OS) 150;
(b3) Операционная система 150 головного дисплея 100 формирует запрос на выбор источника информации. В частности, в запросе a1 операционная система 150 формирует запрос на выбор источника информации, который включает в себя идентификатор головного дисплея 100 и идентификатор для определения источника информации, указанный в процедуре b1. В запросах а2-а5 операционная система 150 формирует запрос на выбор источника информации, который включает в себя идентификатор головного дисплея 100, идентификатор для определения источника информации, назначенный в процедуре b1, и информацию для определения информации в источнике информации. В запросе а6 операционная система 150 формирует запрос на выбор источника информации, который включает в себя идентификатор головного дисплея 100 и информацию о текущей позиции и информацию об ориентации головного дисплея 100. Информация о текущей позиции и информация об ориентации используются для определения "медицинского устройства 500, блок отображения которого пользователь может видеть с трудом" в запросе а6;
(b4) Операционная система 150 головного дисплея 100 передает запрос на выбор источника информации, сформированный в процедуре b3, устройству 300 обработки информации, с которым операционная система 150 соединена через интерфейс 180 и блок 132 беспроводной связи;
(b5) Второй блок 370 ввода/вывода устройства 300 обработки информации передает принятый запрос на выбор источника информации блоку 360 формирования.
[0067] Блок 360 формирования получает информацию для определения источника информации и информацию для определения информации в источнике информации, которые содержатся в запросе на выбор источника информации, на этапе S114 в процессе формирования информации представления (см. фиг. 6). Кроме того, когда информация о текущей позиции и информация об ориентации вставлены в качестве информации для определения источника информации, блок 360 формирования сравнивает информацию о текущей позиции и информацию об ориентации с информацией о положении, полученной от всех других медицинских устройств 500, и блок 360 формирования определяет "медицинское устройство 500, блок отображения которого пользователь может видеть с трудом". Кроме того, на этапе S114 блок 360 формирования может определить "медицинское устройство 500, блок отображения которого пользователь может видеть с трудом", комбинируя информацию о текущей позиции и информацию об ориентации с перемещением (изменением скорости, ускорения, угловой скорости, направления и ориентации) головы пользователя, которая получена девятиосным датчиком 66 головного дисплея 100.
[0068] Блок 360 формирования осуществляет доступ к назначенному (указанному) источнику информации, чтобы получить назначенную информацию. Блок 360 формирования формирует общую информацию представления, подаваемую всем головным дисплеям 100, соединенных со вторыми блоками 370 ввода/вывода, с использованием полученной информации. Общая информация представления упоминается как "информация представления PN*". Блок 360 формирования сохраняет сформированную информацию представления PN* в операционной записи 384 (этап S116).
[0069] Фиг. 7А и 7В иллюстрируют виды, описывающие способ формирования информации представления. Когда единственная информация получена на этапе S116, блок 360 формирования формирует информацию представления PN, преобразовывая изображение, содержащееся в полученной информации СР1, в соответствии со спецификацией видеосигнала, определенной в общей видеоспецификации 381 (см. фиг. 7А). В частности, когда соотношение сторон изображения, содержащегося в полученной информации СР1, отличается от соотношения сторон изображения, определенного в общей видеоспецификации 381 во время преобразования, блок 360 формирования, увеличивает или уменьшает изображение, сохраняя при этом соотношение сторон изображения, содержащегося в полученной информации СР1. Затем поле (обозначенное штриховкой на фиг. 7А) формируется в продольном направлении или в боковом направлении информации представления PN.
[0070] Блок 360 формирования исполняет любую из следующих процедур c1 и с2 относительно поля. В соответствии с этим поле отображается как виртуальное изображение на головном дисплее 100, и, таким образом, возможно избежать блокировки поля зрения пользователя.
(c1) Блок 360 формирования вставляет данные черных фиктивных точек в поле информации представления PN.
(с2) Блок 360 формирования устанавливает сигнал (сигнал активации) в значение Lo (неактивное значение) относительно поля информации представления PN, и сигнал предназначен для выполнения переключения между активностью и неактивностью формирования света изображения в блоке 22 приведения в действие правого дисплея и блоке 24 приведения в действие левого дисплея головного дисплея 100.
[0071] Таким образом, соотношение сторон изображения, содержащегося в информации представления PN, не изменяется. Предпочтительно строго сохранять соотношение сторон изображения, сфотографированного медицинским устройством 500, таким образом, чтобы пользователь видел фактический не затронутый размер изображения (например, неподвижного изображения и динамического изображения, изображения СТ, изображения MRI или рентгеновского изображения оперируемого участка) в медицинском помещении, в котором используется устройство 300 обработки информации. В связи с этим, если соотношение сторон изображения, которое содержится в информации медицинского устройства СР1, полученной на этапе S116, сохраняется, и источником информации является медицинское устройство 500, возможно устранить нежелательное искажение информации медицинского устройства, измеренной или сфотографированной медицинским устройством 500. Фиг. 7В иллюстрирует информацию PNx представления, которая искажена, поскольку соотношение сторон изображения, содержащегося в полученной информации СР1, не сохраняется, и изображение увеличено до соотношения сторон изображения, определенного в общей видеоспецификации 381.
[0072] Фиг. 8 является видом, описывающим способ формирования информации представления. Когда множественные фрагменты информации получены на этапе S116, блок 360 формирования формирует первое изображение, в котором размещено изображение, содержащееся во всей полученной информации (в примерах, проиллюстрированных на фиг. 10А и 10В, в информации СР2 и СР3 медицинских устройств). При этом блок 360 формирования сохраняет соотношение сторон изображения, содержащегося в полученной информации. Изображение, содержащееся в полученной информации, предпочтительно размещено в оконечном участке первого изображения. Блок 360 формирования формирует информацию PN представления, преобразовывая сформированное первое изображение в соответствии со спецификацией видеосигнала, определенной в общей видеоспецификации 381 (см. фиг. 8). Блок 360 формирования исполняет любую процедуру способов c1 и с2 относительно поля (обозначенного штриховкой на фиг. 8), в котором изображение не размещено в первом изображении. В соответствии с этим поле отображается как виртуальное изображение на головном дисплее 100, и возможно избежать блокировки поля зрения пользователя.
[0073] Фиг. 9А и 9В иллюстрируют виды, показывающие первый пример информации представления. Фиг. 9А является примером информации PN представления, сформированной блоком 360 формирования, когда рентгеновское изображение (СР4) пациента, хранящееся в информации 383 невидимых частей, назначено в запросе на выбор источника информации. Такая же информация представления, как проиллюстрированная на фиг. 9А, формируется, когда медицинское устройство 500 (устройство фотографирования рентгеновского изображения), из которого может быть получена информация невидимых частей, назначено в запросе на выбор источника информации.
[0074] Фиг. 9В является примером информации PN представления, сформированной блоком 360 формирования, когда хирургический таймер назначен в качестве медицинского устройства 500, пульсотахометр назначен в качестве медицинского устройства 500, и биологический монитор назначен в качестве медицинского устройства 500 в запросе на выбор источника информации. Следующее размещено в каждом оконечном участке информации PN представления: настоящее время СР5, полученное от хирургического таймера, время СР7, прошедшее от начала хирургической операции, изображение СР6 пульса, полученное от пульсотахометра, и изображения СР8 сердечного ритма (HR), кровяное давление (SYS/DIA) и насыщение артериальной крови кислородом (SpO2), полученные от биологического монитора.
[0075] Фиг. 10А и 10В иллюстрируют виды, показывающие второй пример информации представления. Фиг. 10А является примером информации PN представления, сформированной блоком 360 формирования, когда академическая книга (СР9), хранящаяся в больничной базе OD данных, и информация процедуры операции (СР10), хранящаяся в больничной базе OD данных, назначены в запросе на выбор источника информации. Фиг. 10В является примером информации PN представления, сформированной блоком 360 формирования, когда камера видимого света для фотографирования неподвижного изображения и динамического изображения оперируемого участка назначены в качестве медицинского устройства 500, и телефонный вызов доктора PR во внешнем учреждении назначен в запросе на выбор источника информации.
[0076] Фиг. 11 является видом, иллюстрирующим третий пример информации представления. Фиг. 11 является примером информации PN представления, сформированной блоком 360 формирования, когда биологический монитор назначен в качестве медицинского устройства 500 в запросе на выбор источника информации. Биологический монитор, проиллюстрированный на фиг. 11, не включает в себя интерфейс, который может быть соединен с первым блоком 310 ввода/вывода. Однако, когда устройство 300 обработки информации выполнено с возможностью включать в себя камеру видимого света, и камера видимого света фотографирует экран (СР13) биологического монитора, как проиллюстрировано на фиг. 11, блок 360 формирования может формировать информацию PN представления с использованием информации медицинского устройства из медицинского устройства, которое не включает в себя интерфейс, который может быть соединен с первым блоком 310 ввода/вывода.
[0077] Когда информация PN представления сформирована, головной дисплей 100 может прямо или косвенно назначить "размещение", "размер" и "коэффициент пропускания" информации каждого источника информации в запросе на выбор источника информации. При этом "прямое назначение" означает, что головной дисплей 100 назначает численные значения, указывающие координату, в которой размещается каждая информация, и размер и коэффициент пропускания каждой информации. "Косвенное назначение" означает, что головной дисплей 100 назначает желаемый режим из режимов отображения, которые подготовлены заранее, например, из "режима приоритета внешней обстановки", в котором внешняя обстановка расположена с приоритетом, "режима приоритета изображения", в котором изображение расположено с приоритетом, и т.п. Например, когда назначен режим приоритета внешней обстановки, как проиллюстрировано на фиг. 8, блок 360 формирования формирует информацию PN представления таким образом, что информация размещена с небольшим размером в оконечном участке экрана, чтобы не создавать помеху в поле зрения пользователя в центре экрана. Когда назначен режим приоритета изображения, как проиллюстрировано на фиг. 9А, блок 360 формирования формирует информацию PN представления таким образом, что информация размещена с большим размером в центре экрана.
[0078] На этапе S118 процесса формирования информации представления (см. фиг. 6) блок 360 формирования передает сформированную информацию PN* представления всем вторым блокам 370 ввода/вывода (вторым блокам 371-37n ввода/вывода). Второй блок 371 ввода/вывода преобразовывает изображение, содержащееся в принятой информации PN* представления, в соответствии со спецификацией видеосигнала головного дисплея 100а. При этом второй блок 371 ввода/вывода может обратиться к "видеоспецификации" из таблицы 382 управления. После того, как преобразование выполнено в соответствии с видеоспецификацией, второй блок 371 ввода/вывода передает информацию PN* представления на головной дисплей 100а. Аналогичным образом, вторые блоки 372-37n ввода/вывода преобразовывают изображения, содержащиеся в принятой информации PN* представления, в соответствии со спецификациями видеосигнала головных дисплеев 100b-100n соответственно. Вторые блоки 372-37n ввода/вывода передают преобразованную информацию PN* представления на головные дисплеи 100b-100n соответственно.
[0079] Фиг. 12 является видом, иллюстрирующим состояние, в котором информация PN* представления соответственно отображена как виртуальное изображение на множестве головных дисплеев 100а-100b. Упомянутая выше обработка отображения выполняется блоком 160 обработки изображений головного дисплея 100а, который принимает информацию PN* представления, переданную от второго блока 371 ввода/вывода через интерфейс 180 или блок 132 беспроводной связи. В результате свет изображения, проводимый к обоим глазам пользователя головного дисплея 100а, фокусируется на сетчатках пользователя, и, таким образом, пользователь головного дисплея 100а может видеть информацию PN* представления как виртуальное изображение VI в поле VR зрения. Пользователь может непосредственно видеть, что пациент лежит на операционном столе (внешнюю обстановку SC) через правый оптический блок 26 отображения изображения и левый оптический блок 28 отображения изображения. Аналогичным образом, упомянутая выше обработка отображения выполняется блоком 160 обработки изображения головного дисплея 100b, который принимает информацию PN* представления, переданную от второго блока 372 ввода/вывода, и пользователь головного дисплея 100b может видеть информацию PN* представления как виртуальное изображение VI в поле VR зрения. В примере, проиллюстрированном на фиг. 12, информация CP медицинского устройства, полученная от медицинского устройства 502 для фотографирования неподвижного изображения и динамического изображения оперируемого участка, отображается в виртуальном изображении VI (PN*), видимом пользователем головного дисплея 100а и пользователем головного дисплея 100b.
[0080] Фиг. 13 является видом, иллюстрирующим состояние, в котором информация PN* представления отображена как виртуальные изображения на множестве головных дисплеев 100а и 100b, которые помещены в разные места. Как проиллюстрировано на фиг. 13, вторые блоки 370 ввода/вывода (вторые блоки 371-37n ввода/вывода) устройства 300 обработки информации могут выполнить процесс подгонки таким образом, что ориентация и размер изображения, содержащегося в информации представления, совпадают с ориентацией и размером целевого объекта, содержавшегося во внешней обстановке SC. Например, целевой объект является телом пациента или частью тела в медицинском помещении. В дальнейшем процесс подгонки будет описан со ссылкой на второй блок 371 ввода/вывода. На этапе S118 процесса формирования информации представления (см. фиг. 6) второй блок 371 ввода/вывода преобразовывает изображение, содержащееся в информации PN* представления, в соответствии со спецификацией видеосигнала головного дисплея 100а и затем выполняет следующие процедуры d1-d5.
[0081] (d1) Второй блок 371 ввода/вывода дает головному дисплею 100а команду сфотографировать изображение внешней обстановки с использованием камеры 61 и получает сфотографированное изображение внешней обстановки.
(d2) Второй блок 371 ввода/вывода извлекает характеристики целевого объекта, содержащегося в изображении внешней обстановки, с использованием следующих способов 1 и 2 распознавания изображения. Способы 1 и 2 могут быть объединены.
1. Обнаруживается край (характеристики края) целевого объекта
2. Обнаруживается маркер (характеристики маркера), который заранее присоединен к целевому объекту. В качестве маркера, присоединенного к объекту, могут использоваться маркеры различных типов. Например, могут использоваться лента, пластырь, автоматический маркер, лазерный маркер и "magic tape" (зарегистрированная торговая марка). Количество маркеров, присоединенных к целевому объекту, подбирается произвольно.
(d3) Второй блок 371 ввода/вывода извлекает характеристики целевого объекта посредством распознавания изображения, содержащегося в принятой информации представления. При этом второй блок 371 ввода/вывода может использовать такие же способы распознавания изображения, как и упомянутые выше способы 1 и 2.
[0082] (d4) Второй блок 371 ввода/вывода компенсирует изображение CP, содержащееся в информации PN* представления таким образом, что характеристики изображения внешней обстановки, извлеченные в процедуре d2, помещаются в то же самое место, в котором помещены характеристики информации представления, извлеченные в процедуре d3. В частности, когда в процедурах d2 и d3 используется способ 1, второй блок 371 ввода/вывода по меньшей мере увеличивает, уменьшает, поворачивает, инвертирует, обрезает или искажает изображение CP, содержащееся в информации PN* представления, или удаляет шум из изображения CP таким образом, что контур и характерный участок края изображения внешней обстановки позиционно выравниваются с контуром и характерным участком края информации представления. При этом, когда целевой объект является живым организмом, характерным участком является контур рассеченной кожи, контур внутреннего органа, сустава, дистальных концов конечностей, кровеносного сосуда, кости и т.п. Напротив, когда в процедурах d2 и d3 используется способ 2, второй блок 371 ввода/вывода по меньшей мере увеличивает, уменьшает, поворачивает, инвертирует, обрезает или искажает изображение CP, содержащееся в информации PN* представления, или удаляет шум из изображения CP таким образом, что маркер изображения внешней обстановки позиционно выравнивается с маркером информации представления.
[0083] Таким образом, вторые блоки 370 ввода/вывода (вторые блоки 371-37n ввода/вывода) распознают изображение в направлении поля зрения пользователя головного дисплея 100 (укрепляемого на голове устройства отображения), и, таким образом, вторые блоки 370 ввода/вывода извлекают характеристики объекта, содержащегося во внешней обстановке, и компенсируют информацию представления, сформированную блоком 360 формирования, на основе извлеченных характеристик. Поэтому, когда информация представления содержит информацию невидимых частей, такую как изображение СТ, изображение MRI или рентгеновское изображение, возможно выровнять информацию невидимых частей с объектом (например, с телом пациента), содержащимся во внешней обстановке. В результате можно увеличить удобство пользователя головного дисплея 100. Поскольку процесс подгонки исполняется во втором блоке 370 ввода/вывода, соединенным с конкретным головным дисплеем 100, нагрузка обработки не накладывается на вторые блоки 370 ввода/вывода, соединенные с другими головными дисплеями 100. Кроме того, поскольку головной дисплей 100 может принять информацию представления, которая подвергается процессу подгонки, блок 160 обработки изображений головного дисплея 100 может отобразить принятую информацию представления как она есть. В результате можно упростить конфигурацию головного дисплея 100.
[0084] Как описано выше, когда режимом работы блока 360 формирования является "первый режим", блок 360 формирования формирует общую информацию PN* представления, которая содержит по меньшей мере информацию медицинского устройства, выбранную пользователем головного дисплея 100 (то есть, конкретного устройства отображения изображения), в котором отношение между устройствами таблицы 382 управления является "главным". Вторые блоки 370 ввода/вывода (блоки представления) выводят сформированную общую информацию PN* представления множеству головных дисплеев 100а-100n (устройств отображения изображения), которые соответственно соединены со вторыми блоками 371-37n ввода/вывода. В результате устройство 300 обработки информации может управлять отображением на множестве головных дисплеев 100а-100n на основе выбора пользователя конкретного головного дисплея 100.
[0085] А-4-2. Второй режим (начальный процесс)
Когда режимом работы является "второй режим" на этапе S100 процесса формирования информации представления (см. фиг. 6) (этап S100: второй режим), блок 360 формирования устанавливает переменную i, используемую в процессе формирования информации представления, равной "1" (этап S120). После этого блок 360 формирования обращается к i-му элементу таблицы 382 управления (этап S122). Блок 360 формирования получает "идентификатор" и "роль", которые сохранены в i-м элементе таблицы 382 управления (этап S124).
[0086] В дальнейшем головной дисплей 100, имеющий идентификатор на этапе S124, также упоминается как "головной дисплей 100i". Головной дисплей 100i указывает на головной дисплей 100, который в настоящее время является объектом обработки в начальном процессе. Например, когда переменная i равна 1, головной дисплей 100i указывает головной дисплей 100а операционного хирурга, который имеет идентификатор 1 и сохранен в первом элементе Е01 таблицы 382 управления.
[0087] На этапе S126 процесса формирования информации представления (см. фиг. 6) блок 360 формирования определяет медицинское устройство 500 на основе роли пользователя головного дисплея 100i. В частности, когда блок 360 формирования выполняет "роль", полученную на этапе S124, блок 360 формирования определяет медицинское устройство 500, которое должен проверять пользователь головного дисплея 100i. Медицинское устройство 500 определяется на основе практики в медицинском помещении. Например, когда ролью является операционный хирург, устройство, которое получает информацию невидимых частей, такую как изображение СТ или рентгеновское изображение, определяется в качестве медицинского устройства 500. Когда ролью является анестезиолог, каждое устройство из измерителя кровяного давления, электрокардиографа, измерителя давления дыхательной трубки, спирометра, капнографа и пульсоксиметра определяется как медицинское устройство 500. Устройство 300 обработки информации может заранее сохранить во внешнем устройстве 380 хранения таблицу, в которой роль и медицинское устройство 500, необходимое для роли, сохранены в соответствии друг с другом.
[0088] После того, как медицинское устройство 500 определено, блок 360 формирования формирует информацию PNi представления, которая будет передана на головной дисплей 100i, с использованием информации медицинского устройства, которая получена от медицинского устройства 500, определенного на этапе S126, среди информации медицинских устройств 501-50n, которую первые блоки 311-31n ввода/вывода получают на этапе S128. Блок 360 формирования формирует информацию представления тем же образом, как описано со ссылкой на фиг. 7А, 7В и 8. После этого блок 360 формирования сохраняет сформированную информацию PNi представления в операционной записи 384.
[0089] На этапе S130 блок 360 формирования передает информацию PNi представления, сформированную на этапе S124, второму блоку 370i ввода/вывода, с которым соединен головной дисплей 100i. Второй блок 370i ввода/вывода преобразовывает изображение, содержащееся в принятой информации PNi представления, в соответствии со спецификацией видеосигнала головного дисплея 100i. При этом второй блок 370i ввода/вывода может исполнить процесс подгонки. Подробности совпадают с описанными на этапе S118.
[0090] Фиг. 14 является видом, иллюстрирующим состояние, в котором информация PNi представления отображается как виртуальные изображения на множестве головных дисплеев 100а и 100b после того, как этапы S122-S134 исполнены два раза. Упомянутая выше обработка отображения выполняется блоком 160 обработки изображений головного дисплея 100i, который принимает информацию PNi представления через интерфейс 180 или блок 132 беспроводной связи. В результате пользователь головного дисплея 100i может видеть информацию PNi представления как визуальное изображение, которое содержит информацию медицинского устройства, полученную от медицинского устройства 500, на основе роли пользователя. В примере, проиллюстрированном на фиг. 14, информация СР4 медицинского устройства, полученная от медицинского устройства 500, которое должен проверять операционный хирург, отображается как виртуальное изображение VI (i), которое видит пользователь головного дисплея 100а. Информация СР2 и СР3 медицинского устройства, полученная от медицинского устройства 500, которое должен проверять первый помощник, отображается как виртуальное изображение VI (i), которое видит пользователь головного дисплея 100b.
[0091] Блок 360 формирования увеличивает переменную i на этапе S132 процесса формирования информации представления (см. фиг. 6). После этого блок 360 формирования определяет, является ли переменная i равной или больше n (этап S134). Факт, что переменная i меньше n (этап S134: НЕТ), означает, что часть головных дисплеев 100 не закончила начальный процесс среди головных дисплеев 100, которые соответственно соединены со вторыми блоками 370 ввода/вывода. Поэтому блок 360 формирования переносит процесс на этап S122, чтобы продолжить исполнять начальный процесс. Напротив, факт, что переменная i равна или больше n (этап S134: ДА), означает, что начальные процессы для всех головных дисплеев 100 закончены. Поэтому блок 360 формирования переносит процесс на индивидуальный процесс на этапе S136.
[0092] Как описано выше, когда режимом работы блока 360 формирования является "второй режим", блок 360 формирования с повторениями исполняет этапы S122-S134 в начальном процессе. В соответствии с этим блок 360 формирования формирует множественные фрагменты информации PNi представления, которые содержат по меньшей мере информацию медицинского устройства, которая получена от медицинских устройств 500, на основе соответствующих ролей пользователей множества головных дисплеев 100i (100а-100n). Кроме того, вторые блоки 370 ввода/вывода (блоки представления) последовательно выводят множественные фрагменты сформированной информации PNi представления множеству головных дисплеев 100а к 100n (устройств отображения изображения), которые соответственно соединены со вторыми блоками 371-37n ввода/вывода. В результате устройство 300 обработки информации может индивидуально управлять отображением на множестве головных дисплеев 100а-100n на основе роли каждого пользователя головного дисплея 100, и возможно увеличить удобство каждого пользователя головного дисплея 100.
[0093] А-4-3. Второй режим (индивидуальный процесс)
В индивидуальном процессе на основе запроса от головного дисплея 100 блок 360 формирования формирует информацию представления, которая содержит информацию медицинского устройства, полученную от запрашиваемого медицинского устройства 500, и информацию, полученную от источников информации, отличающихся от запрашиваемого медицинского устройства 500.
[0094] Блок 360 формирования определяет, принят ли запрос на выбор источника информации от головного дисплея 100, на этапе S136 процесса формирования информации представления (см. фиг. 6). Запрос на выбор источника информации совпадает с запросами a1-а6, которые описаны на этапе S112. Когда запрос на выбор источника информации не принят (этап S136: не принят), блок 360 формирования переносит процесс на этап S136 и ожидает запрос на выбор источника информации.
[0095] Напротив, когда запрос на выбор источника информации принят (этап S136: принят), блок 360 формирования получает идентификатор головного дисплея 100i, содержащийся в запросе на выбор источника информации, информацию для определения источника информации и информацию для определения информации в источнике информации (этап S128). Кроме того, когда информация текущей позиции и информация ориентации вставлены в качестве информации для определения источника информации, блок 360 формирования сравнивает информацию текущей позиции и информацию ориентации с информацией позиции, полученной от всех других медицинских устройств 500, и блок 360 формирования определяет "медицинское устройство 500, блок отображения которого пользователь может видеть с трудом". При этом, аналогичным образом, как и на этапе S114, блок 360 формирования может объединить информацию текущей позиции и информацию ориентации с перемещением головы пользователя головного дисплея 100. Головной дисплей 1001 указывает головной дисплей 100 (то есть, головной дисплей 100, который в настоящее время является объектом обработки), который является источником запроса на выбор источника информации.
[0096] Блок 360 формирования осуществляет доступ к назначенному источнику информации и получает назначенную информацию на этапе S140. Блок 360 формирования формирует информацию PNi представления для головного дисплея 100i, с использованием полученной информации и сохраняет сформированную информацию PNi представления в операционной записи 384. Блок 360 формирования формирует информацию представления таким же образом, как описано со ссылкой на фиг. 7А, 7В и 8. После этого блок 360 формирования сохраняет сформированную информацию PNi представления в операционной записи 384.
[0097] На этапе S142 блок 360 формирования передает информацию PNi представления, сформированную на этапе S140, второму блоку 370i ввода/вывода, с которым соединен головной дисплей 100i. Второй блок 370i ввода/вывода преобразовывает изображение, содержащееся в принятой информации PNi представления, в соответствии со спецификацией видеосигнала головного дисплея 100i. При этом второй блок 370i ввода/вывода может исполнить процесс подгонки. Подробности совпадают с описанными на этапе S118.
[00 98] Упомянутая выше обработка отображения выполняется блоком 160 обработки изображений головного дисплея 100i, который принимает информацию PNi представления через интерфейс 180 или блок 132 беспроводной связи. В результате пользователь головного дисплея 100i, который передает запрос на выбор источника информации, может видеть виртуальное изображение информации PNi представления, которая включает в себя информацию, полученную от источника информации, назначенного в запросе на выбор источника информации.
[0099] Как описано выше, когда режимом работы блока 360 формирования является "второй режим", блок 360 формирования исполняет индивидуальный процесс. В соответствии с этим блок 360 формирования формирует множественные фрагменты информации PNi представления, которые содержат по меньшей мере информацию медицинского устройства, которая выбрана каждым пользователем множества головных дисплеев 100i (100а-100n). Вторые блоки 370 ввода/вывода (блоки представления) последовательно выводят множественные фрагменты сформированной информации PNi представления множеству головных дисплеев 100а-100n (устройств отображения изображения), которые соответственно соединены со вторыми блоками 371-37n ввода/вывода. В результате устройство 300 обработки информации может индивидуально управлять отображением на множестве головных дисплеев 100а к 100n на основе роли каждого пользователя головного дисплея 100.
[0100] Как описано выше, в устройстве 300 обработки информации первого варианта осуществления блок 360 формирования формирует информацию PN представления с использованием множественных фрагментов информации медицинского устройства, полученной первыми блоками 310 ввода/вывода (блоками сбора данных и первыми блоками 311-31n ввода/вывода), и, таким образом, устройство 300 обработки информации может объединить информацию (информацию медицинского устройства) различных медицинских устройств 500 (медицинских устройств 501-50n), которые соединены с первыми блоками 310 ввода/вывода устройства 300 обработки информации. Вторые блоки 370 ввода/вывода (блоки представления) выводят сформированную информацию PN представления множеству головных дисплеев 100а-100n (устройств отображения изображения) соответственно, и, таким образом, вторые блоки 370 ввода/вывода могут управлять отображением на множестве головных дисплеев 100а-100n соответственно. В результате возможно объединить информацию различных медицинских устройств 500 и возможно реализовать устройство 300 обработки информации, которое может управлять отображением на множестве головных дисплеев 100а-100n.
[0101] Кроме того, блок 360 формирования имеет первый режим, в котором общая информация PN* представления формируется из объединенной информации медицинских устройств, которая является общей для множества головных дисплеев 100а-100n (устройств отображения изображения), и второй режим, в котором формируются множественные фрагменты информации PNi представления, соответствующие множеству головных дисплеев 100а-100n. Поэтому блок 360 формирования использует режимы отдельно, и, таким образом, устройство обработки информации 300 может управлять отображением на множестве головных дисплеев 100а-100n.
[0102] Как описано выше, система 1000 обработки информации первого варианта осуществления может объединять информацию (информацию медицинских устройств) различных медицинских устройств 500 (медицинских устройств 501-50n) в устройстве 300 обработки информации, и возможно реализовать систему 1000 обработки информации, которая может управлять отображением на множестве головных дисплеев 100а к 100n (укрепляемых на голове устройств отображения).
[0103] А-5. Дополнительный процесс
В процессе формирования информации представления (см. фиг. 6) могут быть далее исполнены следующие дополнительные процессы. Дополнительные процессы могут быть добавлены независимо или могут быть объединены вместе.
[0104] А-5-1. Дополнительный процесс 1
В дополнительном процессе 1 устройство обработки информации 300 выполняет процесс преобразования цветов для информации представления. В частности, второй блок 370 ввода/вывода, который принимает информацию представления от блока 360 формирования, заставляет камеру 61 головного дисплея 100 получать изображение внешней обстановки. Второй блок 370 ввода/вывода выполняет процесс преобразования цветов, чтобы улучшить видимость изображения, содержащегося в информации представления, на основе яркости, контраста, цветности и цвета полученного изображения внешней обстановки. Например, второй блок 370 ввода/вывода может выполнить процесс преобразования цветов, в котором цвет изображения, содержащегося в информации представления, преобразован в дополнительный цвет для цвета изображения внешней обстановки.
[0105] Таким образом, дополнительный процесс 1 может дополнительно улучшить видимость виртуального изображения VI для пользователя головного дисплея 100.
[0106] А-5-2. Дополнительный процесс 2
Дополнительный процесс 2 позволяет устройству 300 обработки информации реализовать так называемую функцию стабилизатора, которая подавляет дрожание виртуального изображения VI вследствие небольших колебаний головы пользователя головного дисплея 100. В частности, второй блок 370 ввода/вывода, который принимает информацию представления от блока 360 формирования, с повторениями выполняет процесс подгонки, описанный в процедурах d1-d4, и передает информацию представления, описанную на этапах S118, S130 и S142 процесса формирования информации представления в каждое заданное время. В соответствии с этим с повторениями выполняются следующие действия в каждое заданное время: фотографирование изображения внешней обстановки и компенсация и отображение изображения, содержащегося в информации представления. В результате информация представления может быть отображена как виртуальное изображение VI таким образом, чтобы отслеживать перемещение головы пользователя в течение времени.
[0107] Однако, когда информация представления отслеживает небольшое перемещение или колебание головы пользователя головного дисплея 100, и, таким образом, информация представления часто изменяется, существует проблема в том, что вызывается быстрая утомляемость глаз пользователя, и нарушается концентрация пользователя. Таким образом, второй блок 370 ввода/вывода может выполнить процессы, описанные в следующих процедурах e1-e2 между процедурой d1 и процедурой d2.
[0108] (e1) Второй блок 370 ввода/вывода вычисляет величину изменения в гистограмме RGB между изображением внешней обстановки, сфотографированным в процедуре c1, и изображением внешней обстановки, сфотографированным в процедуре d1, в процессе подгонки, который исполнен в предыдущем цикле.
(е2) Когда величина изменения, вычисленного в процедуре f1, превышает заданное пороговое значение, второй блок 370 ввода/вывода продолжает выполнять процессы, последующие за процедурой d2.
[0109] Таким образом, в дополнительном процессе 2, когда имеется небольшая величина изменения между изображением внешней обстановки в процессе подгонки, исполненном в предыдущем цикле, и изображением внешней обстановки в процессе подгонки, исполняемом в данный момент, то есть, когда перемещение головы пользователя головного дисплея 100 очень маленькое, второй блок 370 ввода/вывода не компенсирует изображение, содержащееся в информации представления. В результате этого, поскольку можно воспрепятствовать тому, чтобы информация представления отслеживала очень маленькое перемещение или колебание головы пользователя головного дисплея 100, и предотвратить ее частое изменение, возможно устранить быструю утомляемость глаз или ухудшение концентрации пользователя. Может быть применена конфигурация, в которой пользователь может включать и выключать функцию стабилизатора.
[0110] А-5-3. Дополнительный процесс 3
В дополнительном процессе 3 устройство 300 обработки информации изменяет размер изображения, которое содержится в информации представления и отображается как виртуальное изображение VI, на основе расстояния между блоком 20 отображения изображения головного дисплея 100 и объектом, который присутствует в направлении поля зрения пользователя. В частности, второй блок 370 ввода/вывода, который принимает информацию представления от блока 360 формирования, может выполнить процессы, описанные в следующих процедурах f1-f3, вместо процесса подгонки, описанного в процедурах d1-d4. Когда этот процесс выполняется, головной дисплей 100 выполнен с возможностью дополнительно включать в себя датчик измерения расстояния. Датчик измерения расстояния представляет собой датчик, который использует отраженный свет, чтобы получить расстояние между объектным, присутствующим в направлении поля зрения пользователя, и блоком 20 отображения изображения. Например, датчик измерения расстояния может быть размещен около камеры 61.
[0111] (f1) Второй блок 370 ввода/вывода периодически получает значение измерения датчика измерения расстояния головного дисплея 100.
(f2) Второй блок 370 ввода/вывода определяет коэффициент увеличения (или коэффициент уменьшения) на основе полученного значения измерения датчика измерения расстояния.
(f3) Второй блок 370 ввода/вывода по меньшей мере увеличивает, уменьшает, поворачивает, инвертирует, обрезает или искажает изображение, содержащееся в информации представления, или удаляет шум из изображения с использованием определенного коэффициента увеличения или уменьшения.
[0112] Таким образом, в соответствии с дополнительным процессом 3 второй блок 370 ввода/вывода может изменить размер информации представления, которая будет отображена как виртуальное изображение VI, на основе расстояния между объектным, присутствующим в направлении поля зрения пользователя головного дисплея 100, и блоком 20 отображения изображения. Поэтому возможно увеличить удобство каждого пользователя головного дисплея 100.
[0113] В. Второй вариант осуществления
Во втором варианте осуществления изобретения будет описана конфигурация, в котором блок 360 формирования может формировать объединенную информацию. В дальнейшем будут описаны только части, имеющие конфигурации и операции, отличающиеся от первого варианта осуществления. На чертежах частям с такими же конфигурациями, как в первом варианте осуществления, будут присвоены такие же ссылочные позиции, как в первом варианте осуществления. Подробное описание будет опущено.
[0114] В-1. Конфигурация системы обработки информации
Схематическая конфигурация системы 1000а обработки информации в соответствии со вторым вариантом осуществления в значительной степени такая же, как в первом варианте осуществления, проиллюстрированном на фиг. 1. Однако система 1000а обработки информации второго варианта осуществления включает в себя устройство 300а обработки информации вместо устройства 300 обработки информации.
[0115] В-2. Конфигурация устройства обработки информации
Фиг. 15 является блок-схемой, иллюстрирующей функциональную конфигурацию устройства 300а обработки информации в соответствии со вторым вариантом осуществления. Второй вариант осуществления отличается от первого варианта осуществления, проиллюстрированного на фиг. 2, в том, что устройство 300а обработки информации включает в себя блок 360а формирования вместо блока 360 формирования. Когда режимом работы является "второй режим", блок 360а формирования исполняет процесс формирования объединенной информации, который будет описан позже, параллельно с процессом формирования информации представления. Процесс формирования объединенной информации представляет собой процесс, в котором блок 360а формирования формирует объединенную информацию, полученную посредством объединения вместе информации представления всех головных дисплеев 100 (головных дисплеев 100а-100n), которые соответственно соединены со вторыми блоками 370 ввода/вывода.
[0116] В-3. Конфигурация укрепляемого на голове устройства отображения
Схематическая конфигурация головного дисплея 100 в соответствии со вторым вариантом осуществления совпадает с конфигурацией первого варианта осуществления, проиллюстрированной на фиг. 5.
[0117] В-4. Процесс формирования информации представления
Процедуры процесса формирования информации представления в соответствии со вторым вариантом осуществления совпадают с процедурами первого варианта осуществления, проиллюстрированными на фиг. 6.
[0118] В-5. Дополнительный процесс
Даже в процессе формирования информации представления второго варианта осуществления могут быть исполнены такие же дополнительные процессы, как в первом варианте осуществления, как описано в разделах "А-5-1", "А-5-2" и "А-5-3".
[0119] В-6. Процесс формирования объединенной информации
Фиг. 16 является блок-схемой последовательности операций, иллюстрирующей процедуры процесса формирования объединенной информации. Процесс формирования объединенной информации представляет собой процесс, в котором формируется объединенная информация для отображения на головном дисплее 100. Блок формирования 360а устройства 300а обработки информации (см. фиг. 15) исполняет процесс формирования объединенной информации. На этапе S100 процесса формирования информации представления (см. фиг. 6), когда режимом работы является "второй режим" (этап S100: второй режим), процесс формирования объединенной информации исполняется параллельно с начальным процессом и индивидуальным процессом, описанными на фиг. 6.
[0120] Блок 360а формирования определяет, принят ли запрос на объединенную информацию от головного дисплея 100 (этап S200). При этом запрос на объединенную информацию представляет собой запрос на передачу объединенной информации и передается вместе с идентификатором запрашивающего головного дисплея 100. Когда запрос на объединенную информацию не принят (этап S200: не принят), блок 360а формирования переносит процесс на этап S200 и ожидает приема запроса на объединенную информацию.
[0121] Напротив, когда запрос на объединенную информацию принят (этап S200: принят), блок 360а формирования получает идентификатор запрашивающего головного дисплея 100i, который содержится в запросе на объединенную информацию (этап S202). При этом головной дисплей 100i указывает головной дисплей 100 (то есть, головной дисплей 100, который в настоящее время является объектом обработки), который является источником запроса на объединенную информацию.
[0122] Блок 360а формирования осуществляет доступ к операционной записи 384 на этапе S204. Блок 360а формирования получает последнюю информацию представления, которую блок 360а формирования формирует для всех головных дисплеев 100 (головных дисплеев 100а-100n), которые соответственно соединены со вторыми блоками 370 ввода/вывода. Последняя информация представления может быть определена на основе "даты и времени формирования информации", которые сохранены в операционной записи 384 совместно с информацией представления. При этом информация представления запрашивающего головного дисплея 100i может не быть получена. Блок 360а формирования формирует объединенную информацию посредством объединения вместе множественных фрагментов полученной информации представления.
[0123] Фиг. 17 является видом, описывающим способ формирования объединенной информации. Блок 360а формирования выполняет процессы, проиллюстрированные в следующих процедурах g1-g4, над множественными фрагментами полученной информации представления.
(g1) Блок 360a формирования определяет коэффициент уменьшения информации представления на основе общего количества полученной информации представления и разрешения, которые сохранены в общей видеоспецификации 381.
(g2) Блок 360а формирования уменьшает изображение, содержащееся в i-й информации представления (информации PNi представления) с коэффициентом уменьшения, определенном в процедуре g1.
(g3) Блок 360а формирования размещает изображение, уменьшенное в процедуре g2, в позиции, в которой уменьшенное изображение не накладывается на другие изображения, и уменьшенное изображение записывается сверху и сохраняется как объединенная информация JN.
(g4) Блок 360а формирования увеличивает переменную i и с повторениями выполняет процедуры g2 и g3, пока i не станет равным или больше общего количества полученной информации представления.
(g5) Блок 360а формирования исполняет такие же процедуры, как описаны в c1-c2, относительно поля (обозначенного штриховкой на фиг. 17), в котором изображение для информации представления среди объединенной информации JN не размещено. Данные фиктивных точек вставляются в поле или корректируется сигнал активации.
(g6) Блок 360а формирования преобразовывает изображение, содержащееся в сформированной объединенной информации JN, в соответствии со спецификацией видеосигнала, определенной в общей видеоспецификации 381.
[0124] Фиг. 17 иллюстрирует пример объединенной информации JN, в которой шесть информаций PN1-PN6 представления, сформированных таким образом, соответственно размещены в позициях, в которых шесть информаций представления не накладываются друг на друга.
[0125] На этапе S206 процесса формирования объединенной информации (см. фиг. 16) блок 360а формирования передает объединенную информацию JN, сформированную на этапе S204 второму блоку 370i ввода/вывода, с которым соединен головной дисплей 100i, и затем переносит процесс на этап S200. Второй блок 370i ввода/вывода преобразовывает изображение, содержащееся в принятой информации PNi представления, в соответствии со спецификацией видеосигнала головного дисплея 100i.
[0126] Фиг. 18 является видом, иллюстрирующим состояние, в котором объединенная информация JN отображается как виртуальное изображение на головном дисплее 100i. Упомянутый выше процесс отображения выполняется блоком 160 обработки изображения головного дисплея 100i, который принимает объединенную информацию JN, переданную от второго блока 370i ввода/вывода через интерфейс 180 или блок 132 беспроводной связи. В результате свет изображения, проводимый к обоим глазам пользователя головного дисплея 100i, фокусируется на сетчатках пользователя, и, таким образом, пользователь головного дисплея 100i может видеть объединенную информацию JN как виртуальное изображение VI в поле VR зрения. В примере, проиллюстрированном на фиг. 18, объединенная информация JN информации PN1-PN6 представления для соответствующих головных дисплеев 100a-100f отображается как виртуальное изображение VI в поле VR зрения пользователя головного дисплея 100g. Вследствие ограничения пространства информация PN3-PN6 представления не проиллюстрирована на фиг. 18.
[0127] Как описано выше, блок 360а формирования второго варианта осуществления объединяет множественные фрагменты информации PNi представления, сформированные в процессе формирования информации представления, чтобы сформировать объединенную информацию JN. Второй блок 370 ввода/вывода (блок представления) выводит сформированную объединенную информацию JN на заданный головной дисплей 100i (устройство отображения изображения), который выдает запрос на объединенную информацию. В результате пользователь заданного головного дисплея 100i может понять, какая информация PN представления отображается на множестве головных дисплеев 100а-100n (устройствах отображения изображения), которые соединены с устройством 300 обработки информации. Кроме того, возможно увеличить удобство пользователя заданного головного дисплея 100i.
[0128] С. Третий вариант осуществления
Третий вариант осуществления изобретения описывает конфигурацию, в которой пользователь головного дисплея направляется через последовательность заданных этапов, и в котором направляющие этапы могут быть изменены в режиме реального времени на основе информации медицинского устройства. В дальнейшем будут описаны только части, имеющие конфигурации и операции, отличающиеся от первого варианта осуществления. На чертежах частям с такими же конфигурациями, как в описанном выше первом варианте осуществления, будут присвоены такие же ссылочные позиции, как в первом варианте осуществления. Подробное описание будет опущено.
[0129] С-1. Конфигурация системы обработки информации
Схематическая конфигурация системы 1000b обработки информации в соответствии с третьим вариантом осуществления в значительной степени такая же, как во втором варианте осуществления, проиллюстрированном на фиг. 1. Однако система 1000b обработки информации второго варианта осуществления включает в себя устройство 300b обработки информации вместо устройства 300 обработки информации.
[0130] С-2. Конфигурация устройства обработки информации
Фиг. 19 является блок-схемой, иллюстрирующей функциональную конфигурацию устройства 300b обработки информации в соответствии с третьим вариантом осуществления. Третий вариант осуществления отличается от первого варианта осуществления, проиллюстрированного на фиг. 2, в том, что устройство 300b обработки информации включает в себя центральный процессор 350b вместо центрального процессора 350 и включает в себя внешнее устройство 380b хранения вместо внешнего устройства 380 хранения. Центральный процессор 350b включает в себя блок 360b формирования вместо блока 360 формирования и дополнительно включает в себя блок 365 управления этапами.
[0131] Процессы в процессе формирования информации представления, исполняемом блоком 360b формирования, частично отличаются от первого варианта осуществления, проиллюстрированного на фиг. 6. Блок 365 управления этапами исполняет процесс управления этапами, который будет описан позже, параллельно с процессом формирования информации представления, исполняемым блоком 360 формирования. Процесс управления этапами представляет собой процессом, в котором блок 365 управления этапами передает блоку 360b формирования последовательность этапов, через которые направляется пользователь головного дисплея 100, и в котором этапы изменяются на основе состояния пациента, оцененного на основе информации медицинских устройств.
[0132] Внешнее устройство 380b хранения дополнительно включает в себя информацию 386 этапов и информацию 387 экстренных действий в дополнение ко всей информации, описанной в первом варианте осуществления.
[0133] Фиг. 20 является схемой, иллюстрирующей пример информации 386 этапов. Информацией 386 этапов в варианте осуществления является таблица (или база данных, выполненная с возможностью, иметь множество таблиц), в которой заранее сохранена последовательность этапов для каждой из различных операций. В процессе управления этапами обращаются к информации 386 этапов, чтобы направить пользователя головного дисплея 100 через этапы. В иллюстративных целях фиг. 20 иллюстрирует только единственную операцию, и специфическое название операции, название операционного способа и содержание этапов не будут проиллюстрированы. Название для указания операции сохранено в "названии операции". Название для указания операционного способа сохранено в "названии операционного способа". Поскольку операция может быть выполнена множеством различных операционных способов, этапы для операции определяются на основе комбинации названия операции и операционного способа. Содержание последовательности этапов, определенных посредством названия операции и операционного способа, последовательно сохранены в "этапе". Поскольку часть этапов для операции исполняются по-разному в зависимости от симптомов и состояния пациента, разветвленные этапы присутствуют в примере, проиллюстрированном на фиг. 20. В процессе формирования информации представления (см. фиг. 6), когда второй режим реализован для формирования множественных фрагментов информации представления, информация 386 этапов выполнена с возможностью включать в себя таблицу и т.п., в которой последовательность этапов хранится для каждой роли в различных операциях.
[0134] Фиг. 21 является таблицей, иллюстрирующей пример информации 387 экстренных действий. Информация 387 экстренных действий варианта осуществления заранее хранит операционный способ, условия, симптомы и экстренные действия совместно друг с другом. В процессе управления этапами обращаются к информации 387 экстренных действий для изменения этапов, через которые направляется пользователь головного дисплея 100. Название для указания операционного способа сохранено в "операционном способе". Операционный способ используется для связи с "операционным способом" в информации 386 этапов. Условия для оценки информации медицинского устройства сохранены в "условии". Название сохранено в "симптоме", и название указывает на симптомы, которые возникают у пациента, когда информация медицинского устройства удовлетворяет условиям, сохраненным в "условии". Лечебные процедуры для устранения или смягчения симптомов пациента сохранены в "экстренных действиях".
[0135] С-3. Конфигурация укрепляемого на голове устройства отображения
Схематическая конфигурация головного дисплея 100 в соответствии с третьим вариантом осуществления совпадает с конфигурацией первого варианта осуществления, проиллюстрированной на фиг. 5.
[0136] С-4. Процесс формирования информации представления
Процедуры процесса формирования информации представления в соответствии с третьим вариантом осуществления совпадают с процедурами первого варианта осуществления, проиллюстрированными на фиг. 6, за исключением следующих моментов, которые будут описаны ниже. Будет описан случай, когда процесс формирования информации представления исполняется в первом режиме, в котором формируется общая информация представления. На этапе S114, проиллюстрированном на фиг. 6, блок 360b формирования принимает "запрос (а7) на направление процедуры операции" в качестве запроса на выбор источника информации от головного дисплея 100. После этого блок 360b формирования запрашивает у блока 365 управления этапами исполнить процесс управления этапами. Запрос а7 может быть выдан независимо или может быть объединен с запросами a1-а6 первого варианта осуществления. На этапе S116 блок 360b формирования принимает этапы от блока 365 управления этапами и формирует информацию PN* представления, с использованием принятой информации.
[0137] Будет описан случай, когда процесс формирования информации представления исполняется во втором режиме, в котором формируются множественные фрагменты информации представления. На этапе S126, проиллюстрированном на фиг. 6, блок 360b формирования передает роль пользователя головного дисплея 100i блоку 365 управления этапами. После этого блок 360b формирования передает роль пользователя блоку 365 управления этапами и запрашивает у блока 365 управления этапами исполнить процесс управления этапами. На этапе S128 блок 360b формирования принимает этапы от блока 365 управления этапами на основе роли пользователя головного дисплея 100i и формирует информацию PNi представления с использованием принятой информации.
[0138] С-5. Дополнительный процесс
Даже в процессе формирования информации представления третьего варианта осуществления могут быть исполнены такие же дополнительные процессы, как в первом варианте осуществления, как описано в разделах "А-5-1", "А-5-2" и "А-5-3".
[0139] С-6. Процесс управления этапами
Фиг. 22 является блок-схемой последовательности операций, иллюстрирующей процедуры процесса управления этапами. Процесс управления этапами представляет собой процесс, в котором блок управления этапами передает блоку 360b формирования этапы, через которые направляется пользователь головного дисплея 100 и в котором этапы изменяются на основе состояния пациента, оцененного на основе информации медицинских устройств.
[0140] На этапе S300 блок 365 управления этапами получает последовательность заданных этапов со ссылкой на информацию 38 6 этапов. При этом "последовательность заданных этапов" означает набор последовательности этапов (обозначенный сплошной рамкой L1 на фиг. 20), который операционный хирург, другие врачи и т.п. определяют среди комбинаций операций, операционных способов и этапов, заранее сохраненных в информации 38 6 этапов. Последовательность заданных этапов может закончиться в середине последовательности этапов, сохраненных в информации 386 этапов (обозначено прерывистой рамкой L2 на фиг. 20). Например, когда доктор предпочтительно выбирает наилучшие этапы, выполняя операцию в реальности и контролируя состояние пациента, планируются этапы, обозначенные прерывистой рамкой L2.
[0141] Когда процесс формирования информации представления исполняется в первом режиме (другими словами, когда блок 360b формирования сообщает, что исполняется только процесс управления этапами), и этапы, основанные на роли пользователя, сохранены в информации 386 этапов, на этапе S300 блок 365 управления этапами получает "последовательность заданных этапов" для роли пользователя головного дисплея 100, отношением между устройствами которого является "главный" в таблице 382 управления (см. фиг. 4). Напротив, когда процесс формирования информации представления исполняется во втором режиме (другими словами, роль пользователя и выполнение процесса управления этапами указаны блоком 360 формирования), на этапе S300 блок 365 управления этапами получает "последовательность заданных этапов" для роли пользователя, которая принята из информации 386 этапов.
[0142] На этапе S302 блок 365 управления этапами получает единственный этап из последовательности этапов, полученных на этапе S300, и передает единственный этап блоку 360b формирования. Блок 360b формирования, который принимает единственный этап, формирует информацию PN* представления или информация PNi представления для направления на единственный этап в процессе формирования информации представления, и блок 360b формирования передает информацию PN* представления или информацию PNi представления на головной дисплей 100.
[0143] Блок 365 управления этапами проверяет состояние пациента на этапе S304. В частности, блок 365 управления этапами получает всю информацию медицинских устройств, измеренную медицинским устройством, которое измеряет состояние пациента через первые блоки 310 ввода/вывода (блоки сбора данных и первые блоки 311-31n ввода/вывода).
[0144] На этапе S306 блок 365 управления этапами определяет, происходит ли быстрое изменение у пациента. В частности, блок 365 управления этапами определяет, удовлетворяет ли вся информация медицинских устройств, принятая на этапе S304, "условию", сохраненному в информации 387 экстренных действий, на этапе S304. Когда вся информация медицинских устройств не удовлетворяет условию (этап S306: НЕТ), блок 365 управления этапами переносит процесс на этап S314. Напротив, когда по меньшей мере единственный фрагмент информации медицинского устройства удовлетворяет условию (этап S306: ДА), блок 365 управления этапами переносит процесс на этап S308.
[0145] На этапе S308 блок 365 управления этапами получает экстренные действия на основе состояния пациента со ссылкой на информацию 387 экстренных действий. В частности, блок 365 управления этапами обращается к записи, информация медицинского устройства которой удовлетворяет "условию" среди информации 387 экстренных действий, и блок 365 управления этапами обращается к "экстренным действиям" для записи.
[0146] Блок 365 управления этапами передает содержание экстренных действий блоку 360b формирования на этапе S310. Упомянутые выше процессы исполняются одинаковым образом, когда процесс формирования информации представления исполняется не только в первом режиме, но также и во втором режиме. Блок 360b формирования, который принимает экстренные действия, формирует информацию PN* представления или информацию PNi представления для направления к экстренным действиям в процессе формирования информации представления и передает информацию PN* представления или информацию PNi представления на головной дисплей 100.
[0147] Блок 365 управления этапами проверяет состояние пациента на этапе S312. Подробности совпадают с проиллюстрированными на этапе S304. Период времени, в течение которого состояние пациента, как предполагается, стабилизируется посредством экстренных действий, предпочтительно помещен между этапом S310 и этапом S312.
[0148] На этапе S314 блок 365 управления этапами определяет, является ли подходящей последовательность этапов, по которой пользователь направляется в настоящее время. В частности, блок 365 управления этапами определяет, удовлетворяет ли вся информация медицинских устройств, принятая на этапе S312, "условию", сохраненному в информации 387 экстренных действий 387. Когда вся информация медицинских устройств не удовлетворяет условию (этап S314: ДА), блок 365 управления этапами оценивает, что последовательность этапов, по которой пользователь направляется в настоящее время, является подходящей, и блок 365 управления этапами переносит процесс на этап S302. После этого на этапе S302 блок 365 управления этапами получает следующий этап из последовательности этапов, полученных на этапе S300, и передает следующий этап блоку 360b формирования. Кроме того, блок 365 управления этапами проверяет состояние пациента и с повторениями исполняет упомянутые выше процессы.
[0149] Таким образом, блок 365 управления этапами с повторениями получает множественные фрагменты информации медицинского устройства и изменяет последовательность этапов, которые будут переданы блоку формирования, на основе множественных фрагментов последней информации медицинского устройства. Поэтому устройство 300b обработки информации может изменить последовательность этапов, которые будут отображены на множестве головных дисплеев 100а-100n, в режиме реального времени на основе множественных фрагментов информации медицинского устройства, которые получены от множества медицинских устройств.
[0150] Напротив, когда по меньшей мере один фрагмент информации медицинского устройства удовлетворяет условию (этап S306: ДА), блок 365 управления этапами оценивает, что последовательность этапов, по которой пользователь направляется в настоящее время, является подходящей и переносит процесс на этап S316. На этапе S316 блок 365 управления этапами передает блоку 360b формирования указание, что состояние пациента является плохим, и, таким образом, предполагается, что последовательность этапов, по которой пользователь направляется в настоящее время, является не подходящей. Упомянутый выше процесс исполняется одинаковым образом, когда процесс формирования информации представления исполняется не только в первом режиме, но также и во втором режиме. Когда блок 360b формирования принимает указание, что последовательность этапов, по которой пользователь направляется в настоящее время, является не подходящей, блок 360b формирования формирует информацию PN* представления или информацию PNi представления, чтобы указать пользователю на тот факт, что последовательность этапов является не подходящей, и блок 360b формирования передает информацию PN* представления или информацию PNi представления на головной дисплей 100 в процессе формирования информации представления. После этого блок 365 управления этапами прекращает передавать последующие этапы и заканчивает процесс.
[0151] На этапе S310 блок 365 управления этапами добавляет "новый этап" к "последовательности заданных этапов", передавая экстренное действие на основе полученной информации медицинского устройства блоку 360b формирования. Однако на этапе S310 блок 365 управления этапами может исполнить "удаление части этапов" или "замену части этапов" в отношении "последовательности заданных этапов". Например, когда этап, который будет удален, или этап, который будет заменен, сохранен как "экстренное действие" в информации 387 экстренных действий, может быть реализовано удаление части этапов или замена части этапов. В варианте осуществления последующее совместно упоминается как "изменение последовательности этапов" добавление нового этапа (удаление части этапов или замена части этапов), проиллюстрированное на этапе S310, и остановка передачи этапов, проиллюстрированная на этапе S316.
[0152] Как описано выше, в устройстве 300b обработки информации третьего варианта осуществления блок 365 управления этапами передает блоку 360b формирования информацию последовательности заданных этапов, и блок 360b формирования формирует информацию PN* и PNi представления, которая содержит принятые этапы. Поэтому устройство 300b обработки информации может отобразить последовательность заданных этапов на множестве головных дисплеев 100а-100n (устройств отображения изображения), соединенных с устройством 300b обработки информации. Кроме того, блок 365 управления этапами изменяет последовательность этапов, которые будут переданы, на основе множественных фрагментов информации медицинских устройств, полученных первыми блоками 311-31n ввода/вывода (блоками сбора данных). Поэтому устройство 300b обработки информации может изменить последовательность этапов, которые будут отображены на множестве головных дисплеев 100а-100n, на основе множественных фрагментов информации медицинских устройств, полученных от множества медицинских устройств. В результате можно обеспечить устройство 300b обработки информации, которое может гибко изменять последовательность заданных этапов на основе информации медицинских устройств и может направлять пользователей головных дисплеев 100а-100n через этапы.
[0153] Кроме того, в первом режиме блок 365 управления этапами устройства 300b обработки информации третьего варианта осуществления передает блоку 360b формирования последовательности этапов для пользователя головного дисплея 100 (то есть, для заданного устройства отображения изображения), отношение между устройствами которого является "главным" в таблице 382 управления. Поэтому устройство 300b обработки информации может отобразить "последовательность общих этапов для пользователя заданного устройства отображения изображения" на множестве головных дисплеев 100а-100n (устройств отображения изображения) в первом режиме. Во втором режиме блок 365 управления этапами передает последовательность этапов блоку 360b формирования на основе роли каждого пользователя множества головных дисплеев 100а-100n. Поэтому устройство 300b обработки информации может индивидуально отобразить "последовательность этапов на основе роли каждого пользователя устройства отображения изображения" на множестве головных дисплеев 100а-100n во втором режиме.
[0154] D. Примеры модификаций
В каждом описанном выше варианте осуществления часть конфигурации, реализованной аппаратными средствами, может быть заменена программным обеспечением. Напротив, часть конфигурации, реализованной программным обеспечением, может быть заменена аппаратными средствами. Кроме того, следующие модификации также могут быть сделаны для вариантов осуществления.
[0155] - Пример модификации 1
Конфигурация системы обработки информации проиллюстрирована в каждом описанном выше варианте осуществления. Однако конфигурация системы обработки информации может быть определена произвольно, пока произвольно определенная конфигурация не отступает от сущности изобретения. Например, возможно добавить, удалить или преобразовать устройства системы обработки информации. Возможно изменить конфигурацию сети устройств системы обработки информации.
[0156] Например, таблица управления, информация невидимых частей и операционная запись устройства обработки информации могут быть сохранены в базе OD данных, соединенной с больничной локальной сетью. Обеспечение базы OD данных не ограничено больницей, и база OD данных может быть обеспечена на внешней стороне (например, на облачном сервере, который обеспечен вне больницы) через Интернет INT.
[0157] - Пример модификации 2
Конфигурация устройства обработки информации проиллюстрирована в каждом описанном выше варианте осуществления. Однако конфигурация устройства обработки информации может быть определена произвольно, пока произвольно определенная конфигурация не отступает от сущности изобретения. Например, возможно добавить, удалить или преобразовать каждую часть конфигурации.
[0158] Например, устройство обработки информации может включать в себя различные устройства ввода, такие как сенсорная панель, кнопка ввода, клавиатура, мышь, микрофон и камера. Аналогичным образом, устройство обработки информации может включать в себя различные устройства вывода, такие как дисплей, индикатор и принтер, чтобы выводить обычный журнал операции.
[0159] Например, в каждом варианте осуществления центральный процессор развертывает компьютерную программу, сохраненную на постоянном запоминающем устройстве или на жестком диске, на оперативном запоминающем устройстве и исполняет компьютерную программу. В соответствии с этим реализуется каждая функция блока формирования и второго блока ввода/вывода (блока представления). Однако функции могут быть реализованы с использованием специализированной интегральной схемы (ASIC), которая разработана для реализации функций.
[0160] Например, устройство обработки информации выполнено с возможностью включать в себя дисплей. Кроме того, блок формирования устройства обработки информации может отображать объединенную информацию, сформированную в процессе формирования объединенной информации, на дисплее устройства обработки информации. Таким образом, пользователь вблизи устройства обработки информации может сразу понять содержание, отображаемое на всех головных дисплеях (устройствах отображения изображения), и это является удобным.
[0161] - Пример модификации 3
Конфигурация головного дисплея проиллюстрирована в каждом описанном выше варианте осуществления. Однако конфигурация головного дисплея может быть определена произвольно, пока произвольно определенная конфигурация не отступает от сущности изобретения. Например, возможно добавить, удалить или преобразовать каждую часть конфигурации. Например, блок управления и блок отображения изображения могут быть соединены через тракт передачи радиосигнала беспроводной локальной сети, связи с помощью инфракрасного луча, Bluetooth и т.п. Например, первичная батарея, топливный элемент, солнечная батарея, тепловая ячейка и т.п. могут применяться в качестве источника питания.
[0162] В каждом описанном выше варианте осуществления распределение элементов конфигурации для блока управления и блока отображения изображения является лишь примером и может быть применено в различных формах. Например, могут быть применены следующие формы: (i) форма, в которой блок управления снабжен функциями обработки, такими как центральный процессор и память, и блок отображения изображения снабжен только функцией отображения; (ii) форма, в которой и блок управления, и блок отображения изображения оборудованы функциями обработки, такими как центральный процессор и память; (iii) форма, в которой блок управления и блок отображения изображения объединены вместе (например, форма, в которой блок отображения изображения содержит блок управления и функционирует как носимый микрокомпьютер в виде очков); (iv) форма, в которой смартфон или переносной игровой автомат используются вместо блока управления; и (v) форма, в которой блок управления и блок отображения изображения выполнены с возможностью беспроводной связи и беспроводной зарядки, и, таким образом, кабель отсутствует.
[0163] Например, блок получения входной информации может получить операционный ввод от пользователя с использованием различных способов, отличающихся от способов, проиллюстрированных в вариантах осуществления. Например, блок захвата входной информации может получить операционный ввод через педальный переключатель (переключатель, который управляется ногами пользователя). Например, блок отображения изображения может быть снабжен блоком обнаружения зрительной оси, таким как инфракрасный датчик, и зрительная ось пользователя может быть обнаружена. В соответствии с этим блок получения входной информации может получить операционный ввод через команду, связанную с перемещением зрительной оси. Например, камера может использоваться для обнаружения жеста пользователя, и блок получения входной информации может получить операционный ввод через команду, связанную с жестом. При обнаружении жеста возможно отметить кончик пальца пользователя, кольцо на пальце, присоединенное к кистям руки пользователя, медицинский инструмент и т.п., удерживаемый кистями рук пользователя, для обнаружения перемещения. Когда блок получения входной информации может получить операционный ввод через педальный переключатель или зрительную ось, блок получения входной информации может легко получить операционный ввод от пользователя даже в медицинском помещении, в котором пользователю трудно освободить кисти рук.
[0164] Например, в вариантах осуществления головной дисплей представляет собой бинокулярный пропускающий головной дисплей, но головной дисплей может представлять собой монокулярный головной дисплей. Вариант осуществления может быть выполнен с возможностью применять не пропускающий головной дисплей, через который не видна внешняя обстановка, когда пользователь носит головной дисплей. Варианты осуществления применяют головной дисплей, блок отображения изображения которого пользователь носит как очки. Однако головной дисплей может применять блок отображения изображения с другой формой, например, блок отображения изображения, который пользователь носит как головной убор. Наушник или головной наушник может применяться в качестве наушника, или наушник может быть опущен. Кроме того, например, вариант осуществления может быть выполнен с возможностью применять дисплей на лобовом стекле (HUD), смонтированный на транспортном средстве, таком как автомобиль или самолет. Кроме того, вариант осуществления может применять головной дисплей, который встроен в средство индивидуальной защиты, такое как шлем.
[0165] Фиг. 23А и 23В иллюстрируют виды, показывающие внешнюю конфигурацию каждого головного дисплея в примерах модификации. В примере, проиллюстрированном на фиг. 23А, блок 20а отображения изображения включает в себя правый оптический блок 26а отображения изображения вместо правого оптического блока 26 отображения изображения и включает в себя левый оптический блок 28а отображения изображения вместо левого оптического блока 28 отображения изображения. Правый оптический блок 26а отображения изображения сформирован меньшим, чем оптический элемент в первом варианте осуществления, и наклонно размещен выше правого глаза пользователя, когда пользователь носит головной дисплей. Аналогичным образом, левый оптический блок 28а отображения изображения 28а сформирован меньшим, чем оптический элемент в первом варианте осуществления, и наклонно размещен выше левого глаза пользователя, когда пользователь носит головной дисплей. В примере, проиллюстрированном на фиг. 23В, блок 20b отображения изображения включает в себя правый оптический блок 26b отображения изображения вместо правого оптического блока 26 отображения изображения и включает в себя левый оптический блок 28b отображения изображения вместо левого оптического блока 28 отображения изображения. Правый оптический блок 26b отображения изображения сформирован меньшим, чем оптический элемент в первом Варианте осуществления, и наклонно размещен ниже правого глаза пользователя, когда пользователь носит головной дисплей. Левый оптический блок 38b отображения изображения сформирован меньшим, чем оптический элемент в первом варианте осуществления и наклонно размещен ниже левого глаза пользователя, когда пользователь носит головной дисплей. Таким образом, это удовлетворительно для оптического блока отображения изображения, который будет размещен около глаз пользователя. Размер оптического элемента, который формирует оптический блок отображения изображения, также может быть определен произвольно. Можно реализовать головной дисплей таким образом, что только части глаз пользователя покрыты оптическими блоками отображения изображения, другими словами, глаза пользователя не полностью покрыты оптическими блоками отображения изображения.
[0166] Например, в каждом описанном выше варианте осуществления, блок приведения в действие дисплея выполнен с возможностью включать в себя подсветку, блок управления подсветкой, LCD, блок управления LCD и проекционную оптическую систему, но форма конфигурации является только примером. В дополнение или вместо частей конфигурации блок приведения в действие дисплея может включать в себя части конфигурации, чтобы реализовать другой способ приведения в действие дисплея. Например, блок приведения в действие дисплея может излучать свет изображения с использованием способа переднего освещения или способа отражения. Например, блок приведения в действие дисплея может быть выполнен с возможностью включать в себя органический электролюминесцентный (EL) дисплей, блок управления органическим EL и проекционную оптическую систему. Например, блок приведения в действие дисплея также может использовать цифровое микрозеркальное устройство и т.п. вместо LCD. Например, изобретение также применимо к укрепляемому на голове устройству отображения с лазерной проекцией сетчатки.
[0167] - Пример модификации 4
Вариант осуществления иллюстрирует пример процесса формирования информации представления. Однако процедуры процесса формирования информации представления являются только примерами, и различные модификации могут быть внесены в процедуры. Например, часть этапов может быть опущена, или дополнительно могут быть добавлены другие этапы. Этапы могут быть исполнены в измененном порядке.
[0168] Например, информация невидимых частей, описанная в вариантах осуществления, как предполагается, является двухмерным изображением. Однако может быть присоединено медицинское устройство, способное фотографировать часть трехмерного невидимого изображения. Информация невидимых частей, сохраненная во внешнем устройстве хранения, может представлять собой трехмерную моделью, произведенной из множества изображений, сфотографированных устройством фотографирования изображения. Когда используется трехмерная информация невидимых частей, блок формирования воспроизводит трехмерную модель перед формированием информации представления. Блок формирования формирует информацию представления с использованием воспроизведенного изображения. Таким образом, можно видеть информацию в различных направлениях, которая не появляется во внешнем виде целевого объекта.
[0169] Например, когда процесс формирования информации представления исполняется в первом режиме, блок формирования может сформировать множественные фрагменты общей информации представления. В частности, например, головные дисплеи, которые соответственно соединены со вторыми блоками ввода/вывода, разделены на m групп (m является целым числом, равным или больше 1). Кроме того, блок формирования может сформировать общую информацию представления для каждой группы как общую информацию представления для первой группы,…, общую информацию представления для m-й группы.
[0170] Например, когда процесс формирования информации представления (начальный процесс) исполняется во втором режиме, начальный процесс исполняется при последовательном использовании переменной i относительно множества головных дисплеев, которые соответственно соединены со вторыми блоками ввода/вывода. Однако начальный процесс может быть исполнен параллельно в отношении множества головных дисплеев, которые соответственно соединены со вторыми блоками ввода/вывода.
[0171] Например, в процессе формирования информации представления, исполняемом во втором режиме, либо начальный процесс, либо индивидуальный процесс могут быть опущены. Начальный процесс может не быть исполнен сразу после того, как процесс формирования информации представления запущен во втором режиме. Такой же процесс, как начальный процесс, может быть должным образом исполнен на основе запроса от пользователя или других приложений.
[0172] Например, и в первом, и во втором режимах изображение, содержащееся в информации представления, может быть увеличено или уменьшено на основе запроса от пользователя для отображения в качестве виртуального изображения VI на головном дисплее. Аналогичным образом, головной дисплей может не отображать изображение, содержащееся в информации представления, на основе запроса пользователя, и головной дисплей может преобразовать цвет изображения, содержащегося в информации представления. Когда пользователь вводит запрос через речевой способ ввода с использованием микрофона, можно значительно увеличить удобство каждого пользователя, когда головной дисплей используется в медицинском помещении, в котором пользователю сложно управлять головным дисплеем с помощью кистей рук.
[0173] - Пример модификации 5
Вариант осуществления иллюстрирует пример процесса формирования объединенной информации. Однако процедуры процесса формирования объединенной информации являются только примером, и различные модификации могут быть внесены в процедуры. Например, часть может быть опущена, или другие этапы могут быть дополнительно добавлены. Этапы могут быть исполнены в измененном порядке.
[0174] Например, блок формирования может позволить формируемой объединенной информации содержать информацию, отличающуюся от уменьшенного изображения в информации представления. Например, объединенная информация может содержать следующую перечисленную информацию.
- Строка букв или изображение для идентификации головного дисплея, которому обеспечивается информация представления.
- Строка букв или изображение для указания административной должности пользователя головного дисплея, которому обеспечивается информация представления.
- Информация медицинского устройства.
- Данные, хранящиеся в больничной базе данных.
- Данные, хранящиеся в информации невидимых частей.
- Данные, хранящиеся в информации невидимых частей.
- Информация медицинского устройства, блок отображения которого виден пользователю с трудом.
[0175] Например, блок формирования может принять запрос на объединенную информацию только от заданного головного дисплея. Например, заданный головной дисплей является основным головным дисплеем или головным дисплеем, пользователь которого исполняет заданную роль.
[0176] - Пример модификации 6
Вариант осуществления иллюстрирует пример процесса управления этапами. Однако процедуры процесса управления этапами являются только примерами, и различные модификации могут быть внесены в процедуры. Например, часть этапов может быть опущена, или другие этапы могут быть дополнительно добавлены. Этапы могут быть исполнены в измененном порядке.
[0177] Например, вместо добавления нового этапа (удаления части этапов или замены части этапов), проиллюстрированного на этапе S310, или в дополнение к дополнению, удалению или замене нового этапа вариант осуществления может применить конфигурацию, в которой доктор PR во внешнем учреждении может предоставить второе мнение через телефонный вызов доктора PR (см. фиг. 19).
[0178] Например, любое из следующего может быть опущено: добавление нового этапа (удаление части этапов или замена части этапов), проиллюстрированное на этапе S310, и остановка передачи этапов, проиллюстрированная на этапе S316.
[0179] Например, "последовательность заданных этапов" определяется операционным хирургом, другими врачами и т.п. Блок управления этапами может быть выполнен с возможностью предлагать последовательность этапов, которые должны быть кандидатом на "последовательность заданных этапов" (при необходимости множественные пары последовательностей этапов) пользователю головного дисплея. В этом случае, например, блок управления этапами может получить кандидата, получая информацию этапа на основе информации медицинского устройства, которая получена заранее.
[0180] Например, процесс управления этапами может обработать только один процесс из процесса формирования информации представления в первом режиме и процесса формирования информации представления во втором режиме.
[0181] - Пример модификации 7
Варианты осуществления иллюстрируют пример общей видеоспецификации, таблицы управления, информации этапов и информации экстренных действий. Однако подробные описания являются только примерами, и могут быть внесены различные модификации. Например, возможно добавить, удалить или изменить поле (элемент). Таблица управления может быть разделена на множество таблиц и может быть стандартизирована.
[0182] Например, образцы голоса пользователей головных дисплеев могут быть сохранены в таблице управления вместо идентификаторов для индивидуальной идентификации головных дисплеев или наряду с идентификаторами. В соответствии с этим устройство обработки информации может получать отношения между устройствами, роль и видеоспецификацию головного дисплея пользователя на основе образца голоса пользователя, полученного через микрофон, и устройство обработки информации может исполнить процесс формирования информации представления.
[0183] Например, информация (например, IP-адреса, МАС-адреса и ключи шифрования головных дисплеев), используемая при связи между головным дисплеем и устройством обработки информации, может дополнительно храниться в таблице управления совместно с идентификаторами головных дисплеев. Вместо "видеоспецификации", которая указывает шаблон спецификации видеосигнала, фактическая видеоспецификация (то есть, такой же элемент, как сохраненный в общей видеоспецификации), применяемая в каждом головном дисплее, может быть сохранена в таблице управления.
[0184] Например, таблица управления хранит отношения между устройствами, роль и видеоспецификацию для каждого идентификатора головного дисплея. Однако "идентификатор пользователя" может быть присвоен каждому пользователю, и отношения между устройствами, роли и видеоспецификация могут быть сохранены для каждого идентификатора пользователя в таблице управления.
[0185] Например, "экстренные действия", которые сохранены в информации об экстренных действиях заранее, представляют собой единственное действие. Однако множество действий может быть сохранено в экстренных действиях. Блок управления этапами может направить пользователя устройства отображения изображения через множество действий. Таким образом, пользователь устройства отображения изображения может выбрать экстренное действие из множества экстренных действий, которое предполагается наиболее подходящим, на основе его опыте или ситуации. В результате возможно дополнительно увеличить удобство устройства обработки информации.
[0186] - Пример модификации 8
Изобретение не ограничено описанными выше вариантами осуществления, примерами и примерами модификаций. Изобретение может быть реализовано в различных конфигурациях, пока различные конфигурации не отступают от сущности изобретения. Например, возможно должным образом заменить или объединить вместе технические характеристики в вариантах осуществления, примерах и примерах модификаций, которые соответствуют техническим характеристикам аспектов, описанных в сущности изобретения, чтобы реализовать часть или все проблемы, или достигнуть части или всех преимуществ. Если технические характеристики не описаны как существенные в этом документе, технические характеристики могут быть соответствующим образом удалены.
[0187] Список ссылочных позиций
10:
блок управления
20:
блок отображения изображения
22:
блок приведения в действие правого дисплея
24:
блок приведения в действие левого дисплея
26:
правый оптический блок отображения изображения
28:
левый оптический блок отображения изображения
32:
правый наушник
34:
левый наушник
40:
кабель
51:
передающий блок
52:
передающий блок
53:
принимающий блок
54:
принимающий блок
61:
камера (блок получения изображения)
110:
блок получения входной информации
100:
головной дисплей (устройство отображения изображения, укрепляемое на голове устройство отображения)
120:
блок хранения
130:
источник питания
140:
центральный процессор (ЦП)
160:
блок обработки изображения
170:
блок обработки речи
180:
интерфейс
190:
блок управления отображением
201:
блок управления правой подсветкой
202:
блок управления левой подсветкой
211:
блок управления правым LCD
212:
блок управления левым LCD
221:
правая подсветка
222:
левая подсветка
241:
правый LCD
242:
левый LCD
251:
правая проекционная оптическая система
252:
левая проекционная оптическая система
261:
правая световодная пластина
262:
левая световодная пластина
300:
устройство обработки информации
310:
первый блок ввода/вывода
311-31n:
первый блок ввода/вывода (блок получения)
320:
постоянное запоминающее устройство (ПЗУ)
330:
оперативное запоминающее устройство (ОЗУ)
340:
интерфейс связи
350:
центральный процессор (ЦПУ)
360:
блок формирования
365:
блок управления этапами
370:
второй блок ввода/вывода (блок представления)
371-37n:
второй блок ввода/вывода
380:
внешнее устройство хранения
381:
общая видеоспецификация
382:
таблица управления (блок хранения ролей и блок хранения отношений между устройствами)
383:
информация невидимых частей
384:
операционная запись
385:
режим работы
386:
информация этапов
387:
информация экстренных действий
500:
медицинское устройство
501-50n:
медицинское устройство
700:
дисплей
1000:
система обработки информации
OA:
внешнее устройство
PC:
персональный компьютер
OD:
база данных
VI:
виртуальное изображение
PN:
информация представления
JN:
объединенная информация
VR:
поле зрения
PR:
доктор
МР1:
позиция
UP1:
текущая позиция
СР1:
информация медицинского устройства