Сигнал изображения, представляющий сцену

1.Устройство для формирования сигнала изображения, содержащее:
приемник (401) для приема множества исходных изображений, представляющих сцену из разных поз обзора;
генератор (403) объединенных изображений для формирования множества объединенных изображений из исходных изображений, причем каждое объединенное изображение получают из набора по меньшей мере из двух исходных изображений множества исходных изображений, каждый пиксель объединенного изображения представляет сцену для позы луча, а позы луча для каждого объединенного изображения включают в себя по меньшей мере два различных положения, при этом поза луча для пикселя представляет позу для луча в направлении обзора для пикселя из положения обзора для пикселя;
средство (405) оценки для определения мер качества прогнозирования для элементов множества исходных изображений, причем мера качества прогнозирования для элемента первого исходного изображения указывает разницу между значениями пикселя в первом исходном изображении для пикселей в элементе и прогнозируемыми значениями пикселя для пикселей в элементе, а прогнозируемые значения пикселя являются значениями пикселя, полученными в результате прогнозирования пикселей в элементе из множества объединенных изображений;
определитель (407) для определения сегментов исходных изображений, содержащих элементы, для которых мера качества прогнозирования указывает разницу выше порогового значения; и
генератор (409) сигнала изображения для формирования сигнала изображения, содержащего данные изображения, представляющие объединенные изображения, и данные изображения, представляющие сегменты исходных изображений.
2.Устройство по п. 1, в котором генератор (403) объединенных изображений выполнен с возможностью формирования по меньшей мере первого объединенного изображения множества объединенных изображений посредством синтеза вида пикселей первого объединенного изображения из множества исходных изображений, причем каждый пиксель первого объединенного изображения представляет сцену для позы луча, а позы луча для первого изображения включают в себя по меньшей мере два различных положения.
3.Устройство по п. 2, в котором скалярное произведение между вертикальным вектором и векторами перекрестного произведения пикселя является неотрицательным по меньшей мере для 90% пикселей первого объединенного изображения, причем вектор перекрестного произведения пикселя для пикселя является перекрестным произведением между направлением луча для пикселя и вектором из центральной точки для различных поз обзора в положение луча для пикселя.
4.Устройство по п. 3, в котором генератор (403) объединенных изображений выполнен с возможностью формирования второго объединенного изображения множества объединенных изображений посредством синтеза вида пикселей второго объединенного изображения из множества исходных изображений, причем каждый пиксель второго объединенного изображения представляет сцену для позы луча, а позы луча для первого изображения включают в себя по меньшей мере два различных положения; и
при этом скалярное произведение между вертикальным вектором и векторами перекрестного произведения пикселя является неположительными по меньшей мере для 90% пикселей второго объединенного изображения.
5.Устройство по п. 2, в котором позы луча первого объединенного изображения выбраны так, чтобы они были близкими к границе области, содержащей различные позы обзора множества исходных изображений.
6.Устройство по п. 2 или 3, в котором каждая из поз луча первого объединенного изображения определена на расстоянии меньше первого расстояния от границы области, содержащей различные позы обзора множества исходных изображений, причем первое расстояние составляет не более 50% от максимального внутреннего расстояния между точками на границе.
7.Устройство по любому предыдущему пункту, в котором генератор (403) объединенных изображений выполнен с возможностью для каждого пикселя первого объединенного изображения множества объединенных изображений:
определения соответствующего пикселя в каждом из исходных изображений вида, для которых соответствующий пиксель присутствует, причем соответствующий пиксель является пикселем, который представляет то же самое направление луча, что и пиксель первого комбинированного изображения;
выбора значения пикселя для пикселя первого комбинированного изображения в качестве значения пикселя соответствующего пикселя в исходном изображении вида, для которого соответствующий пиксель представляет луч, имеющий наибольшее расстояние от центральной точки для различных поз обзора, причем это наибольшее расстояние определяют в первом направлении вдоль первой оси, перпендикулярной направлению луча для соответствующего пикселя.
8.Устройство по п. 7, в котором определение соответствующих пикселей включает повторную дискретизацию каждого исходного изображения в представление изображения, представляющего по меньшей мере часть поверхности сферы обзора, окружающей позы обзора, и определение соответствующих пикселей как пикселей, имеющих то же самое положение в представлении изображения.
9.Устройство по п. 7 или 8, в котором генератор (403) объединенных изображений выполнен с возможностью для каждого пикселя второго объединенного изображения:
выбора значения пикселя для пикселя во втором объединенном изображении в качестве значения пикселя соответствующего пикселя в исходном изображении вида, для которого соответствующий пиксель представляет луч, имеющий наибольшее расстояние от центральной точки в направлении, противоположном первому направлению.
10.Устройство по любому из пп. 7-9, в котором генератор (403) объединенных изображений выполнен с возможностью:
для каждого пикселя третьего объединенного изображения:
выбора значения пикселя для пикселя в третьем объединенном изображении в качестве значения пикселя соответствующего пикселя в исходном изображении вида, для которого соответствующий пиксель представляет луч, имеющий наименьшее расстояние от центральной точки.
11.Устройство по любому из пп. 7-10, в котором генератор (403) объединенных изображений выполнен с возможностью:
для каждого пикселя в четвертом объединенном изображении:
выбора значения пикселя для пикселя в четвертом объединенном изображении в качестве значения пикселя соответствующего пикселя в исходном изображении вида, для которого соответствующий пиксель представляет луч, имеющий наибольшее расстояние от центральной точки во втором направлении вдоль второй оси, перпендикулярной направлению луча для соответствующего пикселя, причем первая ось и вторая ось имеют разные направления.
12.Устройство по любому из пп. 7-11, в котором генератор (403) объединенных изображений выполнен с возможностью формирования данных о происхождении для первого объединенного изображения, причем данные о происхождении указывают, какое из объединенных изображений является источником для каждого пикселя первого объединенного изображения; а генератор (409) сигнала изображения выполнен с возможностью включения данных о происхождении в сигнал изображения.
13.Устройство по любому предыдущему пункту, в котором генератор (403) сигнала изображения выполнен с возможностью включения данных исходных поз обзора в сигнал изображения, причем данные исходных поз обзора указывают различные позы обзора для исходных изображений.
14.Устройство для приема сигнала изображения, содержащее:
приемник (501) для приема сигнала изображения, содержащего:
множество объединенных изображений, причем каждое объединенное изображение представляет данные изображения, полученные из набора по меньшей мере из двух исходных изображений множества исходных изображений, представляющих сцену из различных поз обзора, каждый пиксель объединенного изображения представляет сцену для позы луча, а позы луча для каждого объединенного изображения включают в себя по меньшей мере два различных положения, при этом поза луча для пикселя представляет позу для луча в направлении обзора для пикселя и из положения обзора для пикселя;
данные изображения для набора сегментов множества исходных изображений, причем сегмент для первого исходного изображения содержит по меньшей мере один пиксель первого исходного изображения, для которого мера качества прогнозирования для прогнозирования сегмента на основе множества объединенных изображений ниже порогового значения; и
процессор (503) для обработки сигнала данных.
15.Способ формирования сигнала изображения, включающий:
прием множества исходных изображений, представляющих сцену из разных поз обзора;
формирование множества объединенных изображений из исходных изображений, причем каждое объединенное изображение получают из набора по меньшей мере из двух исходных изображений множества исходных изображений, каждый пиксель объединенного изображения представляет сцену для позы луча, а позы луча для каждого объединенного изображения включают в себя по меньшей мере два различных положения, при этом поза луча для пикселя представляет позу для луча в направлении обзора для пикселя из положения обзора для пикселя;
определение мер качества прогнозирования для элементов множества исходных изображений, причем мера качества прогнозирования для элемента первого исходного изображения указывает разницу между значениями пикселя в первом исходном изображении для пикселей в элементе и прогнозируемыми значениями пикселя для пикселей в элементе, а прогнозируемые значения пикселя являются значениями пикселя, полученными в результате прогнозирования пикселей в элементе из множества объединенных изображений;
определение сегментов исходных изображений, содержащих элементы, для которых мера качества прогнозирования указывает разницу выше порогового значения;
формирование сигнала изображения, содержащего данные изображения, представляющие объединенные изображения, и данные изображения, представляющие сегменты исходных изображений.
16.Способ формирования сигнала изображения, представляющего сцену, включающий:
прием сигнала изображения, содержащего:
множество объединенных изображений, причем каждое объединенное изображение представляет данные изображения, полученные из набора по меньшей мере из двух исходных изображений множества исходных изображений, представляющих сцену из различных поз обзора, каждый пиксель объединенного изображения представляет сцену для позы луча, а позы луча для каждого объединенного изображения включают в себя по меньшей мере два разных положения, причем поза луча для пикселя представляет позу для луча в направлении обзора для пикселя и из положения обзора для пикселя; данные изображения для набора сегментов множества исходных изображений, причем сегмент для первого исходного изображения содержит по меньшей мере один пиксель первого исходного изображения, для которого мера качества прогнозирования для прогнозирования сегмента из множества объединенных изображений ниже порогового значения; и
обработку сигнала изображения.
17.Компьютерный программный продукт, содержащий средства компьютерного программного кода, выполненные с возможностью вызова осуществления компьютером всех этапов по п. 15 или 16 при исполнении упомянутой программы на компьютере.