СПОСОБ И СИСТЕМА ДЛЯ ОБРАБОТКИ ГЛОБАЛЬНЫХ ПЕРЕХОДОВ МЕЖДУ ПОЛОЖЕНИЯМИ ПРОСЛУШИВАНИЯ В СРЕДЕ ВИРТУАЛЬНОЙ РЕАЛЬНОСТИ

1. Способ (900) представления звука в среде (180) представления виртуальной реальности с применением устройства (162) представления с 3 степенями свободы, при этом способ (900) включает:
представление (901) посредством устройства (162) представления с 3 степенями свободы исходного звукового сигнала исходного источника (113) звука исходной звуковой сцены (111) из исходного положения источника на сфере (114) вокруг исходного положения (201) прослушивания слушателя (181) в пределах среды (180) представления виртуальной реальности;
определение (902) того, что слушатель (181) передвигается в пределах среды (180) представления виртуальной реальности из исходного положения (201) прослушивания в пределах исходной звуковой сцены (111) в целевое положение (202) прослушивания в пределах другой целевой звуковой сцены (112);
в ответ на определение того, что слушатель (181) передвигается из исходного положения (201) прослушивания в пределах исходной звуковой сцены (111) в целевое положение (202) прослушивания в пределах целевой звуковой сцены (112), применение (903) убывающего усиления к исходному звуковому сигналу для определения модифицированного исходного звукового сигнала; и
представление (904) посредством устройства (162) представления с 3 степенями свободы модифицированного исходного звукового сигнала исходного источника (113) звука из исходного положения источника на сфере (114) вокруг исходного положения (201) прослушивания; при этом способ дополнительно включает:
определение целевого звукового сигнала целевого источника (113) звука целевой звуковой сцены (112);
определение целевого положения источника на сфере (114) вокруг целевого положения (202) прослушивания;
применение нарастающего усиления к целевому звуковому сигналу для определения модифицированного целевого звукового сигнала; и
представление посредством устройства (162) представления с 3 степенями свободы модифицированного целевого звукового сигнала целевого источника (113) звука из целевого положения источника на сфере (114) вокруг целевого положения (202) прослушивания.
2. Способ (900) по п. 1, отличающийся тем, что модифицированный исходный звуковой сигнал представляют из одного и того же положения относительно слушателя на протяжении всего перемещения из исходного положения (201) прослушивания в пределах исходной звуковой сцены (111) в целевое положение (202) прослушивания в пределах целевой звуковой сцены (112).
3. Способ (900) по п. 1 или 2, отличающийся тем, что целевая звуковая сцена (112) не содержит исходный источник (113) звука.
4. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает:
определение того, что слушатель (181) передвигается из исходной звуковой сцены (111) в целевую звуковую сцену (112) в течение интервала времени перехода;
определение промежуточного момента (213) времени в пределах интервала времени перехода; и
определение убывающего усиления на основании относительного положения промежуточного момента (213) времени в пределах интервала времени перехода.
5. Способ (900) по п. 4, отличающийся тем, что соответствующее убывающее усиление определяют для каждого из множества промежуточных моментов времени в пределах интервала времени перехода на основании относительного положения соответствующего промежуточного момента (213) времени в пределах интервала времени перехода; и соответствующее убывающее усиление применяют к исходному звуковому сигналу для определения соответствующего модифицированного исходного звукового сигнала для каждой из множества промежуточных постоянных времени в пределах интервала времени перехода.
6. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что убывающее усиление отлично от нуля до достижения целевого положения (202) прослушивания в пределах целевой звуковой сцены (112).
7. Способ (900) по п. 4 или 5, отличающийся тем, что способ (900) включает предоставление функции (211) убывания, которая характеризует убывающее усиление в разные промежуточные моменты (213) времени в пределах интервала времени перехода; и функция (211) убывания является такой, что убывающее усиление убывает с прохождением промежуточных моментов (213) времени.
8. Способ (900) по п. 7, отличающийся тем, что функция (211) убывания является такой, что:
исходный звуковой сигнал остается неизменным в начале интервала времени перехода; и/или
исходный звуковой сигнал сильнее затухает с прохождением промежуточных моментов (213) времени; и/или
исходный звуковой сигнал полностью заглушен в конце интервала времени перехода.
9. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает сохранение исходного положения источника для исходного источника (113) звука на сфере (114) вокруг исходного положения (201) прослушивания, когда слушатель (181) передвигается в пределах среды (180) представления виртуальной реальности из исходной звуковой сцены (111) в целевую звуковую сцену (112); и/или сохранение исходного положения (201) прослушивания, когда слушатель (181) передвигается в пределах среды (180) представления виртуальной реальности из исходной звуковой сцены (111) в целевую звуковую сцену (112).
10. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что модифицированный целевой звуковой сигнал представляют из одного и того же положения относительно слушателя на протяжении всего перемещения из исходного положения (201) прослушивания в пределах исходной звуковой сцены (111) в целевое положение (202) прослушивания в пределах целевой звуковой сцены (112).
11. Способ (900) по п. 10, отличающийся тем, что исходная звуковая сцена (111) не содержит целевой источник (113) звука.
12. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает:
определение того, что слушатель (181) передвигается из исходной звуковой сцены (111) в целевую звуковую сцену (112) в течение интервала времени перехода;
определение промежуточного момента (213) времени в пределах интервала времени перехода; и
определение нарастающего усиления на основании относительного положения промежуточного момента (213) времени в пределах интервала времени перехода.
13. Способ (900) по п. 12, отличающийся тем, что соответствующее нарастающее усиление определяют для каждого из множества промежуточных моментов времени в пределах интервала времени перехода на основании относительного положения соответствующего промежуточного момента (213) времени в пределах интервала времени перехода; и соответствующее нарастающее усиление применяют к целевому звуковому сигналу для определения соответствующего модифицированного целевого звукового сигнала для каждой из множества промежуточных постоянных времени в пределах интервала времени перехода.
14. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что нарастающее усиление отлично от нуля во время перемещения из исходной звуковой сцены (111) в целевую звуковую сцену (112).
15. Способ (900) по п. 12 или 13, отличающийся тем, что способ (900) включает предоставление функции (212) нарастания, которая характеризует нарастающее усиление в разные промежуточные моменты (213) времени в пределах интервала времени перехода; и функция (212) нарастания является такой, что нарастающее усиление нарастает с прохождением промежуточных моментов (213) времени.
16. Способ (900) по п. 15, отличающийся тем, что функция (212) нарастания является такой, что
целевой звуковой сигнал остается неизменным в конце интервала времени перехода; и/или
целевой звуковой сигнал слабее затухает с прохождением промежуточных моментов (213) времени; и/или
целевой звуковой сигнал полностью заглушен в начале интервала времени перехода.
17. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает сохранение целевого положения источника для целевого источника (113) звука на сфере (114) вокруг целевого положения (202) прослушивания, когда слушатель (181) передвигается в пределах среды (180) представления виртуальной реальности из исходной звуковой сцены (111) в целевую звуковую сцену (112); и/или сохранение целевого положения (202) прослушивания, когда слушатель (181) передвигается в пределах среды (180) представления виртуальной реальности из исходной звуковой сцены (111) в целевую звуковую сцену (112).
18. Способ (900) по п. 7, отличающийся тем, что способ (900) включает предоставление функции (212) нарастания, которая характеризует нарастающее усиление в разные промежуточные моменты (213) времени в пределах интервала времени перехода; и функция (212) нарастания является такой, что нарастающее усиление нарастает с прохождением промежуточных моментов (213) времени.
19. Способ (900) по п. 18, отличающийся тем, что функция (211) убывания и функция (212) нарастания в комбинации обеспечивают постоянное усиление для множества разных промежуточных моментов (213) времени.
20. Способ (900) по п. 18, отличающийся тем, что функцию (211) убывания и/или функцию (212) нарастания получают из битового потока (140), который указывает исходный звуковой сигнал и/или целевой звуковой сигнал; и/или получают из запоминающего блока устройства (160) представления звука в виртуальной реальности, которое приспособлено представлять исходный звуковой сигнал и/или целевой звуковой сигнал в пределах среды (180) представления виртуальной реальности.
21. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает прием указания о том, что слушатель (181) передвигается из исходной звуковой сцены (111) в целевую звуковую сцену (112).
22. Способ (900) по п. 21, отличающийся тем, что указание включает флаг.
23. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает отправку указания о том, что слушатель (181) передвигается из исходной звуковой сцены (111) в целевую звуковую сцену (112), на кодировщик (130); при этом кодировщик (130) приспособлен генерировать битовый поток (140), который указывает исходный звуковой сигнал.
24. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что первый звуковой сигнал представляют с использованием устройства (162) представления 3D звука, особенно устройства представления звука MPEG-H.
25. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает:
представление множества исходных звуковых сигналов соответствующего множества исходных источников (113) звука из множества разных исходных положений источника на сфере (114) вокруг положения (201, 202) прослушивания;
применение убывающего усиления ко множеству исходных звуковых сигналов для определения множества модифицированных исходных звуковых сигналов; и
представление множества модифицированных исходных звуковых сигналов исходного источника (113) звука из соответствующего множества исходных положений источника на сфере (114) вокруг положения (201, 202) прослушивания.
26. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что способ (900) включает:
определение множества целевых звуковых сигналов соответствующего множества целевых источников (113) звука целевой звуковой сцены (112);
определение множества целевых положений источника на сфере (114) вокруг целевого положения (202) прослушивания; и
применение нарастающего усиления ко множеству целевых звуковых сигналов для определения соответствующего множества модифицированных целевых звуковых сигналов; и
представление множества модифицированных целевых звуковых сигналов множества целевых источников (113) звука из соответствующего множества целевых положений источника на сфере (114) вокруг целевого положения (202) прослушивания.
27. Способ (900) по любому из предыдущих пунктов, отличающийся тем, что исходный звуковой сигнал представляет собой наложение звуковых сигналов множества исходных источников (113) звука.
28. Устройство (160) представления звука в виртуальной реальности для представления звука в среде (180) представления виртуальной реальности, содержащее устройство (162) представления с 3 степенями свободы, при этом устройство (160) представления звука в виртуальной реальности приспособлено
представлять посредством устройства (162) представления с 3 степенями свободы исходный звуковой сигнал исходного источника (113) звука исходной звуковой сцены (111) из исходного положения источника на сфере (114) вокруг исходного положения (201) прослушивания слушателя (181) в пределах среды (180) представления виртуальной реальности;
определять, что слушатель (181) передвигается в пределах среды (180) представления виртуальной реальности из исходного положения (201) прослушивания в пределах исходной звуковой сцены (111) в целевое положение (202) прослушивания в пределах другой целевой звуковой сцены (112);
в ответ на определение того, что слушатель (181) передвигается из исходного положения (201) прослушивания в пределах исходной звуковой сцены (111) в целевое положение (202) прослушивания в пределах целевой звуковой сцены (112), применять убывающее усиление к исходному звуковому сигналу для определения модифицированного исходного звукового сигнала; и
представлять посредством устройства (162) представления с 3 степенями свободы модифицированный исходный звуковой сигнал исходного источника (113) звука из исходного положения источника на сфере (114) вокруг исходного положения (201) прослушивания; при этом устройство представления звука в виртуальной реальности дополнительно приспособлено:
определять целевой звуковой сигнал целевого источника (113) звука целевой звуковой сцены (112);
определять целевое положение источника на сфере (114) вокруг целевого положения (202) прослушивания;
применять нарастающее усиление к целевому звуковому сигналу для определения модифицированного целевого звукового сигнала; и
представлять посредством устройства (162) представления с 3 степенями свободы модифицированный целевой звуковой сигнал целевого источника (113) звука из целевого положения источника на сфере (114) вокруг целевого положения (202) прослушивания.
29. Кодировщик (130), приспособленный генерировать битовый поток (140), который указывает звуковой сигнал, подлежащий представлению в пределах среды (180) представления виртуальной реальности; при этом кодировщик (130) приспособлен
определять исходный звуковой сигнал исходного источника (113) звука исходной звуковой сцены (111);
определять данные об исходном положении, относящиеся к исходному положению источника для исходного источника (113) звука;
генерировать битовый поток (140), содержащий исходный звуковой сигнал и данные об исходном положении;
принимать указание о том, что слушатель (181) передвигается из исходной звуковой сцены (111) в целевую звуковую сцену (112) в пределах среды (180) представления виртуальной реальности;
определять целевой звуковой сигнал целевого источника (113) звука целевой звуковой сцены (112);
определять данные о целевом положении, относящиеся к целевому положению источника для целевого источника (113) звука; и
генерировать битовый поток (140), содержащий целевой звуковой сигнал и данные о целевом положении.
30. Способ (930) генерирования битового потока (140), который указывает звуковой сигнал, подлежащий представлению в пределах среды (180) представления виртуальной реальности; при этом способ (930) включает:
определение (931) исходного звукового сигнала исходного источника (113) звука исходной звуковой сцены (111);
определение (932) данных об исходном положении, относящихся к исходному положению источника для исходного источника (113) звука;
генерирование (933) битового потока (140), содержащего исходный звуковой сигнал и данные об исходном положении;
прием (934) указания о том, что слушатель (181) передвигается из исходной звуковой сцены (111) в целевую звуковую сцену (112) в пределах среды (180) представления виртуальной реальности;
определение (935) целевого звукового сигнала целевого источника (113) звука целевой звуковой сцены (112);
определение (936) данных о целевом положении, относящихся к целевому положению источника для целевого источника (113) звука; и
генерирование (937) битового потока (140), содержащего целевой звуковой сигнал и данные о целевом положении.
31. Устройство (160) представления звука в виртуальной реальности для представления звукового сигнала в среде (180) представления виртуальной реальности, при этом устройство (160) представления звука содержит:
устройство (162) представления 3D звука MPEG-H, которое приспособлено представлять звуковой сигнал источника (113) звука из положения источника на сфере (114) вокруг положения (201, 202) прослушивания слушателя (181) в пределах среды (180) представления виртуальной реальности;
блок (161) предварительной обработки, который приспособлен
определять новое положение (201, 202) прослушивания слушателя (181) в пределах среды (180) представления виртуальной реальности; и
обновлять звуковой сигнал и положение источника для источника (201, 202) звука относительно сферы (114) вокруг нового положения (201, 202) прослушивания;
при этом устройство (162) представления 3D звука MPEG-H приспособлено представлять обновленный звуковой сигнал источника (113) звука из обновленного положения источника на сфере (114) вокруг нового положения (201, 202) прослушивания.