RU2680195C1 - Аудиокодер для кодирования многоканального сигнала и аудиодекодер для декодирования кодированного аудиосигнала - Google Patents
Аудиокодер для кодирования многоканального сигнала и аудиодекодер для декодирования кодированного аудиосигнала Download PDFInfo
- Publication number
- RU2680195C1 RU2680195C1 RU2017134385A RU2017134385A RU2680195C1 RU 2680195 C1 RU2680195 C1 RU 2680195C1 RU 2017134385 A RU2017134385 A RU 2017134385A RU 2017134385 A RU2017134385 A RU 2017134385A RU 2680195 C1 RU2680195 C1 RU 2680195C1
- Authority
- RU
- Russia
- Prior art keywords
- signal
- channel
- encoder
- decoder
- encoded
- Prior art date
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 114
- 230000003595 spectral effect Effects 0.000 claims abstract description 52
- 238000012545 processing Methods 0.000 claims abstract description 49
- 238000000034 method Methods 0.000 claims description 79
- 238000001228 spectrum Methods 0.000 claims description 39
- 238000002156 mixing Methods 0.000 claims description 34
- 238000006243 chemical reaction Methods 0.000 claims description 15
- 230000015572 biosynthetic process Effects 0.000 claims description 14
- 238000003786 synthesis reaction Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 238000005070 sampling Methods 0.000 claims description 11
- 238000001914 filtration Methods 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 8
- 238000011049 filling Methods 0.000 claims description 5
- 230000002194 synthesizing effect Effects 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 2
- 239000000126 substance Substances 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 30
- 230000006870 function Effects 0.000 description 20
- 230000007704 transition Effects 0.000 description 16
- 230000008901 benefit Effects 0.000 description 9
- 238000004422 calculation algorithm Methods 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 6
- 238000009432 framing Methods 0.000 description 6
- 238000013459 approach Methods 0.000 description 5
- 238000000354 decomposition reaction Methods 0.000 description 5
- 230000005284 excitation Effects 0.000 description 5
- 238000013139 quantization Methods 0.000 description 5
- 230000002123 temporal effect Effects 0.000 description 5
- 230000007423 decrease Effects 0.000 description 4
- 230000001755 vocal effect Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 230000003111 delayed effect Effects 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 230000001343 mnemonic effect Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- TVEXGJYMHHTVKP-UHFFFAOYSA-N 6-oxabicyclo[3.2.1]oct-3-en-7-one Chemical compound C1C2C(=O)OC1C=CC2 TVEXGJYMHHTVKP-UHFFFAOYSA-N 0.000 description 1
- 108010076504 Protein Sorting Signals Proteins 0.000 description 1
- 244000019194 Sorbus aucuparia Species 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 235000006414 serbal de cazadores Nutrition 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/032—Quantisation or dequantisation of spectral components
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/08—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/08—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
- G10L19/12—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters the excitation function being a code excitation, e.g. in code excited linear prediction [CELP] vocoders
- G10L19/13—Residual excited linear prediction [RELP]
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Stereophonic System (AREA)
- Analogue/Digital Conversion (AREA)
Abstract
Изобретение относится к средствам для кодирования многоканального аудиосигнала. Технический результат заключается в повышении эффективности кодирования аудиосигнала. Выполняют понижающее микширование многоканального сигнала (4) для получения сигнала (14) понижающего микширования. Кодируют сигнал (14) понижающего микширования. Причем сигнал (14) понижающего микширования имеет нижний диапазон и верхний диапазон. Причем кодирование сигнала (14) понижающего микширования содержит применение обработки расширения ширины полосы для параметрического кодирования верхнего диапазона. Создают спектральное представление многоканального сигнала (4). Обрабатывают спектральное представление, содержащее нижний диапазон и верхний диапазон многоканального сигнала для создания многоканальной информации (20). Причем кодирование сигнала (14) понижающего микширования дополнительно содержит декодирование кодированного сигнала (26) понижающего микширования для получения кодированного и декодированного сигнала (54) понижающего микширования. 6 н. и 8 з.п. ф-лы, 21 ил.
Description
Настоящее изобретение относится к аудиокодеру для кодирования многоканального аудиосигнала и аудиодекодеру для декодирования кодированного аудиосигнала. Варианты осуществления изобретения относятся к многоканальному кодированию в LPD с использованием банка фильтров для многоканальной обработки (DFT), которую не используют для расширения ширины полосы.
В настоящее время на практике широко используют перцептуальное кодирование аудиосигналов с целью сокращения объема данных для эффективного запоминания или передачи этих сигналов. В частности, когда должна быть обеспечена максимальная эффективность, используют кодеки, которые хорошо адаптированы к входным характеристикам сигнала. Одним из примеров является базовый кодек MPEG-D USAC, который может быть выполнен с возможностью преимущественного использования кодирования с ACELP (линейное предсказание с алгебраическим кодовым возбуждением) для речевых сигналов, кодирование с TCX (преобразование возбуждающего сигнала) для фонового шума и микшированных сигналов, и AAC (усовершенствованное аудиокодирование) для музыкального контента. Все три внутренние конфигурации кодека могут мгновенно переключаться адаптивным в отношении сигнала образом в зависимости от контента сигнала.
Кроме того, используют способы объединенного многоканального кодирования (кодирование по схеме центральный/боковой и т.д.) или способы параметрического кодирования для обеспечения максимальной эффективности. Способы параметрического кодирования в своей основе нацелены на воссоздание перцептуально эквивалентного аудиосигнала, а не высококачественное восстановление заданной формы сигнала. Соответствующие примеры включают заполнение шума, расширение ширины полосы частот и пространственное аудиокодирование.
При объединении базового кодера, адаптивного к сигналу, и способов либо многоканального, либо параметрического кодирования в известных кодеках, базовый кодек переключают для согласования с характеристиками сигнала, но выбор способов многоканального кодирования, такого как M/S-Stereo, пространственного аудиокодирования или параметрического стерео, остается фиксированным и не зависит от характеристик сигнала. Эти способы обычно используют в базовом кодеке в качестве предпроцессора для базового кодера и постпроцессора для базового декодера, причем и тот, и другой никак не учитывают действительный выбор, реализованный базовым кодеком.
С другой стороны, выбор способов параметрического кодирования для расширения ширины полосы иногда выполняется в зависимости от сигнала. Например, способы, применяемые во временной области, являются более эффективными для речевых сигналов, в то время как обработка в частотной области больше подходит для других сигналов. В указанном случае принятые способы многоканального кодирования должны быть совместимы со способами расширения ширины полосы обоих типов.
Соответствующие материалы, отражающие известный уровень техники, содержат:
PS и MPS в качестве пред/постпроцессора для базового кодека MPEG-D USAC
Стандарт MPEG-D USAC
Стандарт аудио MPEG-H 3D
В MPEG-D USAC описан переключаемый базовый кодер. Однако в USAC способы многоканального кодирования определены в качестве фиксированного выбора, являющегося общим для всего базового кодера независимо от его внутреннего переключателя принципов кодирования, будь то ACELP, TCX («LPD») или AAC («FD»). Таким образом, если необходимо иметь конфигурацию переключаемого базового кодека, этот кодек ограничен использованием параметрического многоканального кодирования (PS) для всего сигнала. Однако, для кодирования, например, музыкальных сигналов больше подходит использование объединенного стереокодирования, которое позволяет обеспечить динамическое переключение между схемой L/R (левый/правый) и схемой M/S (центральный/боковой) для каждого частотного диапазона и каждого кадра.
Таким образом, имеется потребность в усовершенствовании существующего подхода.
Задачей настоящего изобретения является обеспечение усовершенствованной концепции для обработки аудиосигнала. Эта задача решается содержанием независимых пунктов формулы изобретения.
Настоящее изобретение основано на определении того, что параметрический кодер (временной области), использующий многоканальный кодер, является предпочтительным для параметрического многоканального аудиокодирования. Многоканальный кодер может представлять собой многоканальный остаточный кодер, который может уменьшить ширину полосы частот для передачи параметров кодирования по сравнению с отдельным кодированием для каждого канала. Это с успехом можно использовать, например, в комбинации с объединенным многоканальным аудиокодером частотной области. Способы объединенного многоканального кодирования во временной области и частотной области могут быть объединены так, что, например, техническое решение на основе кадров позволит адресовать текущий кадр в период кодирования на временной основе или частотной основе. Другими словами, в вариантах осуществления показана усовершенствованная концепция для объединения переключаемого базового кодека с использованием объединенного многоканального кодирования и параметрического пространственного аудиокодирования в полностью переключаемый перцептуальный кодек, который позволяет использовать другие способы многоканального кодирования в зависимости от выбора базового кодека. Это является преимуществом, поскольку, в отличие от уже существующих методов, варианты осуществления изобретения демонстрируют способ многоканального кодирования, который может мгновенно переключаться наравне с базовым кодером, и, следовательно, окажется хорошо согласованным и адаптированным к выбранному базовому кодеру. Таким образом, можно избежать изложенных проблем, возникающих из-за фиксированного выбора способов многоканального кодирования. Более того, появляется возможность полностью переключаемого объединения заданного базового кодера и соответствующего адаптированного способа многоканального кодирования. Указанный кодер, например, реализующий AAC (усовершенствованное аудиокодирование) с использованием стереокодирования по схеме L/R или M/S позволяет выполнять кодирование музыкального сигнала в базовом кодере в частотной области (FD) с использованием специального объединенного стерео или многоканального кодирования, например, M/S стерео. Это решение можно применить в отдельности для каждой полосы частот в каждом аудиокадре. В случае, например, речевого сигнала базовый кодер может мгновенно переключиться на декодирование с линейным предсказанием (LPD), и на соответствующие другие, например, параметрические способы стереокодирования.
В вариантах осуществления показаны стереообработка, являющаяся уникальной для моно LPD тракта, и схема бесперебойного переключения на основе стереосигнала, которая объединяет выход стерео FD тракта с выходом базового LPD кодера и использует специальное стереокодирование. Это является преимуществом, поскольку позволяет обеспечить бесперебойное переключение кодека, причем свободное от артефактов.
Варианты осуществления относятся к кодеру для кодирования многоканального сигнала. Кодер содержит кодер области линейного предсказания и кодер частотной области. Кроме того, кодер содержит контроллер для переключения с кодера области линейного предсказания на кодер частотной области. Более того, кодер области линейного предсказания может содержать понижающий микшер для понижающего микширования многоканального сигнала с целью получения сигнала понижающего микширования, базовый кодер области линейного предсказания для кодирования сигнала понижающего микширования и первый многоканальный кодер для создания первой многоканальной информации из указанного многоканального сигнала. Кодер частотной области содержит второй объединенный многоканальный кодер для создания второй многоканальной информации из указанного многоканального сигнала, где второй многоканальный кодер отличается от первого многоканального кодера. Контроллер сконфигурирован так, что часть многоканального сигнала представляют либо кодированным кадром кодера области линейного предсказания, либо кодированным кадром кодера частотной области. Кодер области линейного предсказания может содержать ACELP базовый кодер и, например, использовать алгоритм параметрического стереокодирования в виде первого объединенного многоканального кодера. Кодер частотной области может, например, содержать AAC базовый кодер, в котором используют, например, L/R или M/S обработку, в качестве второго объединенного многоканального кодера. Контроллер способен анализировать многоканальный сигнал, например, в отношении характеристик кадра, типа, например, речи или музыки, и принять решение по каждому кадру, последовательности кадров или части многоканального аудиосигнала, какой кодер (кодер области линейного предсказания или кодер частотной области) следует использовать для кодирования данной части многоканального аудиосигнала.
В вариантах осуществления кроме того показан аудиодекодер для декодирования кодированного аудиосигнала. Аудиодекодер содержит декодер области линейного предсказания и декодер частотной области. Кроме того, аудиодекодер содержит первый объединенный многоканальный декодер для создания первого многоканального представления с использованием выхода декодера области линейного предсказания и с использованием многоканальной информации и второй многоканальный декодер для создания второго многоканального представления с использованием выхода декодера частотной области и второй многоканальной информации. Кроме того, аудиодекодер содержит первый объединитель для объединения первого многоканального представления и второго многоканального представления с целью получения декодированного аудиосигнала. Этот объединитель может выполнять бесперебойное переключение при отсутствии артефактов с первого многоканального представления, являющегося, например, многоканальным аудиосигналом линейного предсказания на второе многоканальное представление, являющееся, например, декодированным многоканальным аудиосигналом частотной области.
В вариантах осуществления показано представление ACELP/TCX кодирования в LPD тракте со специальным стереокодированием и независимого AAC стереокодирования в тракте частотной области в переключаемом аудиокодере. Кроме того, в вариантах осуществления показано бесперебойное мгновенное переключение с LPD стерео на FD стерео, где дополнительные варианты осуществления относятся к независимому выбору объединенного многоканального кодирования для сигнального контента разных типов. Например, для речи, которую предпочтительно кодируют, используя LPD тракт, используют параметрическое стерео, в то время как для музыки, которую кодируют в FD тракте, используют более адаптивное стереокодирование, которое позволяет динамически переключаться с L/R схемы на M/S схему для каждой полосы частот и каждого кадра.
Согласно вариантам осуществления речь, которую предпочтительно кодируют, используя LPD тракт, и которая обычно локализована в центре стереоизображения, хорошо подходит простое параметрическое стерео, в то время как музыка, которую кодируют в FD тракте, обычно имеет более сложное пространственное распределение, и можно получить выгоду, применив более адаптивное стереокодирование, которое может обеспечить динамическое переключение между L/R схемой и M/S схемой для каждой полосы частот и каждого кадра.
Кроме того, в вариантах осуществления показан аудиокодер, содержащий понижающий микшер (12) для понижающего микширования многоканального сигнала с целью получения сигнала понижающего микширования, базовый кодер области линейного предсказания для кодирования сигнала понижающего микширования, банк фильтров для создания спектрального представления многоканального сигнала и объединенный многоканальный кодер для создания многоканальной информации из многоканального сигнала. Сигнал понижающего микширования имеет нижний диапазон и верхний диапазон, причем базовый кодер области линейного предсказания выполнен с возможностью обработки, расширяющей полосу частот, для параметрического кодирования верхнего диапазона.
Кроме того, многоканальный кодер выполнен с возможностью обработки спектрального представления, содержащего нижний и верхний диапазон многоканального сигнала. Это является преимуществом, поскольку при каждом параметрическом кодировании можно использовать оптимальную времячастотную декомпозицию для получения его параметров. Это можно реализовать, используя, например, комбинацию ACELP (линейное предсказание с возбуждением по алгебраической кодовой книге) и TDBWE (расширение ширины полосы во временной области), где ACELP можно использовать для кодирования нижнего диапазона аудиосигнала, а TDBWE можно использовать для кодирования верхнего диапазона аудиосигнала, а также параметрическое многоканальное кодирование с внешним банком фильтров (например, DFT). Это комбинация особенно эффективна, поскольку известно, что наилучшее расширение ширины полосы для речи должно иметь место во временной области, и многоканальная обработка в частотной области. Поскольку ACELP+TDBWE не имеют временно-частотный преобразователь, использование внешнего банка фильтров или преобразования типа DFT имеет преимущество. Более того, кадрирование многоканального процессора может совпадать с кадрированием, используемым в ACELP. Даже в том случае, если многоканальная обработка выполняется в частотной области, временное разрешение для вычисления параметров или понижающего микширования в идеале должно приближаться или даже совпадать с кадрированием в ACELP.
Описанные варианты осуществления являются перспективными, поскольку можно использовать независимый выбор объединенного многоканального кодирования для сигнального контента разных типов.
Далее со ссылками на прилагаемые чертежи обсуждаются варианты осуществления настоящего изобретения, где:
Фиг. 1 - блок-схема кодера для кодирования многоканального аудиосигнала;
фиг. 2 - блок-схема кодера области линейного предсказания согласно варианту осуществления;
фиг. 3 - блок-схема кодера частотной области согласно варианту осуществления;
фиг. 4 - блок-схема аудиокодера согласно варианту осуществления;
Фиг. 5а - блок-схема активного понижающего микшера согласно варианту осуществления;
Фиг. 5b - блок-схема пассивного понижающего микшера согласно варианту осуществления;
фиг. 6 - блок-схема декодера для декодирования кодированного аудиосигнала;
фиг. 7 - блок-схема декодера согласно варианту осуществления;
фиг. 8 - блок-схема способа кодирования многоканального сигнала;
фиг. 9 - блок-схема способа декодирования кодированного аудиосигнала;
фиг. 10 - блок-схема кодера для кодирования многоканального сигнала согласно дополнительному аспекту;
фиг. 11 - блок-схема декодера для декодирования кодированного аудиосигнала согласно дополнительному аспекту;
фиг. 12 - блок-схема способа аудиокодирования для кодирования многоканального сигнала согласно дополнительному аспекту;
фиг. 13 - блок-схема способа декодирования кодированного аудиосигнала согласно дополнительному аспекту;
фиг. 14 - временная диаграмма бесперебойного переключения с кодирования в частотной области на LPD кодирование;
фиг. 15 - временная диаграмма бесперебойного переключения с декодирования в частотной области на декодирование LPD области;
фиг. 16 - временная диаграмма бесперебойного переключения с LPD кодирования на кодирование в частотной области;
фиг. 17 - временная диаграмма бесперебойного переключения с LPD декодирования на декодирование в частотной области;
фиг. 18 - блок-схема кодера для кодирования многоканального сигнала согласно дополнительному аспекту;
фиг. 19 - блок-схема декодера для декодирования кодированного аудиосигнала согласно дополнительному аспекту;
фиг. 20 - блок-схема способа аудиокодирования для кодирования многоканального сигнала согласно дополнительному аспекту;
фиг. 21 - блок-схема способа декодирования кодированного аудиосигнала согласно дополнительному аспекту.
Далее подробно раскрываются варианты осуществления изобретения. Элементы, показанные на соответствующих фигурах, имеющие одинаковые или подобные функциональные возможности, имеют привязанные к ним одинаковые ссылочные позиции.
На фиг. 1 схематически представлена блок-схема аудиокодера 2 для кодирования многоканального аудиосигнала 4. Аудиокодер содержит кодер 6 области линейного предсказания, кодер 8 частотной области и контроллер 10 для переключения с кодера 6 области линейного предсказания на кодер 8 частотной области. Контроллер способен анализировать многоканальный сигнал и принять решение по частям многоканального сигнала, какое кодирование (области линейного предсказания или частотной области) является предпочтительным. Другими словами, контроллер сконфигурирован так, что часть многоканального сигнала представляют либо кодированным кадром кодера области линейного предсказания, либо кодированным кадром кодера частотной области. Кодер области линейного предсказания содержит понижающий микшер 12 для понижающего микширования многоканального сигнала 4 с целью получения сигнала 14 многоканального микширования. Кодер области линейного предсказания кроме того содержит базовый кодер 16 области линейного предсказания для кодирования сигнала понижающего микширования и кроме того кодер области линейного предсказания содержит первый объединенный многоканальный кодер 18 для создания первой многоканальной информации 20, содержащей, например, параметры ILD (разница в уровне звукового сигнала, поступающего в оба уха) и/или IPD (интерауральный интервал), из многоканального сигнала 4. Многоканальный сигнал может, например, представлять собой стереосигнал, где понижающий микшер преобразует указанный стереосигнал в моносигнал. Базовый кодер области линейного предсказания может кодировать моносигнал, причем первый объединенный многоканальный кодер может создавать стереоинформацию для кодированного моносигнала в качестве первой многоканальной информации. Кодер частотой области и контроллер не являются обязательными по сравнению с дополнительным аспектом, описанным со ссылками на фиг. 10 и фиг. 11. Однако для адаптивного переключения с кодирования во временной области на кодирование частотой области с использованием кодера частотной области и контроллера является перспективным.
Кроме того, кодер 8 частотной области содержит второй объединенный многоканальный кодер 22 для создания второй многоканальной информации 24 из многоканального сигнала 4, где второй объединенный многоканальный кодер 22 отличается от первого многоканального кодера 18. Однако второй объединенный многоканальный процессор 22 получает вторую многоканальную информацию, позволяющую обеспечить второе качество воспроизведения, превышающее первое качество воспроизведения первой многоканальной информации, полученной первым многоканальным кодером для сигналов, которые лучше кодируются вторым кодером.
Другими словами, согласно вариантам осуществления, первый многоканальный кодер 18 выполнен с возможностью создания первой многоканальной информации 20, позволяющей обеспечить первое качество воспроизведения, где второй объединенный многоканальный кодер 22 выполнен с возможностью создания второй многоканальной информации 24, позволяющей обеспечить второе качество воспроизведения, где второе качество воспроизведения превышает первое качество воспроизведения. Это по меньшей мере соответствует сигналам, таким, например, как речевые сигналы, которые лучше кодируются вторым многоканальным кодером.
Таким образом, первый многоканальный кодер может представлять собой параметрический объединенный многоканальный кодер, содержащий, например, кодер предсказания стерео, параметрический стереокодер или параметрический стереокодер на основе чередования. Более того, второй объединенный многоканальный кодер может обеспечивать сохранение формы сигнала, например, на основе избирательного (в зависимости от диапазона) перехода на стереокодер типа (центральный/боковой) или типа (левый/правый). Как показано на фиг. 1, кодированный сигнал 26 понижающего микширования может передаваться на аудиодекодер и, но не обязательно, выполнять функцию первого объединенного многоканального процессора, где, например, кодированный сигнал понижающего микширования может быть декодирован, и можно вычислить остаточный сигнал из указанного многоканального сигнала до кодирования и после декодирования кодированного сигнала для повышения качества декодирования кодированного аудиосигнала на стороне декодера. Кроме того, контроллер 10 может использовать управляющие сигналы 28а, 28b для управления кодером области линейного предсказания и кодером частотой области соответственно после определения подходящей схемы кодирования для текущей части многоканального сигнала.
На фиг.2 представлена блок-схема кодера 6 области линейного предсказания согласно варианту осуществления. Входом в кодер 6 области линейного предсказания является сигнал 14 понижающего микширования, сформированный понижающим микшером 12. Кроме того, кодер области линейного предсказания содержит ACELP процессор 30 и TCX процессор 32. ACELP процессор 30 выполнен с возможностью работы с сигналом 34 понижающего микширования с понижающей дискретизацией, которая может быть выполнена блоком 35 понижающей дискретизации. Кроме того, процессор 36 расширения ширины полосы во временной области может выполнить параметрическое кодирование диапазона части сигнала 14 понижающего микширования, которая удалена из сигнала 34 понижающего микширования с понижающей дискретизацией, где сигнал 34 является входным сигналом ACELP процессора 30. Процессор 36 расширения ширины полосы во временной области может выдать параметрически кодированный диапазон 38 части сигнала 14 понижающего микширования. Другими словами, процессор 36 расширения ширины полосы во временной области может вычислить параметрическое представление частотных диапазонов сигнала 14 понижающего микширования, которые могут содержать боле высокие частоты по сравнению с частотой среза блока 35 понижающей дискретизации. Таким образом, блок 35 понижающей дискретизации может иметь дополнительное свойство, состоящее в подаче указанных частотных диапазонов, превышающих частоту среза блока понижающей дискретизации, в процессор 36 расширения ширины полосы во временной области, или для подачи частоты среза в процессор расширения ширины полосы во временной области временной области (TD-BWE), чтобы предоставить возможность TD-BWE процессору вычислить параметры 38 для корректной части сигнала 14 понижающего микширования.
Кроме того, TCX процессор выполнен с возможностью работы с сигналом понижающего микширования, который, например, не подвергался понижающей дискретизации, или степень этой понижающей дискретизации меньше понижающей дискретизации для ACELP процессора. Понижающая дискретизация в степени, меньшей понижающей дискретизации ACELP процессора, может представлять собой понижающую дискретизацию, при которой используют более высокую частоту среза, где в TCX процессор подается большее количество диапазонов сигнала понижающего микширования по сравнению с сигналом 35 понижающего микширования с понижающей дискретизацией, являющимся входным сигналом для ACELP процессора 30. TCX процессор может дополнительно содержать первый временно-частотный преобразователь 40, выполняющий, например, преобразования MOCT, DFT или DCT. TCX процессор 32 может дополнительно содержать первый параметрический генератор 42 и первый квантователь-кодер 44. Первый параметрический генератор 42, например, реализующий алгоритм интеллектуального заполнения пропусков (IDF) может вычислить первое параметрическое представление первого набора диапазонов 46, где первый квантователь-кодер 44, использует, например, TCX алгоритм для вычисления первого набора квантованных кодированных спектральных линий 48 для второго набора диапазонов. Другими словами, первый квантователь-кодер может выполнить параметрическое кодирование соответствующих диапазонов, например, тональных диапазонов входящего сигнала, где первый параметрический генератор использует, например, алгоритм IGF для остальных диапазонов входящего сигнала для дополнительного сокращения ширины полосы кодированного аудиосигнала.
Кодер 6 области линейного предсказания кроме того может содержать декодер 50 области линейного предсказания для декодирования сигнала 14 понижающего микширования, представленного, например, сигналом 52 понижающего микширования с понижающей дискретизацией после ACELP обработки и/или первым параметрическим представлением первого набора полос 46 и/или первым набором квантованных кодированных спектральных линий 48 для второго набора полос. Выход декодера 50 области линейного предсказания может представлять собой кодированный и декодированный сигнал 54 понижающего микширования. Этот сигнал 54 может быть введен в многоканальный остаточный кодер 56, который может вычислить и выполнить кодирование многоканального остаточного сигнала 58, используя кодированный и декодированный сигнал 54 понижающего микширования, где кодированный многоканальный остаточный сигнал представляет ошибку между декодированным многоканальным представлением, в котором используют первую многоканальную информацию, и многоканальным сигналом перед понижающим микшированием. Таким образом, многоканальный остаточный кодер 56 может содержать объединенный многоканальный декодер 60 на стороне кодера и разностный процессор 62. Объединенный многоканальный декодер 60 на стороне кодера может создавать декодированный многоканальный сигнал, используя первую многоканальную информацию 20, и кодированный и декодированный сигнал 54 понижающего микширования, где разностный процессор может сформировать разность между декодированным многоканальным сигналом 64 и многоканальным сигналом 4 до понижающего микширования, чтобы получить многоканальный остаточный сигнал 58. Другими словами, объединенный многоканальный декодер на стороне кодера в аудиокодере может выполнять операцию декодирования, что является преимуществом по сравнению с выполнением той же операции декодирования на стороне декодера. Таким образом, первая объединенная многоканальная информация, которую может получить аудиодекодер после передачи, используется в объединенном многоканальном декодере на стороне кодера для декодирования кодированного сигнала понижающего микширования. Разностный процессор 62 может вычислить разность между декодированным объединенным многоканальным сигналом и исходным многоканальным сигналом 4. Кодированный многоканальный остаточный сигнал 58 может повысить качество декодирования, выполняемого аудиодекодером, поскольку разность между декодированным сигналом и исходным сигналом, например, из-за параметрического кодирования, можно уменьшить, если знать, какова разность между этими двумя сигналами. Это позволяет первому объединенному многоканальному кодеру действовать так, чтобы можно было получить многоканальную информацию для всей полосы частот многоканального аудиосигнала.
Более того, сигнал 14 понижающего микширования может содержать нижний диапазон и верхний диапазон, где кодер 6 области линейного предсказания выполнен с возможностью применения обработки, связанной с расширением полосы частот, с использованием, например, процессора 36 расширения ширины полосы во временной области для параметрического кодирования верхнего диапазона, где декодер 6 области линейного предсказания выполнен с возможностью получения в качестве кодированного и декодированного сигнала 54 понижающего микширования только сигнала нижнего диапазона, представляющего нижний диапазон сигнала 14 понижающего микширования, и где кодированный многоканальный остаточный сигнал имеет только частоты в нижнем диапазоне многоканального сигнала перед понижающим микшированием. Другими словами, процессор расширения ширины полосы во временной области может вычислить параметры расширения ширины полосы для частотных диапазонов выше частоты среза, где ACELP процессор выполняет кодирование частот ниже частоты среза. Таким образом, декодер выполнен с возможностью восстановления более высоких частот на основе кодированного сигнала нижнего диапазона и параметров 38 полосы частот.
Согласно дополнительным вариантам осуществления многоканальный остаточный кодер 56 может вычислить боковой сигнал, причем сигнал понижающего микширования представляет собой соответствующий центральный сигнал M/S многоканального аудиосигнала. Таким образом, многоканальный остаточный кодер может вычислить и выполнить кодирование разности вычисленного бокового сигнала, который можно вычислить из полнодиапазонного спектрального представления многоканального аудиосигнала, полученного набором 82 фильтров, и предсказанного бокового сигнала, кратного кодированному и декодированному сигналу 54 понижающего микширования, где указанное кратное, которое может быть представлено предсказанной информацией, оказывается частью многоканальной информации. Однако, сигнал понижающего микширования содержит только сигнал нижнего диапазона. Таким образом, остаточный кодер может дополнительно вычислить остаточный (или боковой) сигнал для верхнего диапазона. Это можно выполнить, например, путем имитации расширения ширины полосы во временной области, как это делается в базовом кодере области линейного предсказания, или путем предсказания бокового сигнала в виде разности между вычисленным (полнодиапазонным) боковым сигналом и вычисленным полнодиапазонным центральным сигналом, где коэффициент предсказания выполнен с возможностью минимизации разности между обоими сигналами.
На фиг. 3 представлена блок-схема кодера 8 частотной области согласно варианту осуществления. Кодер частотной области содержит второй времячастотный преобразователь 66, второй параметрический генератор 68 и второй квантователь-кодер 70. Второй времячастотный преобразователь 66 может преобразовать первый канал 4а многоканального сигнала и второй канал 4b многоканального сигнала в спектральное представление 72а, 72b. Спектральное представление первого канала и второго канала 72а, 72b можно проанализировать и разделить каждое на первый набор диапазонов 74 и второй набор диапазонов 76. Таким образом, второй параметрический генератор 68 может создать второе параметрическое представление 78 второго набора диапазонов 76, где второй квантователь-кодер может создать квантованное и кодированное представление 80 первого набора диапазонов 74. Кодер частотной области, а точнее, второй времячастотный преобразователь 66 может выполнить, например, операцию MDCT для первого канала 4а и второго канала 4b, где второй параметрический генератор 68 может выполнить алгоритм интеллектуального заполнения пропусков, а второй квантователь-кодер 70 может выполнить, например, AAC операцию. Таким образом, как обсуждалось выше со ссылками на кодеры области линейного предсказания, кодер частотной области также способен действовать так, чтобы получить многоканальную информацию для всей полосы частот многоканального аудиосигнала.
На фиг. 4 представлена блок-схема аудиокодера 2 согласно предпочтительному варианту осуществления. LPD тракт 16 выполняет объединенное стерео или многоканальное кодирование, включающее в себя вычисление 12 активного или пассивного DMX понижающего микширования, указывающее, что LPD понижающее микширование может быть активным («частотно избирательным») или пассивным («с постоянными коэффициентами микширования»), как показано на фигурах 5. Понижающее микширование дополнительно кодируется переключаемым ACELP/TCX ядром (моно), поддерживаемым TD-BWE или IGF модулями. Заметим, что ACELP работает с входными аудиоданными 34 после понижающего микширования. Любая инициализация ACELP из-за переключения может быть выполнена на TCX/IG выходе после понижающего микширования.
Поскольку ACELP не содержит какой-либо внутренней времячастотной декомпозиции, для LPD стереокодирования добавляется дополнительный банк фильтров с комплексной модуляцией посредством банка 82 фильтров анализа перед LP кодированием и банка фильтров синтеза после LPD декодирования. В предпочтительном варианте осуществления используется избыточно дискретизированное DFT в области, перекрывающей нижний диапазон. Однако в других вариантах осуществления может использоваться любая избыточно дискретизированная времячастотная декомпозиция с аналогичным временным разрешением. Затем можно вычислить параметры стерео в частотной области.
Параметрическое стереокодирование выполняют посредством блока 18 «LPD параметрического стереокодирования», который выводит LPD стереопараметры 20 в битовый поток. В качестве опции, следующий блок «LPD остаточного кодирования стерео» добавляет в битовый поток остаток 58 низкочастотного понижающего микширования, после векторного квантования.
FD тракт 8 выполнен с возможностью того, чтобы обеспечить собственное внутреннее объединенное стереокодирование или многоканальное кодирование. Для объединенного стереокодирования многократно используется собственный банк 66 действительнозначных фильтров с критической дискретизацией, реализующих, например, преобразование MDCT.
Сигналы, подаваемые на декодер, например, могут быть, мультиплексированы в единый битовый поток. Этот битовый поток может содержать кодированный сигнал 26 понижающего микширования, который может дополнительно содержать по меньшей мере один из диапазонов 38 после расширения ширины полосы во временной области (после параметрического кодирования), сигнал 52 понижающего микширования после понижающей дискретизации и ACELP обработки, первую многоканальную информацию 20, кодированный многоканальный остаточный сигнал 58, первое параметрическое представление первого набора диапазонов 46, первый набор квантованных кодированных спектральных линий для второго набора диапазонов 48 и вторую многоканальную информацию 24, содержащую квантованное и кодированное представление первого набора диапазонов 80 и второе параметрическое представление первого набора диапазонов 78.
В вариантах осуществления показан усовершенствованный способ для объединения переключаемого базового кодека, объединенного многоканального кодирования и параметрического пространственного аудиокодирования в полностью переключаемый перцептуальный кодек, который позволяет использовать разные способы многоканального кодирования в зависимости от выбора базового кодера. В частности, в переключаемом аудиокодере «родное» стереокодирование в частотной области объединяют с ACELP/TCX на основе кодирования с линейным предсказанием, имеющим свое собственное специализированное независимое параметрическое стереокодирование.
На фигурах 5а и 5и соответственно представлены активный и пассивный понижающие микшеры согласно вариантам осуществления. Активный понижающий микшер работает в частотной области, используя, например, времячастотный преобразователь 82 для преобразования сигнала 4 временной области в сигнал частотной области. После понижающего микширования частотно-временное преобразование, например, IDFT, может обеспечить преобразование сигнала понижающего микширования из частотной области в сигнал 14 понижающего микширования временной области.
На фиг. 5b показан пассивный понижающий микшер 12 согласно варианту осуществления. Пассивный понижающий микшер 12 содержит сумматор, где первый канал 4а и первый канал 4b объединяют после взвешивания с использованием веса 84а и веса 84b соответственно. Более того, первый канал 4а и второй канал 4b можно ввести в времячастотный преобразователь 82 перед передачей на LPD параметрическое кодирование стерео.
Другими словами, понижающий микшер выполнен с возможностью преобразования многоканального сигнала в спектральное представление, причем это понижающее микширование выполняют с использованием спектрального представления или использованием времячастотного представления, при этом первый многоканальный кодер выполнен с возможностью использования спектрального представления для создания отдельно первой многоканальной информации для отдельных диапазонов указанного спектрального представления.
На фиг. 6 представлена блок-схема аудиодекодера 102 для декодирования кодированного аудиосигнала 103 согласно варианту осуществления. Аудиодекодер 102 содержит декодер 104 области линейного предсказания, декодер 106 частотной области, первый объединенный многоканальный декодер 108, второй многоканальный декодер 110 и первый объединитель 112. Кодированный аудиосигнал 103, который может представлять собой мультиплексированный битовый поток из ранее описанных кодированных частей, таких как, например, кадры аудиосигнала, может быть декодирован объединенным многоканальным декодером 108 с использованием первой многоканальной информации 20 или декодером 106 частотной области, и декодирован вторым объединенным многоканальным декодером 110 с использованием второй многоканальной информации 24. Первый объединенный многоканальный декодер может выдать первое многоканальное представление 114, а выход второго объединенного многоканального декодера 110 может представлять собой второе многоканальное представление 116.
Другими словами, первый объединенный многоканальный декодер 108 создает первое многоканальное представление 114, используя выход кодера области линейного предсказания и используя первую многоканальную информацию 20. Второй многоканальный декодер 110 создает второе многоканальное представление 116, используя выход декодера частотной области и вторую многоканальную информацию 24. Далее первый объединитель объединяет первое многоканальное представление 114 и второе многоканальное представление 116, например, для получения декодированного аудиосигнала 118. Кроме того, первый объединенный многоканальный декодер 108 может представлять собой параметрический объединенный многоканальный декодер, например, использующий комплексное предсказание, режим параметрического стерео или режим чередования. Второй объединенный многоканальный декодер 110 может представлять собой объединенный многоканальный декодер, сохраняющий форму сигнала, используя, например, избирательный (на основе диапазона) переход на алгоритм декодирования по схеме центральный/боковой или левый/правый.
На фиг. 7 схематически представлен декодер 102 согласно дополнительному варианту осуществления. Здесь декодер 102 области линейного предсказания содержит ACELP декодер 120, синтезатор 122 нижнего диапазона, блок 124 повышающей дискретизации, процессор 126 расширения ширины полосы во временной области, или второй объединитель 126 для объединения сигнала повышающей дискретизации и сигнала расширенной полосы частот. Кроме того, декодер области линейного предсказания может содержать TCX декодер 132 и процессор 132 интеллектуального заполнения пропусков, которые на фиг. 7 изображены как один блок. Кроме того, декодер 2 области линейного предсказания может содержать процессор 134 полнодиапазонного синтеза для объединения выхода второго объединителя 128 и TCX декодера 130 и IGF процессора 132. Как уже было показано в отношении кодера, процессор 126 расширения ширины полосы во временной области, ACELP декодер 120 и TCX декодер 130 работают параллельно для декодирования соответствующей переданной аудиоинформации.
Может быть обеспечен перекрестный кросс-тракт 136 для инициализации синтезатора нижнего диапазона с использованием информации, полученной из спектрально-временного преобразования нижнего диапазона с использованием, например, частотно-временного преобразователя 138 из TCX декодера 130 и IGF процессора 132. Обратимся к модели вокального тракта, где ACELP данные могут моделировать форму вокального тракта, и где TCX данные могут моделировать возбуждение вокального тракта. Может быть обеспечен кросс-тракт 136, представленный частотно-временным преобразователем нижнего диапазона, например, IMDCT декодером дает возможность синтезатору 122 нижнего диапазона использовать форму вокального тракта и подать возбуждение для пересчета или декодирования кодированного сигнала нижнего диапазона. Кроме того, блок 124 повышающей дискретизации выполняет повышающую дискретизацию синтезированного нижнего диапазона, который объединяется с использованием, например, второго объединителя 128 с верхними диапазонами 140 после расширения ширины полосы во временной области, например, для переформирования частот после повышающей дискретизации, например, для восстановления энергии для каждого диапазона повышающей дискретизации.
Полнодиапазонный синтезатор 134 может использовать полно-диапазонный сигнал второго объединителя 128 и расширения от TCX процессора 130 для формирования декодированного сигнала 142 понижающего микширования. Первый объединенный многоканальный декодер 108 может содержать времячастотный преобразователь 144 для преобразования выхода декодера области линейного предсказания, например, декодированного сигнала 142 понижающего микширования в спектральное представление 145. Кроме того, повышающий микшер, реализованный, например, в стереодекодере 146 может управляться первой многоканальной информацией 20 для повышающего микширования спектрального представления в многоканальный сигнал. Более того, частотно-временной преобразователь 148 может преобразовать результат повышающего микширования во временное представление 114. Времячастотный и/или частотно-временной преобразователь может реализовать комплексный режим или режим избыточной дискретизации, например, DFT или IDFT.
Более того, первый объединенный многоканальный декодер, или, в частности, стереодекодер 146 использует только многоканальный остаточный сигнал 58, обеспечиваемый, например, многоканальным кодированным аудиосигналом 103 для создания первого многоканального представления. Кроме того, многоканальный остаточный сигнал может содержать полосу частот ниже первого многоканального представления, где первый объединенный многоканальный декодер выполнен с возможностью восстановления промежуточного первого многоканального представления с использованием первой многоканальной информации, и для добавления многоканального остаточного сигнала к промежуточному первому многоканальному представлению. Другими словами, стереодекодер 146 может содержать многоканальное декодирование с использованием первой многоканальной информации 20 и, но не обязательно, улучшение восстановленного многоканального сигнала путем добавления многоканального остаточного сигнала к восстановленному многоканальному сигналу после того, как было выполнено повышающее микширование спектрального представления декодированного сигнала понижающего микширования в многоканальный сигнал. Таким образом, первая многоканальная информация и остаточный сигнал уже будут готовы работать с многоканальным сигналом.
Второй объединенный многоканальный декодер 110 может использовать в качестве входа спектральное представление, полученное декодером частотной области. Это спектральное представление содержит по меньшей мере для множества диапазонов первый канальный сигнал 150а и второй канальный сигнал 150b. Кроме того, второй объединенный многоканальный процессор 110 можно применить для множества диапазонов первого канального сигнала 150а и второго канального сигнала 150b. Объединенный многоканальный режим, например, маскирование, указывающее для отдельных диапазонов объединенное кодирование «левый/правый» или «центральный/боковой», и где объединенный многоканальный режим представляет собой режим преобразования «центральный/боковой» или «левый/правый» для преобразования диапазонов, указанных упомянутой маской, из представления «центральный/боковой» в представление «левый/правый», которое представляет собой преобразование результата объединенного многоканального режима во временное представление, для получения второго многоканального представления. Кроме того, декодер частотной области может содержать частотно-временной преобразователь 152, например, реализовать режим IMDCT или режим особой дискретизации. Другими словами, маска может содержать флаги, указывающие, например, на L/R или M/S стереокодирование, где второй объединенный многоканальный кодер применяет соответствующий алгоритм стереокодирования к соответствующим аудиокадрам. В качестве опции возможно применение интеллектуального заполнения пропусков к кодированным аудиосигналам для дополнительного уменьшения ширины полосы частот кодированного аудиосигнала. Таким образом, например, тональные частотные диапазоны можно кодировать с высоким разрешением, используя вышеупомянутые алгоритмы стереокодирования, где другие частотные диапазоны могут подвергаться параметрическому кодированию с использованием, например, IGF алгоритма.
Другими словами, в LPD тракте 104 переданный моносигнал восстанавливается переключаемым ACELP/TCX 120/130 декодером, поддерживаемым, например, TD-BWE 126 или IGF модулями 132. Любая ACELP инициализация из-за переключения выполняется на выходе TCX/GF после понижающей дискретизации. Выход ACELP подвергается повышающей дискретизации с использованием, например, блока 124 повышающей дискретизации до полной частоты дискретизации. Все сигналы микшируют, например, с использованием микшера 128 во временной области при высокой частоте дискретизации и дополнительно обрабатываются LPD стереодекодером 146 для обеспечения LPD стерео.
LPD «Стереодекодирование» состоит из повышающего микширования переданного понижающего микширования, управляемого использованием переданных стереопараметров 20. В качестве опции в этом случае в битовом потоке также содержится остаток 58 понижающего микширования, который декодируют и используют при вычислении повышающего микширования, выполняемом блоком 146 «стереодекодирования».
FD тракт 106 сконфигурирован таким образом, что он имеет возможность создания собственного независимого внутреннего объединенного стерео или многоканального декодирования. Для объединенного стереодекодирования многократно используется собственный банк 152 действительно численных фильтров, например, использующих IMDCT.
LPD стереовыход и FD стереовыход микшируют во временной области, используя, например, первый объединитель 112 для обеспечения окончательного выходного сигнала 118 полностью переключаемого кодера.
Хотя многоканальная конфигурация описана применительно к стереодекодированию на соответствующих фигурах, тот же принцип можно также применить в общем случае для многоканальной обработки в случае двух или более каналов.
На фиг. 8 представлена блок-схема способа 800 для кодирования многоканального сигнала. Способ 800 содержит: этап 805 выполнения кодирования в области линейного предсказания; этап 810 выполнения кодирования в частотной области; этап 815 переключения между кодированием в области линейного предсказания и кодированием в частотной области, где кодирование в области линейного предсказания содержит понижающее микширование многоканального сигнала для получения сигнала понижающего микширования, базовое кодирование в области линейного предсказания сигнала понижающего микширования и первое объединенное многоканальное кодирование, создающее первую многоканальную информацию из многоканального сигнала, где кодирование в частотной области содержит второе объединенное многоканальное кодирование, создающее вторую многоканальную информацию из многоканального сигнала, где второе объединенное многоканальное кодирование отличается от первого многоканального кодирования, и где переключение выполняют так, что часть многоканального сигнала представляют либо кодированным кадром кодирования в области линейного предсказания, либо кодированным кадром кодирования в частотной области.
На фиг. 9 представлена блок-схема способа 900 декодирования кодированного аудиосигнала. Способ 900 содержит этап 905 декодирования в области линейного предсказания, этап 910 декодирования в частотной области, этап 915 первого объединенного многоканального декодирования, создающий первое многоканальное представление с использованием выхода декодирования в области линейного предсказания и использованием первой многоканальной информации, этап 920 второго многоканального декодирования, создающий второе многоканальное представление с использованием выхода декодирования в частотной области и второй многоканальной информации, и этап 925 объединения первого многоканального представления и второго многоканального представления для получения декодированного аудиосигнала, где второе декодирование первой многоканальной информации отличается от первого многоканального декодирования.
На фиг. 10 представлена блок-схема аудиокодера для кодирования многоканального сигнала согласно дополнительному аспекту. Аудиокодер 2 содержит кодер 6 области линейного предсказания и многоканальный остаточный кодер 56. Кодер области линейного предсказания содержит понижающий микшер 12 для понижающего микширования многоканального сигнала 4 с целью получения сигнала 14 понижающего микширования, базовый кодер 16 области линейного предсказания для кодирования сигнала 14 понижающего микширования. Кодер 6 области линейного предсказания кроме того содержит объединенный многоканальный кодер 18 для создания многоканальной информации 20 из многоканального сигнала 4. Более того, кодер области линейного предсказания содержит декодер 50 области линейного предсказания для декодирования кодированного сигнала 26 понижающего микширования для получения кодированного и декодированного сигнала 54 понижающего микширования. Многоканальный остаточный кодер 56 может вычислить и кодировать многоканальный остаточный сигнал, используя кодированный и декодированный сигнал 54 понижающего микширования. Многоканальный остаточный сигнал может представлять ошибку между декодированным многоканальным представлением 54 с использованием многоканальной информации 20 и многоканального сигнала 4 до понижающего микширования.
Согласно варианту осуществления сигнал 14 понижающего микширования содержит нижний диапазон и верхний диапазон, причем кодер области линейного предсказания может использовать процессор расширения ширины полосы для применения обработки, касающейся расширения ширины полосы для параметрического кодирования верхнего диапазона, при этом декодер области линейного предсказания выполнен с возможностью получения в качестве кодированного и декодированного сигнала 54 понижающего микширования только сигнала нижнего диапазона, представляющего нижний диапазон сигнала понижающего микширования, и где кодированный многоканальный остаточный сигнал имеет только диапазон, соответствующий нижнему диапазону многоканального сигнала перед понижающим микшированием. Более того, аналогичное описание, относящееся к аудиокодеру 2, можно применить к аудиокодеру 2'. Однако дополнительное частотное кодирование, выполняемое кодером 2, опускают. Это упрощает конфигурацию кодера и, следовательно, является преимуществом, если указанный кодер используют просто для аудиосигналов, содержащий сигналы, которые можно параметрически кодировать во временной области без заметной потери качества, или, когда качество декодированного аудиосигнала находится еще в пределах нормы. Однако, специальное остаточное стереокодирование имеет преимущество, состоящее в повышении качества воспроизведения декодированного аудиосигнала. Если более конкретно, то разность между аудиосигналом перед кодированием и кодированным и декодированным аудиосигналом получают и передают в декодер для повышения качества воспроизведения декодированного аудиосигнала, после чего разность между декодированным аудиосигналом и кодированным аудиосигналом становится известной декодеру.
На фиг. 11 показан аудиодекодер 102 для декодирования кодированного аудиосигнала 103 согласно дополнительному аспекту. Аудиодекодер 102 содержит декодер 104 области линейного предсказания и объединенный многоканальный декодер 108 для создания многоканального представления 114 с использованием выхода декодера 104 области линейного предсказания и объединенной многоканальной информации 20. Кроме того, кодированный аудиосигнал 103 может содержать многоканальный остаточный сигнал 58, который может использовать многоканальный декодер для создания многоканального представления 114. Более того, аналогичные объяснения, относящиеся к аудиодекодеру 102, можно применить к аудиодекодеру 102'. Здесь остаточный сигнал из исходного аудиосигнала для декодированного аудиосигнала используют для декодированного аудиосигнала применяют для достижения, как можно более близкого, качества декодированного аудиосигнала по сравнению с исходным аудиосигналом, даже при использовании параметрического кодирования (а, значит, кодирования с потерями). Однако, частотное декодирование части, показанной применительно к аудиодекодеру 102, в аудиодекодере 102 опущено.
На фиг. 12 представлена блок-схема способа аудиокодирования 1200 для кодирования многоканального сигнала. Способ 1200 содержит этап 1205 кодирования в области линейного предсказания, содержащего понижающее микширование многоканального сигнала для получения многоканального сигнала понижающего микширования, и многоканальной информации, созданной базовым кодером области линейного предсказания из многоканального сигнала, где способ кроме того содержит декодирование сигнала понижающего микширования области линейного предсказания для получения кодированного и декодированного сигнала понижающего микширования, и этап 1210 многоканального остаточного кодирования, на котором вычисляют кодированный многоканальный остаточный сигнал с использованием указанного кодированного и декодированного сигнала понижающего микширования, где многоканальный остаточный сигнал представляет ошибку между декодированным многоканальным представлением с использованием первой многоканальной информации и многоканальным сигналом до понижающего микширования.
На фиг. 13 представлена блок-схема способа 1300 декодирования кодированного аудиосигнала. Способ 1300 содержит этап 1305 декодирования в области линейного предсказания и этап 1310 объединенного многоканального декодирования, создающий многоканальное представление с использованием выхода декодирования в области линейного предсказания и объединенной многоканальной информации, где кодированный многоканальный аудиосигнал содержит канальный остаточный сигнал, и где при объединенном многоканальном декодировании используют многоканальный остаточный сигнал для создания многоканального представления.
Описанные варианты осуществления могут использоваться при распространении вещания всех типов стерео или многоканального аудиоконтента (как речи, так и музыки с постоянным перцептуальным качеством при заданном низком битрейте), например, при использовании цифрового радиовещания, потокового Интернета и приложений аудиосвязи.
На фигурах 14-17 описаны варианты осуществления того, каким образом следует применять предложенное бесперебойное переключение с LPD кодирования на кодирование в частотной области и обратно. В общем случае прошедшее создание окон или обработка показаны с использованием тонких линий; жирные линии показывают текущее создание окон и текущую обработку, где применяется переключение, а пунктирные линии показывают текущую обработку, которая выполняется исключительно для перехода или переключения. Переключение или переход от LPD кодирования к частотному кодированию??
На фиг. 14 представлена временная диаграмма, демонстрирующая вариант осуществления бесперебойного переключения между кодированием частотной области и кодированием во временной области. Это может соответствовать действительности, если, например, контроллер 10 указывает, что текущий кадр лучше кодировать с использованием LPD кодирования вместо FD кодирования, использованного для предыдущего кадра. Во время кодирования в частотной области для каждого стереосигнала (который может, но не обязательно, распространяться более, чем по двум каналам) может быть использовано стоповое окно 200a и 200b. Стоповое окно отличается от стандартного MDCT перекрытия с суммированием, затухающего в начале 202 первого кадра 204. Левая часть стопового окна может представлять собой классическое перекрытие с суммированием для кодирования предыдущего кадра с использованием, например, MDCT времячастотного преобразования. Таким образом, кадр перед переключением все еще правильно кодирован. Для текущего кадра 204, где применяется переключение, вычисляют дополнительные стереопараметры, притом, что первое параметрическое представление центрального сигнала для кодирования во временной области вычисляют для следующего кадра 206. Эти два дополнительных анализа стерео выполняют для того, чтобы иметь возможность создания центрального сигнала 208 для предварительного просмотра LPD. Хотя стерео параметры передаются (дополнительно) для двух первых LPD стерео окон. В нормальном случае стереопараметры посылают с задержкой на два LPD стереокадра. Для обновления блоков памяти ACELP, например, таких как блоки памяти для LPC анализа или прямого подавления помех дискретизации (FAC), также предоставляют прошлые данные о центральном сигнале. Поэтому, LPD стерео окна 210a-d для первого стереосигнала и 212a-d для второго стереосигнала можно применить при анализе банка 82 фильтров, например, перед применением времячастотного преобразования с использованием DFT. Центральный сигнал может содержать типовой участок линейного затухания при использовании TCX кодирования, обеспечивая в результате окно 214 LPD анализа. Если для кодирования аудиосигнала, такого как моносигнал нижнего диапазона, используют ACELP, не составит труда выбрать количество частотных диапазонов, на которых применяется LPC анализ, как показано в прямоугольном окне 216 LPD анализа.
Более того, момент времени, показанный вертикальной линией 218, указывает, что текущий кадр, в котором применяется переход, содержит информацию из окон 200a, 200b и вычисленного центрального сигнала 208 и соответствующую стереоинформацию. В течение горизонтальной части окна частотного анализа между линиями 202 и 218 выполняется точное кодирование кадра 204 с использованием кодирования в частотной области. От линии 218 до конца окна частотного анализа на линии 220 кадр 204 содержит информацию об кодировании частотной области и LPD кодировании, а от линии 220 до конца кадра 204 на вертикальной линии 222 в кодировании кадра используют только LPD кодирование. Дополнительное внимание уделено средней части кодирования, поскольку первую и последнюю (третью) часть просто получают из одного способа кодирования без помех дискретизации. Однако, для средней части необходимо различать ACELP и TCX кодирование моносигнала. Поскольку при TCX кодировании используют плавное затухание, как это уже было при кодировании в частотной области, простое плавное уменьшение кодированного сигнала частотной области и плавное увеличение TCX кодированного центрального сигнала обеспечивает полную информацию для кодирования текущего кадра 204. При использовании ACELP для кодирования моносигнала возможно применение более сложной обработки, поскольку зона 224 может не содержать полную информацию для кодирования аудиосигнала. Предложенный способ представляет собой прямую коррекцию помех дискретизации (FAC), описанную, например, в спецификациях USAC в разделе 7.16.
Согласно варианту осуществления, контроллер 10 выполнен с возможностью переключения в текущем кадре 204 многоканального аудиосигнала с использования кодера 8 частотной области для кодирования предыдущего кадра, на кодер области линейного предсказания для декодирования последующего кадра. Первый объединенный многоканальный кодер 18 может вычислить синтезированные многоканальные параметры 210а, 210b, 212a, 22b из многоканального аудиосигнала для текущего кадра, где второй объединенный многоканальный кодер 22 выполнен с возможностью взвешивания второго многоканального сигнала с использованием стопового окна.
На фиг. 15 представлена временная диаграмма декодера, соответствующая операциям кодера по фиг. 14. Здесь восстановление текущего кадра 204 описано согласно варианту осуществления. Как уже было видно из временной диаграммы кодера по фиг. 14, стереоканалы частотной области обеспечиваются из предыдущего кадра с применением стоповых окон 200a и 200b. Переходы с режима FD на LPD сначала выполняются на декодированном центральном сигнале, как и в случае с моносигналом. Это достигается путем искусственного создания центрального сигнала 226 из сигнала 116 временной области, декодированного в FD режиме, где ccfl - длина кадра базового кода, а L_fac обозначает длину окна, кадра, или блока преобразования для подавления помех дискретизации
Затем этот сигнал пересылают в LPD декодер 120 для обновления блоков памяти и применения FAC декодирования, как это делается в случае моносигнала, для переходов из FD режима в ACELP. Указанная обработка описана в спецификациях USAC [ISO/IEC DIS 23003-3, Usac] в разделе 7.16. В случае FD режима для TCX выполняется стандартное перекрытие с суммированием. LPD стереодекодер 146 получает в качестве входного сигнала декодированный (в частотной области после времячастотного преобразования, выполненного времячастотным преобразователем 144) центральный сигнал, например, путем использования переданных стереопараметров 210 и 212 для обработки стерео, где переход уже выполнен. Затем стереодекодер выдает сигналы 228, 230 левого и правого канала, которые перекрывают предыдущий кадр, декодированный в FD режиме. Затем эти сигналы, а именно, FD декодированный сигнал временной области и LPD декодированный сигнал временной области для данного кадра, где используется переход, плавно ослабляют (в объединителе 112) по каждому каналу для сглаживания перехода в левом и правом каналах.
На фиг. 15 схематически показан переход с использованием M=ccfl/2. Более того, указанный объединитель может выполнить плавное ослабление на последовательных кадрах, декодируемых с использованием только FD или LPD декодирования без перехода с одного из этих режимов на другой.
Другими словами, процесс перекрытия с суммированием FD декодирования, особенно при использовании MDCT/IMDCT для времячастотного/частотно-временного преобразования, заменяется плавным ослаблением FD декодированного аудиосигнала и LPD декодированного аудиосигнала. Таким образом декодер должен вычислить LPD сигнал для плавно уменьшающейся части FD декодированного аудиосигнала с целью плавного увеличения LPD декодированного аудиосигнала. Согласно варианту осуществления аудиодекодер 102 выполнен с возможностью переключения в текущем кадре 204 многоканального аудиосигнала с использования декодера 106 частотной области для декодирования предыдущего кадра на использование декодера 104 области линейного предсказания для декодирования последующего кадра. Объединитель 112 может вычислить синтезированный центральный сигнал 226 из второго многоканального представления 116 текущего кадра. Первый объединенный многоканальный декодер 108 может создать первое многоканальное представление 114, используя синтезированный центральный сигнал 226 и первую многоканальную информацию 20. Кроме того, объединитель 112 выполнен с возможностью объединения первого многоканального представления и второго многоканального представления для получения декодированного текущего кадра многоканального аудиосигнала.
На фиг. 16 показана временная диаграмма в кодере для выполнения перехода с использования LPD кодирования на использование FD декодирования в текущем кадре 232. Для переключения с LPD на FD кодирование можно применить стартовое окно 300a, 300b при FD многоканальном кодировании. Это стартовое окно имеет аналогичные функциональные возможности по сравнению со стоповым окном 200a, 200b. Во время плавного уменьшения TCX кодированного моносигнала LPD кодера между вертикальными линиями 234 и 236 стартовое окно 300a, 300b выполняет увеличение сигнала. При использовании ACELP вместо TCX плавное уменьшение уровня моносигнала не выполняется. Тем не менее, в декодере возможно восстановление правильного аудиосигнала с использованием, например, FAC. Окна 238 и 240 LPD стерео вычисляют по общему правилу с обращением к ACELP или TCX кодированному моносигналу, указанному в окнах 241 LPD анализа.
На фиг. 17 показана временная диаграмма в декодере, соответствующая временной диаграмме кодера, описанной со ссылками на фиг. 16.
Для перехода из LPD режима в FD режим стереодекодер 146 декодирует дополнительный кадр. Центральный сигнал, поступающий из декодера в LPD режиме, увеличивают от нуля для кадрового индекса i=ccfl/M
Вышеописанное стереодекодирование можно выполнить путем сохранения последних параметров стерео и отключения обратного квантования бокового сигнала, то есть, cod_mode устанавливают в 0. Более того, правостороннее создание окон после обратного преобразования DFT не применяется, что приводит к резкому спаду 242a, 242b дополнительного окна 244a, 244b LPD стерео. Здесь хорошо видно, что спад находится у плоского участка 246a, 246b, где из FD кодированного аудиосигнала можно получить всю информацию из соответствующей части кадра. Таким образом, правостороннее создание окон (без резкого спада) может привести к нежелательному воздействию LPD информации на FD информацию, и, поэтому оно не применяется.
Затем результирующие левый и правый (LPD декодированные) каналы 250a, 250b (использующие LPD декодированный центральный сигнал, показанный в LPD синтезированных окнах 248 и параметры стерео) объединяют в декодированные в FD режиме каналы следующего кадра путем использования обработки «перекрытие с суммированием» в случае перехода из TCX в FD режим, или путем использования FAC для каждого канала в случае перехода из режима ACELP в режим FD. Указанные переходы схематически проиллюстрированы на фиг. 17, где M=ccfl/2.
Согласно варианту осуществления аудиодекодер 102 может выполнять переключение в текущем кадре 232 многоканального аудиосигнала с использования декодера 104 области линейного предсказания для декодирования предыдущего кадра на использование декодера 106 частотой области для декодирования последующего кадра. Стереодекодер 146 может вычислить синтезированный многоканальный аудиосигнал из декодированного моносигнала из декодера области линейного предсказания для текущего кадра с использованием многоканальной информации предыдущего кадра, где второй объединенный многоканальный декодер может вычислить второе многоканальное представление для текущего кадра и выполнить взвешивание второго многоканального представления, используя стартовое окно. Объединитель 112 может объединить синтезированный многоканальный аудиосигнал и взвешенное второе многоканальное представление для получения декодированного текущего кадра многоканального аудиосигнала.
На фиг. 18 представлена блок-схема кодера 2ʺ для кодирования многоканального сигнала 4. Аудиокодер 2ʺ содержит понижающий микшер 12, базовый кодер 16 области линейного предсказания, банк 82 фильтров и объединенный многоканальный кодер 18. Понижающий микшер 12 выполнен с возможностью понижающего микширования многоканального сигнала 4 для получения сигнала 14 понижающего микширования. Сигнал понижающего микширования может быть моносигналом, таким как, например, центральный сигнал M/S многоканального аудиосигнала. Базовый кодер 16 области линейного предсказания может кодировать сигнал 14 понижающего микширования, где сигнал 14 понижающего микширования имеет нижний диапазон и верхний диапазон, где базовый кодер 16 области линейного предсказания выполнен с возможностью применения обработки, касающейся расширения ширины полосы для параметрического кодирования верхнего диапазона. Кроме того, банк 82 фильтров может создавать спектральное представление многоканального сигнала 4, а объединенный многоканальный кодер 18 может быть выполнен с возможностью обработки спектрального представления, содержащего нижний диапазон и верхний диапазон многоканального сигнала для создания многоканальной информации 20. Многоканальная информация 20 может содержать параметры ILD, IPD и/или IID (разница интенсивности звукового сигнала, поступающего в оба уха), позволяющие декодеру пересчитать многоканальный аудиосигнал исходя из моносигнала. Более подробное графическое представление дополнительных аспектов вариантов осуществления согласно этому аспекту можно найти на предыдущих фигурах, в первую очередь, на фиг. 4.
Согласно вариантам осуществления базовый кодер 16 области линейного предсказания может дополнительно содержать декодер области линейного предсказания для декодирования кодированного сигнала 26 понижающего микширования для получения кодированного и декодированного сигнала 54 понижающего микширования. Здесь базовый кодер области линейного предсказания может сформировать центральный сигнал M/S аудиосигнала, который кодируют для передачи на декодер. Кроме того, аудиокодер дополнительно содержит многоканальный остаточный кодер 56 для вычисления кодированного многоканального остаточного сигнала 58 с использованием кодированного и декодированного сигнала 54 понижающего микширования. Многоканальный остаточный сигнал представляет ошибку между декодированным многоканальным представлением с использованием многоканальной информации 20 и многоканального сигнала 4 перед понижающим микшированием. Другими словами, многоканальный остаточный сигнал 58 может быть боковым сигналом M/S аудиосигнала, соответствующим центральному сигналу, вычисленному с использованием базового кодера области линейного предсказания.
Согласно дополнительным вариантам осуществления базовый кодер 16 области линейного предсказания выполнен с возможностью использования обработки, касающейся расширения ширины полосы, для параметрического кодирования верхнего диапазона и для получения в качестве кодированного и декодированного сигнала понижающего микширования только сигнала нижнего диапазона, представляющего нижний диапазон сигнала понижающего микширования, и где кодированный многоканальный остаточный сигнал 58 имеет только диапазон, соответствующий нижнему диапазону многоканального сигнала перед понижающим микшированием. Вдобавок или в качестве альтернативы, многоканальный остаточный кодер может имитировать расширение ширины полосы во временной области, которое используют для верхнего диапазона многоканального сигнала в базовом кодере области линейного предсказания и для вычисления остаточного или бокового сигнала для верхнего диапазона, чтобы иметь возможность более точного декодирования моносигнала или центрального сигнала для получения декодированного многоканального аудиосигнала. Указанная имитация может содержать одинаковое или подобное вычисление, выполняемое в декодере для декодирования верхнего диапазона расширенной полосы частот. В качестве альтернативного или дополнительного подхода к имитации расширения ширины полосы может быть использовано предсказание бокового сигнала. Таким образом, многоканальный остаточный кодер может вычислить полнодиапазонный остаточный сигнал из параметрического представления 83 многоканального аудиосигнала 4 после времячастотного преобразования в банке 82 фильтров. Этот полнодиапазонный боковой сигнал можно сравнить с частотным представлением полнодиапазонного центрального сигнала, полученного аналогичным образом из параметрического представления 83. Полнодиапазонный центральный сигнал можно вычислить, например, как сумму левого и правого каналов параметрического представления 83, а полнодиапазонный боковой сигнал в виде их разности. Более того, таким образом при предсказании можно вычислить коэффициент предсказания для полнодиапазонного центрального сигнала, минимизирующий абсолютную разность полнодиапазонного бокового сигнала и произведение коэффициента предсказания и полнодиапазонного центрального сигнала.
Другими словами, кодер области линейного предсказания может быть выполнен с возможностью вычисления сигнала 14 понижающего микширования в качестве параметрического представления центрального сигнала M/S многоканального аудиосигнала, где многоканальный остаточный кодер может быть выполнен с возможностью вычисления бокового сигнала, соответствующего центральному сигналу M/S многоканального аудиосигнала, где остаточный кодер может вычислить верхний диапазон центрального сигнала, используя имитацию расширения ширины полосы во временной области, или где остаточный кодер может предсказать верхний диапазон центрального сигнала, используя поиск информации о предсказании, которая минимизирует разность между вычисленным боковым сигналом и вычисленным полнодиапазонным центральным сигналом из предыдущего кадра.
В дополнительных вариантах осуществления показан базовый кодер 16 области линейного предсказания, содержащий ACELP процессор 30. ACELP процессор может работать с сигналом 34 понижающего микширования с понижающей дискретизацией. Кроме того, процессор 38 расширения ширины полосы во временной области выполнен с возможностью параметрического кодирования диапазона части сигнала понижающего микширования, удаленной из входного сигнала ACELP при третьей понижающей дискретизации. Вдобавок или в качестве альтернативы базовый кодер 16 области линейного предсказания может содержать TCX процессор 32. TCX процессор 32 может работать с сигналом 14 понижающего микширования, не подвергавшимся понижающей дискретизации или подвергавшимся понижающей дискретизации в степени, меньшей, чем понижающая дискретизация для ACELP процессора. Кроме того, TCX процессор может содержать первый времячастотный преобразователь 40, первый параметрический генератор 42 для создания параметрического представления 46 первого набора диапазонов и первый квантователь-кодер 44 для создания набора квантованных кодированных спектральных линий 48 для второго набора диапазонов. ACELP процессор и TCX процессор могут работать по отдельности: например, первое количество кадров можно кодировать с использованием ACELP, а второе количество кадров кодировать, используя TCX, или в объединенном варианте, когда и ACELP, и TCX вносят свой вклад в информацию для декодирования одного кадра.
В дополнительных вариантах осуществления показан времячастотный преобразователь 40, отличающийся от банка 82 фильтров. Банк 82 фильтров может содержать параметры фильтров, оптимизированные для создания спектрального представления 83 многоканального сигнала 4, где времячастотный преобразователь 40 может содержать параметры фильтров, оптимизированные для создания параметрического представления 46 первого набора диапазонов. На дополнительном этапе, следует заметить, что кодер области линейного предсказания использует другой банк фильтров или даже вообще его не использует в случае расширения ширины полосы и/или использования ACELP. Кроме того, банк 82 фильтров может вычислить параметры фильтров отдельно для создания спектрального представления 83 независимо от предыдущего выбора параметров кодера и области линейного предсказания. Другими словами, при многоканальном кодировании в LPD режиме можно использовать банк фильтров для многоканальной обработки (DFT), которая отлична от обработки, используемой при расширении ширины полосы во временной области для ACELP и MDCT для TCX. Преимущество такого подхода состоит в том, что при каждом параметрическом кодировании можно использовать оптимальную времячастотную декомпозицию для получения ее параметров. Например, предпочтительным является объединение ACELP+TDBWE и параметрического многоканального кодирования с внешним банком фильтров (например, DFT). Такое объединение особенно эффективно поскольку известно, что наилучшее расширение полосы частот для речи следует реализовать во временной области, а многоканальную обработку в частотной области. Поскольку ACELP+TDBWE не содержит времячастотный преобразователь, предпочтительно или может быть даже необходимо использовать внешний банк фильтров или преобразование типа DFT. Согласно другим концепциям всегда используют один и тот же банк фильтров и, следовательно, не используют другие банки фильтров, такие как, например:
IGF и объединенное стереокодирование для AAC в MDCT
SBR+PS для HeAACv2 в QMF
SBR+MPS212 для USAC в QMF
Согласно дополнительным вариантам осуществления многоканальный кодер содержит первый генератор кадров, а базовый кодер области линейного предсказания содержит второй генератор кадров, где первый и второй генератор кадров выполнены с возможностью формирования кадра из многоканального сигнала 4, причем первый и второй генератор кадров выполнены с возможностью формирования кадра подобной длины. Другими словами, кадрирование, выполняемое многоканальным процессором, может совпадать с кадрированием, используемым в ACELP. Даже если многоканальная обработка выполняется в частотной области, временное разрешение для вычисления ее параметров или понижающего микширования должно быть, как можно более близким или даже полностью совпадать с кадрированием ACELP. Подобная длина в этом случае может относиться к кадрированию ACELP, которое может совпадать или быть близким к временному разрешению для вычисления параметров для многоканальной обработки или понижающего микширования.
Согласно дополнительному варианту осуществления аудиокодер кроме того содержит кодер 6 области линейного предсказания, содержащий базовый кодер 16 области линейного предсказания, и многоканальный кодер 18, кодер 8 частотной области и контроллер 10 для переключения между кодером 6 области линейного предсказания и кодером 8 частотной области. Кодер 8 частотной области может содержать второй объединенный многоканальный кодер 22 для кодирования второй многоканальной информации 24 из многоканального сигнал, где второй объединенный многоканальный кодер 22 отличается от первого объединенного многоканального кодера 18. Кроме того, контроллер 10 сконфигурирован так, что часть многоканального сигнала представляют либо кодированным кадром кодера области линейного предсказания, либо кодированным кадром кодера частотой области.
На фиг. 19 показана блок-схема декодера 102 для декодирования кодированного аудиосигнала 103, содержащего сигнал, кодированный базовым кодером, параметры расширения ширины полосы и многоканальную информацию согласно дополнительному аспекту. Аудиодекодер содержит базовый декодер 104 области линейного предсказания, банк 144 фильтров для анализа, многоканальный декодер 146 и процессор 148 банка фильтров для синтеза. Базовый декодер 104 области линейного предсказания может декодировать сигнал, кодированный базовым кодером, для создания моносигнала. Это может быть (полнодиапазонный) центральный сигнал M/S кодированного аудиосигнала. Банк 144 фильтров для анализа может преобразовать указанный моносигнал в спектральное представление 145, причем многоканальный декодер 146 может создать первый канальный спектр и второй канальный спектр из спектрального представления моносигнала и многоканальной информации 20. Таким образом, многоканальный декодер может использовать многоканальную информацию 20. Следовательно, многоканальный декодер может использовать многоканальную информацию, содержащую, например, боковой сигнал, соответствующий декодированному центральному сигналу. Процессор 148 банка фильтров для синтеза, выполненный с возможностью синтезирующей фильтрации с использованием фильтрации первого канального спектра для получения первого канального сигнала и для синтезирующей фильтрации второго канального спектра для получения второго канального сигнала. Таким образом, предпочтительно иметь возможность использования обратной операции по отношению к банку 144 фильтров для анализа применительно к первому и второму канальному сигналу, причем такой операцией может быть IDFT, если в банке фильтров для анализа используется DFT. Однако, процессор банка фильтров может обрабатывать, например, два канальных спектра одновременно или в последовательном порядке, используя, например, один и тот же банк фильтров. Дополнительные подробные графические иллюстрации, относящиеся к этому дополнительному аспекту, можно видеть на предыдущих чертежах, особенно на фиг. 7.
Согласно дополнительным вариантам осуществления базовый декодер области линейного предсказания содержит: процессор 126 расширения ширины полосы для создания части 140 верхнего диапазона из параметров расширения ширины полосы и моносигнала нижней полосы или сигнала, кодированного базовым кодером, для получения декодированного верхнего диапазона 140 аудиосигнала; процессор сигнала нижнего диапазона, выполненный с возможностью декодирования моносигнала нижнего диапазона; и объединитель 128, выполненный с возможностью вычисления полнодиапазонного моносигнала с использованием декодированного моносигнала нижнего диапазона и декодированного верхнего диапазона аудиосигнала. Моносигнал нижнего диапазона может быть, например, представлением в основной полосе частот центрального сигнала M/S многоканального аудиосигнала, где параметры расширения ширины полосы могут применяться для вычисления (в объединителе 128) полнодиапазонного моносигнала из моносигнала нижнего диапазона.
Согласно дополнительному варианту осуществления декодер области линейного предсказания содержит ACELP декодер 120, синтезатор 122 нижнего диапазона, блок 124 повышающей дискретизации, процессор 126 расширения ширины полосы во временной области или второй объединитель 128, где второй объединитель 128 выполнен с возможностью объединения сигнала нижнего диапазона после повышающей дискретизации и сигнала 140 верхнего диапазона с расширенной полосой частот для получения полнодиапазонного ACELP декодированного моносигнала. Декодер области линейного предсказания кроме того может содержать TCX декодер 130 и процессор 132 интеллектуального заполнения пропусков для получения полнодиапазонного TCX декодированного моносигнала. Таким образом, полнодиапазонный синтезирующий процессор 134 может объединить полнодиапазонный ACELP декодированный моносигнал и полнодиапазонный TCX декодированный моносигнал. Вдобавок, может быть обеспечен кросс-тракт 136 для инициализации синтезатора нижнего диапазона с использованием информации, полученной в результате полнодиапазонного преобразования «спектр-время» из TCX декодера и IGF процессора.
Согласно дополнительным вариантам осуществления аудиодекодер содержит декодер 106 частотной области, второй объединенный многоканальный декодер 110 для создания второго многоканального представления 116 с использованием выхода декодера 106 частотной области и второй многоканальной информации 22, 24, и первый объединитель 112 для объединения первого канального сигнала и второго канального сигнала со вторым многоканальным представлением 116 для получения декодированного аудиосигнала 118, где второй объединенный многоканальный декодер отличается от первого объединенного многоканально декодера. Таким образом, аудиодекодер может переключаться между параметрическим многоканальным декодированием с использованием LPD и декодированием частотой области. Этот подход уже был подробно описан со ссылками на предыдущие чертежи.
Согласно дополнительным вариантам осуществления банк 144 фильтров для анализа содержит DFT для преобразования моносигнала в спектральное представление 145, причем полнодиапазонный синтезирующий процессор 148 содержит IDFT для преобразования спектрального представления 145 в первый и второй канальный сигнал. Более того, банк фильтров для анализа может использовать окно в DFT-преобразованном спектральном представлении 145, так чтобы правая часть спектрального представления предыдущего кадра и левая часть спектрального представления текущего кадра перекрывались, где предыдущий кадр и текущий кадр следуют друг за другом. Другими словами, можно применить плавное ослабление для обеспечения плавного перехода между последовательными DFT блоками и/или уменьшить блочные артефакты.
Согласно дополнительным вариантам осуществления многоканальный декодер 146 выполнен с возможностью получения первого и второго канального сигнала из моносигнала, где моносигналом является центральный сигнал многоканального сигнала, и где многоканальный декодер 146 выполнен с возможностью получения M/S многоканального декодированного аудиосигнала, где многоканальный декодер выполнен с возможностью вычисления бокового сигнала из многоканальной информации. Кроме того, многоканальный декодер 146 можно сконфигурировать для вычисления L/R многоканального декодированного аудиосигнала из M/S многоканального декодированного аудиосигнала, где многоканальный декодер 146 может вычислить L/R многоканальный декодированный аудиосигнал для нижнего диапазона с использованием многоканальной информации и бокового сигнала. Вдобавок или в качестве альтернативы, многоканальный декодер 146 может вычислить предсказанный боковой сигнал из центрального сигнала, причем многоканальный декодер может кроме того быть выполнен с возможностью вычисления L/R многоканального декодированного аудиосигнала для верхнего диапазона с использованием предсказанного бокового сигнала и значения ILD для многоканальной информации.
Более того, многоканальный декодер 146 может быть дополнительно выполнен с возможностью реализации комплексного режима с L/R декодированным многоканальным аудиосигналом, где многоканальный декодер может вычислить амплитуду комплексного режима, используя энергию кодированного центрального сигнала и энергию декодированного L/R многоканального аудиосигнала для получения компенсации энергии. Кроме того, многоканальный декодер выполнен с возможностью вычисления фазы комплексного режима с использованием IPD значения многоканальной информации. После декодирования энергия, уровень или фаза декодированного многоканального сигнала могут отличаться от декодированного моносигнала. Поэтому, указанный комплексный режим может быть определен так, чтобы энергия, уровень или фаза многоканального сигнала была отрегулирована до значений декодированного моносигнала. Более того, фазу можно отрегулировать до значения фазы многоканального сигнала до кодирования, используя, например, вычисленные IPD параметры из многоканальной информации, вычисленной на стороне кодера. Кроме того, можно адаптировать восприятие человеком декодированного многоканального сигнала к восприятию человеком исходного многоканального сигнала до его кодирования.
На фиг. 20 представлена блок-схема способа 2000 для кодирования многоканального сигнала. Способ содержит этап 2050 понижающего микширования многоканального сигнала для получения сигнала понижающего микширования, этап 2100 кодирования сигнала понижающего микширования, где сигнал понижающего микширования имеет нижний диапазон и верхний диапазон, где базовый кодер области линейного предсказания выполнен с возможностью применения обработки расширения полосы для параметрического кодирования верхнего диапазона, этап 2150 создания спектрального представления многоканального сигнала и этап 2200 обработки спектрального представления, содержащего нижний диапазон и верхний диапазон многоканального сигнала, для создания многоканальной информации.
На фиг. 21 схематически представлена блок-схема способа 2100 декодирования кодированного аудиосигнала, содержащего сигнал, кодированный базовым кодером, параметры расширения полосы и многоканальную информацию. Способ содержит этап 2105 декодирования сигнала, кодированного базовым кодером, для создания моносигнала, этап 2110 преобразования моносигнала в спектральное представление, этап 2115 создания первого канального спектра и второго канального спектра из спектрального представления моносигнала и многоканальной информации, и этап 2120 синтеза, фильтрующего первый канальный спектр для получения первого канального сигнала и синтеза, фильтрующего второй канальный спектр для получения второго канального сигнала.
Далее описываются дополнительные варианты осуществления.
Изменения синтаксиса потока бит
Таблицу 23 USAC спецификаций [1] в разделе 5.3.2 Subsidiary payload следует модифицировать следующим образом:
Таблица 1 - Синтаксис UsaccorecoderData
| Синтаксис | Кол.бит | Мнемоника |
Следует добавить следующую таблицу
Таблица 1 - Синтаксис lpd_stereo_stream()
| Синтаксис | Кол. бит | Мнемоника |
В раздел 6.2. USAC payload следует добавить следующее описание полезной нагрузки
6.2.x lpd_stereo_stream()
Подробная процедура декодирования описана в разделе 7.x. LPD stereo decoding
Термины и определения
lpd_stereo_stream() - Элемент данных для декодирования стереоданных для режима LPD
res_mode - Флаг, который указывает частотное разрешение диапазонов параметров
q_mode - Флаг, который указывает временное разрешение диапазонов параметров
ipd_mode - Битовое поле, которое определяет максимум диапазонов параметра для параметра IPD
pred_mode - Флаг, который указывает, используется ли предсказание
cod_mode - Битовое поле, которое определяет максимум диапазонов параметров, для которых квантуется боковой сигнал.
Ild_idx[k][b] - Индекс параметра ILD для кадра k и диапазона b
Ipd_idx[k][b] - Индекс параметра IPD для кадра k и диапазона b
pred_gain_idx[k][b] - Индекс коэффициента предсказания для кадра k и диапазона b
cod_gain_idx - Глобальный индекс коэффициента усиления для квантованного бокового сигнала
Вспомогательные элементы
ccfl - Длина кадра базового кода
M - Длина LPD стереокадра, определенная в Таблице 7.x.1
band_config()-Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция определена в 7.x
band_limits() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция определена в 7.x
max_band() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция определена в 7.x
ipd_max_band() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция
cod_max_band() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция
cod_L - Количество линий DFT для декодированного бокового сигнала
Процесс декодирования
LPD стереокодирование
Описание инструментов
LPD стерео - это дискретное M/S стереокодирование, где центральный канал кодируется базовым LPD моно кодером, а боковой сигнал закодирован в DFT области. декодированный центральный сигнал является выходом LPD моно декодера, который затем обрабатывается LPD стерео модулем. Стереодекодирование выполняют в DFT области, где декодируют L и R каналы. Эти два декодированных канала возвращают обратно во временную область, а затем они могут быть объединены в этой области с декодированными каналами, полученными в FD режиме. Режим FD кодирования использует собственные инструменты стерео, то есть, дискретное стерео с или без комплексного предсказания.
Элементы данных
res_mode - Флаг, который указывает частотное разрешение диапазонов параметров
q_mode - Флаг, который указывает временное разрешение диапазонов параметров
ipd_mode - Битовое поле, которое определяет максимум диапазонов для параметра IPD
pred_mode - Флаг, который указывает, используется ли предсказание
cod_mode - Битовое поле, которое определяет максимум диапазонов параметров, для которых квантуется боковой сигнал.
Ild_idx[k][b] - Индекс параметра ILD для кадра k и диапазона b
Ipd_idx[k][b] - Индекс параметра IPD для кадра k и диапазона b
pred_gain_idx[k][b] - Индекс коэффициента предсказания для кадра k и диапазона b
cod_gain_idx - Глобальный индекс коэффициента усиления для квантованного бокового сигнала
Справочные элементы
ccfl - Длина кадра базового кода
M - Длина LPD стереокадра, определенная в Таблице 7.x.1
band_config()-Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция определена в 7.x
band_limits() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция определена в 7.x
max_band() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция определена в 7.x
ipd_max_band() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция
cod_max_band() - Функция, которая возвращает количество диапазонов кодированных параметров. Эта функция
cod_L - Количество линий DFT для декодированного бокового сигнала
Процесс декодирования
Стереодекодирование выполняют в частотной области. Оно действует как постобработка, выполняемая LPD декодером. От LPD декодера получают синтезированный центральный моносигнал. Затем декодируют боковой сигнал или выполняют его предсказание в частотной области. Затем восстанавливают канальные спектры в частотной области перед их повторным синтезом во временной области. Стерео LPD работает с фиксированным размером кадра, равным размеру ACELP кадра независимо от режима кодирования, использованного в LPD режиме.
Частотный анализ
DFT спектр с индексом i вычисляют из декодированного кадра x длиной M
где N - объем анализа сигнала, w - окно анализа и x - декодированный временной сигнал из LPD декодера с индексом i кадра, задержанный на величину L перекрытия DFT. M равно размеру ACELP кадра с частотой дискретизации, использованной в FD режиме. N равно размеру стерео LPD кадра плюс размер перекрытия DFT. Эти размеры зависят от используемой версии LPD, как показано в Таблице 7.x.1.
Таблица 7.х.1 - размеры для DFT и кадров стерео LPD
| Версия LPD | Размер N DFT | Размер M кадра | Размер L перекрытия |
| 0 | 336 | 256 | 80 |
| 1 | 672 | 512 | 160 |
Окно w является синусным окном, определенным в виде:
Конфигурация диапазонов параметров
Спектр DFT разделен на не перекрывающиеся частотные диапазоны, называемые диапазонами параметров. Разбиение спектра является неравномерным и копирует разложение на слуховые частотные составляющие. Возможны два разных варианта разделения спектра с полосами частот, примерно соответствующими либо удвоенной, либо учетверенной эквивалентной прямоугольной полосе (ERB). Вариант разбиения спектра выбирается с использованием элемента res_mode данных и определяется следующим псевдокодом
funtion nbands=band_config(N,res_mod)
band_limits[0]=1;
nbands=0;
while(band_limits[nbands++]<(N/2)){
if(stereo_lpd_res==0)
band_limits[nbands]=band_limits_erb2[nbands];
else
band_limits[nbands]=band_limits_erb4[nbands];
}
nbands--;
band_limits[nbands]=N/2;
return nbands
где nbands - общее количество диапазонов параметров, а N - размер окна DFT анализа. Таблицы band_limits_erb2 и band_limits_erb4 определены в Таблице 7.x.2. Декодер может адаптивно изменять разрешения диапазонов параметров спектра каждые два стерео LPD кадра.
Таблица 7.х.2 - Ограничения диапазонов параметров с учетом индекса k DFT
| Индекс b диапазона параметров | band_limits_erb2 | band_limits_erb4 |
| 0 | 1 | 1 |
| 1 | 3 | 3 |
| 2 | 5 | 7 |
| 3 | 7 | 13 |
| 4 | 9 | 21 |
| 5 | 13 | 33 |
| 6 | 17 | 49 |
| 7 | 21 | 73 |
| 8 | 25 | 105 |
| 9 | 33 | 177 |
| 10 | 41 | 241 |
| 11 | 49 | 337 |
| 12 | 57 | |
| 13 | 73 | |
| 14 | 89 | |
| 15 | 105 | |
| 16 | 137 | |
| 17 | 177 | |
| 18 | 241 | |
| 19 | 337 |
Максимальное количество диапазонов параметров для IPD посылают в элементе данных ipd_mod 2-битового поля.
Максимальное количество диапазонов параметров для кодирования бокового сигнала посылают в элементе данных cod_mod 2-битового поля
Таблица max_band[][] определена в Таблице 7.х.3
Затем вычисляют количество ожидаемых декодированных линий для бокового сигнала в виде:
Таблица 7.х.3 - Максимальное количество диапазонов для разных кодовых режимов
| Индекс режима | max_band[0] | max_band[1] |
| 0 | 0 | 0 |
| 1 | 7 | 4 |
| 2 | 9 | 5 |
| 3 | 11 | 6 |
Обратное квантование стереопараметров
Стереопараметры «межканальные разности уровней» (ILD), «межканальные разности фаз» (IPD) и коэффициенты предсказания посылают в каждом кадре или каждые два кадра в зависимости от флага q_mode. Если q_mode равно 0, то указанные параметры обновляют в каждом кадре. В противном случае, значения параметров обновляют только для нечетных индексов i стерео LPD кадра в USAC кадре. Индекс i стерео LPD кадра в USAC кадре может принимать значение от 0 до 3 в LPD версии 0 и 0 и 1 в LPD версии 1. ILD декодируют следующим образом:
IPD декодируют для первых диапазонов ipd_max_band
Коэффициенты предсказания декодируют только тогда, когда флаг pred_mode установлен в единицу. Тогда декодированные коэффициенты:
если pred_mode равен нулю, все коэффициенты установлены в нуль.
Независимо от значения q_mode декодирование бокового сигнала выполняют в каждом кадре, если code_mode имеет ненулевое значение. Сначала декодируют глобальный коэффициент:
Декодированная форма бокового сигнала является выходом AVQ, описанного в USAC спецификации [1] в разделе
Таблица 7.х.4 - Таблица обратного квантования ild_q[]
| Индекс | выход | индекс | Выход |
| 0 | -50 | 16 | 2 |
| 1 | -45 | 17 | 4 |
| 2 | -40 | 18 | 6 |
| 3 | -35 | 19 | 8 |
| 4 | -30 | 20 | 10 |
| 5 | -25 | 21 | 13 |
| 6 | -22 | 22 | 16 |
| 7 | -19 | 23 | 19 |
| 8 | -16 | 24 | 22 |
| 9 | -13 | 25 | 25 |
| 10 | -10 | 26 | 30 |
| 11 | -8 | 27 | 35 |
| 12 | -6 | 28 | 40 |
| 13 | -4 | 29 | 45 |
| 14 | -2 | 30 | 50 |
| 15 | 0 | 31 | зарезервировано |
Table 7.x.5 - Таблица обратного квантования res_pres_gain_q[]
| индекс | выход |
| 0 | 0 |
| 1 | 0.1170 |
| 2 | 0.2270 |
| 3 | 0.3407 |
| 4 | 0.4645 |
| 5 | 0.6051 |
| 6 | 0.7763 |
| 7 | 1 |
Обратное канальное отображение
Центральный сигнал X и боковой сигнал S сначала преобразуют в левый и правый каналы L и R следующим образом:
где коэффициент g на каждый диапазон параметров получают из параметра ILD:
где 
Для диапазонов параметров ниже cod_max_band два канала обновляют, используя декодированный боковой сигнал:
Для вышележащих диапазонов параметров выполняют предсказание бокового сигнала, и каналы обновляют следующим образом:
Наконец, каналы умножают на комплексное число с целью восстановления исходной энергии и межканальной фазы сигналов:
где
где с ограничено значениями от -12 до 12 дБ,
и где
где atan2(x,y)- четырехквадрантный арктангенс x/y.
Синтез временной области
Из двух декодированных спектров L и R синтезируют два сигнала l и r посредством обратного DFT:
Наконец, операция перекрытия с суммированием позволяет восстановить кадр из M отсчетов:
Постобработка
Басовая постобработка применяется отдельно по двум каналам. Эта обработка предназначена для обоих каналов, как это описано в разделе 7.17 документа [1].
Следует понимать, что в этой спецификации сигналы на линиях иногда обозначены ссылочными позициями для этих линий или иногда указываются самими ссылочными позициями, которые были атрибутированы для этих линий. Таким образом, обозначение таково, что линия, имеющая конкретный сигнал, указывает сам сигнал. Линия может быть физической линией в аппаратной реализации. Однако в компьютеризованной реализации физическая линия не существует, но сигнал, представленный этой линией, передается от одного вычислительно модуля на другой вычислительный модуль.
Хотя настоящее изобретение было описано в контексте блок-схем, где блоки представляют действительные или логические аппаратные компоненты, настоящее изобретение также можно осуществить реализованным на компьютере способом. В последнем случае блоки представляют соответствующие этапы способа, где эти этапы представляют функциональные возможности, выполняемые соответствующими логическими или физическими аппаратными блоками.
Хотя некоторые аспекты были описаны в контексте устройства, очевидно, что эти аспекты также представляют описание соответствующего способа, где блок или устройство соответствует этапу способа или отличительному признаку этапа способа. Аналогичным образом, аспекты, описанные в контексте этапа способа, также представляют описание соответствующего блока, элемента или отличительного признака соответствующего устройства. Некоторые или все этапы способа могут выполняться физическим устройством (или с использованием физического устройства), например, типа микропроцессора, программируемого компьютером, или электронной схемой. В некоторых вариантах осуществления указанным устройством может выполняться какой-то один или более из самых важных этапов способа.
Переданный или кодированный согласно изобретению сигнал может храниться на цифровом запоминающем носителе или может передаваться в среде передачи, такой как беспроводная среда передачи или проводная среда передачи, такая как Интернет.
В зависимости от конкретных требований к реализации варианты осуществления изобретения могут быть реализованы аппаратными средствами или программными средствами. Реализацию можно выполнить, используя цифровой запоминающий носитель, например, гибкий диск, DVD, Blu-Ray, CD, ROM, PROM и EPROM, EEPROM или флэш-память, имеющий хранящиеся на нем электронно-читаемые управляющие сигналы, которые действуют вместе (или способны действовать вместе) с программируемой компьютерной системой, так чтобы выполнялся соответствующий способ. Таким образом, цифровой запоминающий носитель может быть машиночитаемым.
Некоторые варианты осуществления согласно изобретению могут содержать носитель данных, имеющий электронно считываемые управляющие сигналы, которые способны совместно действовать с программируемой компьютерной системой, с тем, чтобы выполнялся один из описанных здесь способов.
В общем случае варианты осуществления настоящего изобретения можно реализовать в виде компьютерного программного продукта с программным кодом, где программный код действует, выполняя один из способов, когда компьютерный программный продукт исполняется на компьютере. Программный код может храниться, например, на машиночитаемом носителе.
Другие варианты осуществления содержат компьютерную программу для выполнения одного из описанных здесь способов, хранящуюся на машиночитаемом носителе.
Другими словами, вариант осуществления способа согласно изобретению представляет собой компьютерную программу, имеющую программный код для выполнения одного из описанных здесь способов при исполнении этой компьютерной программы на компьютере.
Таким образом, дополнительный вариант осуществления способа согласно изобретению представляет собой носитель данных (или запоминающий носитель длительного хранения, такой как цифровой запоминающий носитель или машиночитаемый носитель), содержащий записанную на нем компьютерную программу для выполнения одного из описанных здесь способов. Носитель данных, цифровой запоминающий носитель или носитель с записанной программой, как правило, являются материальным носителем и/или носителем длительного хранения.
Таким образом, дополнительный вариант осуществления способа согласно изобретению представляет собой поток данных или последовательность сигналов, представляющих упомянутую компьютерную программу для выполнения одного из описанных здесь способов. Этот поток данных или последовательность сигналов может быть сконфигурирована, например, для пересылки через соединение для передачи данных, например, Интернет.
Дополнительный вариант осуществления содержит средство обработки, например, компьютер или программируемое логическое устройство, выполненное с возможностью (или адаптированное к) выполнения одного из описанных здесь способов. Дополнительный вариант осуществления содержит компьютер с установленной на нем компьютерной программой для выполнения одного из описанных здесь способов.
Дополнительный вариант осуществления согласно изобретению содержит устройство или систему, выполненную с возможностью пересылки на приемник (например, электронным или оптическим путем) компьютерной программы для выполнения одного из описанных здесь способов. Приемник может представлять собой, например, компьютер, мобильное устройство, запоминающее устройство или т.п. Указанное устройство или система может, например, содержать файловый сервер для пересылки компьютерной программы на указанный приемник.
В некоторых вариантах для выполнения некоторых или всех функциональных возможностей описанных здесь способов может быть использовано программируемое логическое устройство (например, вентильная матрица, программируемая пользователем). В некоторых вариантах осуществления вентильная матрица, программируемая пользователем, может совместно работать с микропроцессором для выполнения одного из описанных здесь способов. В общем случае предпочтительно, чтобы указанные способы выполнялись каким-либо аппаратным средством.
Вышеописанные варианты осуществления являются лишь иллюстрацией принципов настоящего изобретения. Понятно, что специалистам в данной области техники очевидны модификации и другие версии указанных конфигураций и описанных здесь деталей. Таким образом, изобретение ограничено только объемом прилагаемой формулы изобретения, а не конкретными деталями, представленными в описании и объяснении описанных здесь вариантов осуществления.
Ссылки
[1] ISO/IEC DIS 23003-3, Usac
[2] ISO/IEC DIS 23008-3, 3D Audio
Claims (82)
1. Аудиокодер (2") для кодирования многоканального сигнала (4), содержащий:
понижающий микшер (12) для понижающего микширования многоканального сигнала (4) для получения сигнала (14) понижающего микширования,
базовый кодер (16) области линейного предсказания для кодирования сигнала (14) понижающего микширования, причем сигнал (14) понижающего микширования имеет нижний диапазон и верхний диапазон, причем базовый кодер (16) области линейного предсказания выполнен с возможностью применения обработки расширения ширины полосы для параметрического кодирования верхнего диапазона,
банк (82) фильтров для создания спектрального представления многоканального сигнала (4) и
объединенный многоканальный кодер (18), выполненный с возможностью обработки спектрального представления, содержащего нижний диапазон и верхний диапазон многоканального сигнала, для создания многоканальной информации (20),
причем базовый кодер (16) области линейного предсказания
дополнительно содержит декодер области линейного предсказания для декодирования кодированного сигнала (26) понижающего микширования для получения кодированного и декодированного сигнала (54) понижающего микширования и
причем аудиокодер дополнительно содержит многоканальный остаточный кодер (56) для вычисления кодированного многоканального остаточного сигнала (58) с использованием кодированного и декодированного сигнала (54) понижающего микширования, причем многоканальный остаточный сигнал представляет ошибку между декодированным многоканальным представлением с использованием многоканальной информации (20) и многоканальным сигналом (4) перед понижающим микшированием,
причем базовый кодер (16) области линейного предсказания
выполнен с возможностью применения обработки расширения ширины полосы для параметрического кодирования верхнего диапазона,
причем декодер области линейного предсказания выполнен с возможностью получения в качестве кодированного и декодированного сигнала понижающего микширования только сигнала нижнего диапазона, представляющего нижний диапазон сигнала понижающего микширования, и причем кодированный многоканальный остаточный сигнал (58) имеет только диапазон, соответствующий нижнему диапазону многоканального сигнала перед понижающим микшированием,
или
причем базовый кодер (16) области линейного предсказания содержит ACELP процессор (30), причем ACELP процессор (30) выполнен с возможностью работы с сигналом (34) понижающего микширования с понижающей дискретизацией, и причем процессор (36) расширения ширины полосы во временной области выполнен с возможностью параметрического кодирования диапазона части сигнала понижающего микширования, удаленной из ACELP входного сигнала путем третьего выполнения понижающей дискретизации, и
причем базовый кодер (16) области линейного предсказания содержит ТСХ процессор (32), где ТСХ процессор (32) выполнен с возможностью работы с сигналом (14) понижающего микширования, не подвергнутым понижающей дискретизации или подвергнутым понижающей дискретизации в степени меньшей понижающей дискретизации для ACELP процессора, причем ТСХ процессор (32) содержит первый времячастотный преобразователь (40), первый параметрический генератор (42) для создания параметрического представления (46) первого набора диапазонов и первый квантователь-кодер (44) для создания набора квантованных кодированных спектральных линий (48) для второго набора диапазонов.
2. Аудиокодер по п.1, причем времячастотный преобразователь (40) отличается от банка (82) фильтров, причем банк (82) фильтров содержит параметры фильтров, оптимизированные для создания спектрального представления многоканального сигнала (4), или причем времячастотный преобразователь (40) содержит параметры фильтров, оптимизированные для создания параметрического представления (46) первого набора диапазонов.
3. Аудиокодер по п. 1, в котором объединенный многоканальный кодер (18) содержит первый генератор кадров и в котором базовый кодер области линейного предсказания содержит второй генератор кадров, причем первый генератор кадров и второй генератор кадров выполнены с возможностью формирования кадра из многоканального сигнала (4), причем первый генератор кадров и второй генератор кадров выполнены с возможностью формирования кадра одинаковой длины.
4. Аудиокодер по п. 1, дополнительно содержащий:
кодер (6) области линейного предсказания, содержащий базовый кодер (16) области линейного предсказания и многоканальный кодер (18);
кодер (8) частотной области и
контроллер (10) для переключения между кодером (6) области линейного предсказания и кодером (8) частотной области,
причем кодер (8) частотной области содержит второй объединенный многоканальный кодер (22) для кодирования второй многоканальной информации (24) из многоканального сигнала, причем второй объединенный многоканальный кодер (22) отличается от первого объединенного многоканального кодера (18), и
причем контроллер (10) сконфигурирован так, что часть многоканального сигнала представляют либо кодированным кадром кодера области линейного предсказания, либо кодированным кадром кодера частотной области.
5. Аудиокодер по п. 1,
в котором базовый кодер (16) области линейного предсказания выполнен с возможностью вычисления сигнала (14) понижающего микширования в качестве параметрического представления центрального сигнала М/S многоканального аудиосигнала;
причем многоканальный остаточный кодер (56) выполнен с возможностью вычисления бокового сигнала, соответствующего центральному сигналу М/S многоканального аудиосигнала, причем многоканальный остаточный кодер (56) выполнен с возможностью вычисления верхнего диапазона центрального сигнала с использованием имитации расширения ширины полосы во временной области или причем многоканальный остаточный кодер (56) выполнен с возможностью предсказания верхнего диапазона центрального сигнала путем нахождения информации о предсказании, которая минимизирует разность между вычисленным боковым сигналом и вычисленным полнодиапазонным центральным сигналом из предыдущего кадра.
6. Аудиодекодер (102") для декодирования кодированного аудиосигнала (103), содержащего кодированный базовым кодером сигнал, параметры расширения ширины полосы и многоканальную информацию, причем аудиодекодер содержит:
базовый декодер (104) области линейного предсказания для декодирования кодированного базовым кодером сигнала для создания моносигнала;
банк (144) фильтров для анализа для преобразования моносигнала в спектральное представление (145);
многоканальный декодер (146) для создания первого канального спектра и второго канального спектра из спектрального представления моносигнала и многоканальной информации (20)
и процессор (148) банка фильтров для синтеза, фильтрующего первый канальный спектр для получения первого канального сигнала, и для синтеза, фильтрующего второй канальный спектр для получения второго канального сигнала,
причем многоканальный декодер (146) выполнен с возможностью получения первого и второго канального сигнала из моносигнала, причем моносигнал является центральным сигналом многоканального сигнала, и причем многоканальный декодер (146) выполнен с возможностью получения М/S (центральный/боковой) многоканального декодированного аудиосигнала, причем многоканальный декодер (146) выполнен с возможностью вычисления бокового сигнала из многоканальной информации,
причем многоканальный декодер (146) выполнен с возможностью вычисления L/R (левый/правый) многоканального декодированного аудиосигнала из М/S многоканального декодированного аудиосигнала, причем многоканальный декодер (146) выполнен с возможностью вычисления L/R многоканального декодированного аудиосигнала для нижнего диапазона с использованием многоканальной информации и бокового сигнала или причем многоканальный декодер (146) выполнен с возможностью вычисления предсказанного бокового сигнала из центрального сигнала и причем многоканальный декодер (146) дополнительно выполнен с возможностью вычисления L/R многоканального декодированного аудиосигнала для верхнего диапазона с использованием предсказанного бокового сигнала и ILD (межканальная разность уровней) значения из многоканальной информации,
или
причем базовый декодер (104) области линейного предсказания содержит процессор (126) расширения ширины полосы для создания части (140) верхнего диапазона из параметров расширения ширины полосы и моносигнала нижнего диапазона или кодированного базовым кодером сигнала для получения декодированного верхнего диапазона (140) аудиосигнала;
причем базовый декодер (104) области линейного предсказания дополнительно содержит процессор сигнала нижнего диапазона, выполненный с возможностью декодирования моносигнала нижнего диапазона; и
причем базовый декодер (104) области линейного предсказания дополнительно содержит объединитель (128), выполненный с возможностью вычисления полнодиапазонного моносигнала с использованием декодированного моносигнала нижнего диапазона и декодированного верхнего диапазона аудиосигнала, причем базовый декодер (104) области линейного предсказания содержит:
ACELP декодер (120), синтезатор (122) нижнего диапазона, блок (124) повышающей дискретизации, процессор (126) расширения ширины полосы во временной области или второй объединитель (128), причем второй объединитель (128) выполнен с возможностью объединения сигнала нижнего диапазона с повышенной дискретизацией и сигнала (140) верхнего диапазона с расширенной шириной полосы для получения полнодиапазонного ACELP декодированного моносигнала;
ТСХ декодер (130) и процессор (132) для интеллектуального заполнения промежутков для получения полнодиапазонного ТСХ декодированного моносигнала;
процессор (134) для полнодиапазонного синтеза для объединения полнодиапазонного ACELP декодированного моносигнала и полнодиапазонного ТСХ декодированного моносигнала; или
причем кросс-тракт (136) обеспечен для инициализации синтезатора (122) нижнего диапазона с использованием информации, полученной в результате спектр-временного преобразования нижнего диапазона от ТСХ декодера (130) и процессора (132) для интеллектуального заполнения промежутков.
7. Аудиодекодер (102") по п. 6, дополнительно содержащий: декодер (106) частотной области;
второй объединенный многоканальный декодер (110) для создания второго многоканального представления (116) с использованием выхода декодера (106) частотной области и второй многоканальной информации (22, 24) и
первый объединитель (112) для объединения первого канального сигнала и второго канального сигнала со вторым многоканальным представлением (116) для получения декодированного аудиосигнала (118);
причем второй объединенный многоканальный декодер (110) отличается от упомянутого многоканального декодера (146).
8. Аудиодекодер (102") по п. 6, в котором банк (144) фильтров для анализа содержит DFT для преобразования моносигнала в спектральное представление (145) и в котором процессор (148) банка фильтров для синтеза содержит IDFT для преобразования спектрального представления (145) в первый канальный сигнал и второй канальный сигнал.
9. Аудиодекодер (102") по п. 8, в котором банк (144) фильтров для анализа выполнен с возможностью применения окна в DFT-преобразованном спектральном представлении (145), так что правая часть спектрального представления предыдущего кадра и левая часть спектрального представления текущего кадра перекрываются, причем предыдущий кадр и текущий кадр являются последовательными.
10. Аудиодекодер (102") по п. 6, в котором многоканальный декодер (146) дополнительно выполнен с возможностью реализации комплексного режима для L/R декодированного многоканального аудиосигнала;
в котором многоканальный декодер (146) выполнен с возможностью вычисления амплитуды комплексного режима с использованием энергии кодированного центрального сигнала и энергии декодированного L/R многоканального аудиосигнала для получения компенсации энергии и
в котором многоканальный декодер (146) выполнен с возможностью вычисления фазы комплексного режима с использованием IPD (межканальная разность фаз) значения многоканальной информации.
11. Способ (2000) кодирования многоканального сигнала, содержащий этапы, на которых:
выполняют понижающее микширование многоканального сигнала (4) для получения сигнала (14) понижающего микширования;
кодируют сигнал (14) понижающего микширования, причем сигнал (14) понижающего микширования имеет нижний диапазон и верхний диапазон, причем кодирование сигнала (14) понижающего микширования содержит применение обработки расширения ширины полосы для параметрического кодирования верхнего диапазона;
создают спектральное представление многоканального сигнала (4) и
обрабатывают спектральное представление, содержащее нижний диапазон и верхний диапазон многоканального сигнала для создания многоканальной информации (20),
причем кодирование сигнала (14) понижающего микширования дополнительно содержит декодирование кодированного сигнала (26) понижающего микширования для получения кодированного и декодированного сигнала (54) понижающего микширования; и
причем способ (2000) дополнительно содержит вычисление кодированного многоканального остаточного сигнала (58) с использованием кодированного и декодированного сигнала (54) понижающего микширования, причем многоканальный остаточный сигнал представляет ошибку между декодированным многоканальным представлением с использованием многоканальной информации (20) и многоканальным сигналом (4) перед понижающим микшированием,
причем кодирование сигнала (14) понижающего микширования содержит применение обработки расширения ширины полосы для параметрического кодирования верхнего диапазона,
причем декодирование кодированного сигнала (26) понижающего микширования выполнено с возможностью получения в качестве кодированного и декодированного сигнала понижающего микширования только сигнала нижнего диапазона, представляющего нижний диапазон сигнала понижающего микширования, и причем кодированный многоканальный остаточный сигнал (58) имеет только диапазон, соответствующий нижнему диапазону многоканального сигнала перед понижающим микшированием, или
причем кодирование сигнала (14) понижающего микширования
содержит выполнение ACELP обработки (30), причем ACELP обработка выполнена с возможностью работы с сигналом (34) понижающего микширования с понижающей дискретизацией, и причем обработка (36) расширения ширины полосы во временной области выполнена с возможностью параметрического кодирования диапазона части сигнала понижающего микширования, удаленной из ACELP входного сигнала путем третьего выполнения понижающей дискретизации, и
причем кодирование сигнала (14) понижающего микширования
содержит ТСХ обработку (32), причем ТСХ обработка (32) выполнена с возможностью работы с сигналом (14) понижающего микширования, не подвергнутым понижающей дискретизации или подвергнутым понижающей дискретизации в степени меньшей понижающей дискретизации для ACELP обработки, причем ТСХ обработка содержит первое времячастотное преобразование (40), первое параметрическое генерирование (42) для создания параметрического представления (46) первого набора диапазонов и первое квантование-кодирование (44) для создания набора квантованных кодированных спектральных линий (48) для второго набора диапазонов.
12. Способ (2100) декодирования кодированного аудиосигнала, содержащего кодированный базовым кодером сигнал, параметры расширения ширины полосы и многоканальную информацию, причем способ содержит этапы, на которых:
декодируют кодированный базовым кодером сигнал для создания моносигнала;
преобразуют моносигнал в спектральное представление (145);
создают первый канальный спектр и второй канальный спектр из спектрального представления моносигнала и многоканальной информации (20);
выполняют синтезирующую фильтрацию первого канального спектра для получения первого канального сигнала и синтезирующую фильтрацию второго канального спектра для получения второго канального сигнала,
причем создание первого канального спектра и второго
канального спектра выполнено с возможностью получения первого канального сигнала и второго канального сигнала из моносигнала, причем моносигнал является центральным сигналом многоканального сигнала, и причем создание первого канального спектра и второго канального спектра выполнено с возможностью получения М/S многоканального декодированного аудиосигнала, причем создание первого канального спектра и второго канального спектра
выполнено с возможностью вычисления бокового сигнала из многоканальной информации,
причем создание первого канального спектра и второго
канального спектра выполнено с возможностью вычисления L/R многоканального декодированного аудиосигнала из М/S многоканального декодированного аудиосигнала, причем создание первого канального спектра и второго канального спектра
выполнено с возможностью вычисления L/R многоканального декодированного аудиосигнала для нижнего диапазона с использованием многоканальной информации и бокового сигнала или причем создание первого канального спектра и второго канального спектра выполнено с возможностью вычисления предсказанного бокового сигнала из центрального сигнала и причем создание первого канального спектра и второго канального спектра дополнительно выполнено с возможностью вычисления L/R многоканального декодированного аудиосигнала для верхнего диапазона с использованием предсказанного бокового сигнала и ILD (межканальная разность уровней) значения из многоканальной информации, или
причем декодирование кодированного базовым кодером сигнала содержит обработку (126) расширения ширины полосы для создания части (140) верхнего диапазона из параметров расширения ширины полосы и моносигнала нижнего диапазона или кодированного базовым кодером сигнала для получения декодированного верхнего диапазона (140) аудиосигнала;
причем декодирование кодированного базовым кодером сигнала дополнительно содержит обработку сигнала нижнего диапазона, выполненную с возможностью декодирования моносигнала нижнего диапазона; и
причем декодирование кодированного базовым кодером сигнала дополнительно содержит объединение (128), выполненное с возможностью вычисления полнодиапазонного моносигнала с использованием декодированного моносигнала нижнего диапазона и декодированного верхнего диапазона аудиосигнала, причем декодирование кодированного базовым кодером сигнала содержит:
ACELP декодирование (120), синтезирование (122) нижнего диапазона, повышение (124) дискретизации, обработку (126) расширения ширины полосы во временной области или второе объединение (128), причем второе объединение (128) выполнено с возможностью объединения сигнала нижнего диапазона с повышенной дискретизацией и сигнала (140) верхнего диапазона с расширенной шириной полосы для получения полнодиапазонного ACELP декодированного моносигнала;
ТСХ декодирование (130) и обработку (132) для интеллектуального заполнения промежутков для получения полнодиапазонного ТСХ декодированного моносигнала;
обработку (134) для полнодиапазонного синтеза для объединения полнодиапазонного ACELP декодированного моносигнала и полнодиапазонного ТСХ декодированного моносигнала; или
причем кросс-тракт (136) обеспечен для инициализации синтезатора нижнего диапазона с использованием информации, полученной в результате спектр-временного преобразования нижнего диапазона от ТСХ декодирования и обработки (132) для интеллектуального заполнения промежутков.
13. Носитель данных, содержащий сохраненную на нем компьютерную программу для выполнения, при ее использовании на компьютере или процессоре, способа по п. 11.
14. Носитель данных, содержащий сохраненную на нем компьютерную программу для выполнения, при ее использовании на компьютере или процессоре, способа по п. 12.
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP15158233.5 | 2015-03-09 | ||
| EP15158233 | 2015-03-09 | ||
| EP15172599.1 | 2015-06-17 | ||
| EP15172599.1A EP3067887A1 (en) | 2015-03-09 | 2015-06-17 | Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal |
| PCT/EP2016/054775 WO2016142336A1 (en) | 2015-03-09 | 2016-03-07 | Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2680195C1 true RU2680195C1 (ru) | 2019-02-18 |
Family
ID=52682621
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2017133918A RU2679571C1 (ru) | 2015-03-09 | 2016-03-07 | Аудиокодер для кодирования многоканального сигнала и аудиодекодер для декодирования кодированного аудиосигнала |
| RU2017134385A RU2680195C1 (ru) | 2015-03-09 | 2016-03-07 | Аудиокодер для кодирования многоканального сигнала и аудиодекодер для декодирования кодированного аудиосигнала |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2017133918A RU2679571C1 (ru) | 2015-03-09 | 2016-03-07 | Аудиокодер для кодирования многоканального сигнала и аудиодекодер для декодирования кодированного аудиосигнала |
Country Status (19)
| Country | Link |
|---|---|
| US (7) | US10395661B2 (ru) |
| EP (9) | EP3067887A1 (ru) |
| JP (6) | JP6606190B2 (ru) |
| KR (2) | KR102151719B1 (ru) |
| CN (6) | CN107430863B (ru) |
| AR (6) | AR103881A1 (ru) |
| AU (2) | AU2016231283C1 (ru) |
| BR (4) | BR112017018441B1 (ru) |
| CA (2) | CA2978814C (ru) |
| ES (6) | ES2959970T3 (ru) |
| FI (1) | FI3958257T3 (ru) |
| MX (2) | MX364618B (ru) |
| MY (2) | MY194940A (ru) |
| PL (6) | PL3910628T3 (ru) |
| PT (3) | PT3268958T (ru) |
| RU (2) | RU2679571C1 (ru) |
| SG (2) | SG11201707335SA (ru) |
| TW (2) | TWI613643B (ru) |
| WO (2) | WO2016142337A1 (ru) |
Families Citing this family (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3067887A1 (en) | 2015-03-09 | 2016-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal |
| MY196436A (en) | 2016-01-22 | 2023-04-11 | Fraunhofer Ges Forschung | Apparatus and Method for Encoding or Decoding a Multi-Channel Signal Using Frame Control Synchronization |
| CN107731238B (zh) * | 2016-08-10 | 2021-07-16 | 华为技术有限公司 | 多声道信号的编码方法和编码器 |
| US10573326B2 (en) * | 2017-04-05 | 2020-02-25 | Qualcomm Incorporated | Inter-channel bandwidth extension |
| US10224045B2 (en) * | 2017-05-11 | 2019-03-05 | Qualcomm Incorporated | Stereo parameters for stereo decoding |
| CN110710181B (zh) | 2017-05-18 | 2022-09-23 | 弗劳恩霍夫应用研究促进协会 | 管理网络设备 |
| US10431231B2 (en) * | 2017-06-29 | 2019-10-01 | Qualcomm Incorporated | High-band residual prediction with time-domain inter-channel bandwidth extension |
| US10475457B2 (en) | 2017-07-03 | 2019-11-12 | Qualcomm Incorporated | Time-domain inter-channel prediction |
| CN114898761A (zh) * | 2017-08-10 | 2022-08-12 | 华为技术有限公司 | 立体声信号编解码方法及装置 |
| US10535357B2 (en) | 2017-10-05 | 2020-01-14 | Qualcomm Incorporated | Encoding or decoding of audio signals |
| US10734001B2 (en) * | 2017-10-05 | 2020-08-04 | Qualcomm Incorporated | Encoding or decoding of audio signals |
| EP3483883A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio coding and decoding with selective postfiltering |
| EP3483878A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio decoder supporting a set of different loss concealment tools |
| WO2019091576A1 (en) | 2017-11-10 | 2019-05-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoders, audio decoders, methods and computer programs adapting an encoding and decoding of least significant bits |
| EP3483882A1 (en) * | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Controlling bandwidth in encoders and/or decoders |
| EP3483886A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Selecting pitch lag |
| EP3483879A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Analysis/synthesis windowing function for modulated lapped transformation |
| EP3483880A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Temporal noise shaping |
| EP3483884A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Signal filtering |
| TWI812658B (zh) * | 2017-12-19 | 2023-08-21 | 瑞典商都比國際公司 | 用於統一語音及音訊之解碼及編碼去關聯濾波器之改良之方法、裝置及系統 |
| US11315584B2 (en) * | 2017-12-19 | 2022-04-26 | Dolby International Ab | Methods and apparatus for unified speech and audio decoding QMF based harmonic transposer improvements |
| ES2922532T3 (es) * | 2018-02-01 | 2022-09-16 | Fraunhofer Ges Forschung | Codificador de escena de audio, decodificador de escena de audio y procedimientos relacionados que utilizan el análisis espacial híbrido de codificador / decodificador |
| EP3550561A1 (en) * | 2018-04-06 | 2019-10-09 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Downmixer, audio encoder, method and computer program applying a phase value to a magnitude value |
| EP3588495A1 (en) | 2018-06-22 | 2020-01-01 | FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. | Multichannel audio coding |
| US12020718B2 (en) * | 2018-07-02 | 2024-06-25 | Dolby International Ab | Methods and devices for generating or decoding a bitstream comprising immersive audio signals |
| KR102606259B1 (ko) * | 2018-07-04 | 2023-11-29 | 프라운호퍼-게젤샤프트 추르 푀르데룽 데어 안제반텐 포르슝 에 파우 | 신호 화이트닝 또는 신호 후처리를 이용하는 다중신호 인코더, 다중신호 디코더, 및 관련 방법들 |
| WO2020094263A1 (en) | 2018-11-05 | 2020-05-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and audio signal processor, for providing a processed audio signal representation, audio decoder, audio encoder, methods and computer programs |
| EP3719799A1 (en) * | 2019-04-04 | 2020-10-07 | FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. | A multi-channel audio encoder, decoder, methods and computer program for switching between a parametric multi-channel operation and an individual channel operation |
| WO2020216459A1 (en) * | 2019-04-23 | 2020-10-29 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus, method or computer program for generating an output downmix representation |
| CN110267142B (zh) * | 2019-06-25 | 2021-06-22 | 维沃移动通信有限公司 | 一种移动终端及控制方法 |
| EP4002358A4 (en) * | 2019-07-19 | 2023-03-22 | Intellectual Discovery Co., Ltd. | ADAPTIVE AUDIO PROCESSING METHOD, DEVICE, COMPUTER PROGRAM AND ASSOCIATED RECORDING MEDIA IN A WIRELESS COMMUNICATION SYSTEM |
| FR3101741A1 (fr) * | 2019-10-02 | 2021-04-09 | Orange | Détermination de corrections à appliquer à un signal audio multicanal, codage et décodage associés |
| US11432069B2 (en) * | 2019-10-10 | 2022-08-30 | Boomcloud 360, Inc. | Spectrally orthogonal audio component processing |
| CN115039172A (zh) * | 2020-02-03 | 2022-09-09 | 沃伊斯亚吉公司 | 多声道声音编解码器中立体声编解码模式之间的切换 |
| CN111654745B (zh) * | 2020-06-08 | 2022-10-14 | 海信视像科技股份有限公司 | 多声道的信号处理方法及显示设备 |
| GB2614482A (en) * | 2020-09-25 | 2023-07-05 | Apple Inc | Seamless scalable decoding of channels, objects, and hoa audio content |
| CA3194876A1 (en) * | 2020-10-09 | 2022-04-14 | Franz REUTELHUBER | Apparatus, method, or computer program for processing an encoded audio scene using a bandwidth extension |
| JPWO2022176270A1 (ru) * | 2021-02-16 | 2022-08-25 | ||
| CN115881140A (zh) * | 2021-09-29 | 2023-03-31 | 华为技术有限公司 | 编解码方法、装置、设备、存储介质及计算机程序产品 |
| CN118414661A (zh) * | 2021-12-20 | 2024-07-30 | 杜比国际公司 | Qmf域中的ivas spar滤波器组 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2009066960A1 (en) * | 2007-11-21 | 2009-05-28 | Lg Electronics Inc. | A method and an apparatus for processing a signal |
| WO2010128386A1 (en) * | 2009-05-08 | 2010-11-11 | Nokia Corporation | Multi channel audio processing |
| US20120002818A1 (en) * | 2009-03-17 | 2012-01-05 | Dolby International Ab | Advanced Stereo Coding Based on a Combination of Adaptively Selectable Left/Right or Mid/Side Stereo Coding and of Parametric Stereo Coding |
| US8428958B2 (en) * | 2008-02-19 | 2013-04-23 | Samsung Electronics Co., Ltd. | Apparatus and method of encoding and decoding signals |
| RU2495503C2 (ru) * | 2008-07-29 | 2013-10-10 | Панасоник Корпорэйшн | Устройство кодирования звука, устройство декодирования звука, устройство кодирования и декодирования звука и система проведения телеконференций |
| WO2013156814A1 (en) * | 2012-04-18 | 2013-10-24 | Nokia Corporation | Stereo audio signal encoder |
| WO2013168414A1 (ja) * | 2012-05-11 | 2013-11-14 | パナソニック株式会社 | 音信号ハイブリッドエンコーダ、音信号ハイブリッドデコーダ、音信号符号化方法、及び音信号復号方法 |
| US20140016787A1 (en) * | 2011-03-18 | 2014-01-16 | Dolby International Ab | Frame element length transmission in audio coding |
| WO2014126682A1 (en) * | 2013-02-14 | 2014-08-21 | Dolby Laboratories Licensing Corporation | Signal decorrelation in an audio processing system |
| US8831958B2 (en) * | 2008-09-25 | 2014-09-09 | Lg Electronics Inc. | Method and an apparatus for a bandwidth extension using different schemes |
Family Cites Families (50)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA1311059C (en) * | 1986-03-25 | 1992-12-01 | Bruce Allen Dautrich | Speaker-trained speech recognizer having the capability of detecting confusingly similar vocabulary words |
| DE4307688A1 (de) * | 1993-03-11 | 1994-09-15 | Daimler Benz Ag | Verfahren zur Geräuschreduktion für gestörte Sprachkanäle |
| US5956674A (en) * | 1995-12-01 | 1999-09-21 | Digital Theater Systems, Inc. | Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels |
| JP3593201B2 (ja) * | 1996-01-12 | 2004-11-24 | ユナイテッド・モジュール・コーポレーション | オーディオ復号装置 |
| US5812971A (en) * | 1996-03-22 | 1998-09-22 | Lucent Technologies Inc. | Enhanced joint stereo coding method using temporal envelope shaping |
| ATE341074T1 (de) * | 2000-02-29 | 2006-10-15 | Qualcomm Inc | Multimodaler mischbereich-sprachkodierer mit geschlossener regelschleife |
| SE519981C2 (sv) * | 2000-09-15 | 2003-05-06 | Ericsson Telefon Ab L M | Kodning och avkodning av signaler från flera kanaler |
| KR20060131767A (ko) | 2003-12-04 | 2006-12-20 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 오디오 신호 코딩 |
| EP1761915B1 (en) * | 2004-06-21 | 2008-12-03 | Koninklijke Philips Electronics N.V. | Method and apparatus to encode and decode multi-channel audio signals |
| US7391870B2 (en) | 2004-07-09 | 2008-06-24 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E V | Apparatus and method for generating a multi-channel output signal |
| BRPI0515128A (pt) * | 2004-08-31 | 2008-07-08 | Matsushita Electric Ind Co Ltd | aparelho de geração de sinal estéreo e método de geração de sinal estéreo |
| EP1818911B1 (en) * | 2004-12-27 | 2012-02-08 | Panasonic Corporation | Sound coding device and sound coding method |
| EP1912206B1 (en) | 2005-08-31 | 2013-01-09 | Panasonic Corporation | Stereo encoding device, stereo decoding device, and stereo encoding method |
| WO2008035949A1 (en) | 2006-09-22 | 2008-03-27 | Samsung Electronics Co., Ltd. | Method, medium, and system encoding and/or decoding audio signals by using bandwidth extension and stereo coding |
| CN101067931B (zh) * | 2007-05-10 | 2011-04-20 | 芯晟(北京)科技有限公司 | 一种高效可配置的频域参数立体声及多声道编解码方法与系统 |
| EP2168121B1 (fr) * | 2007-07-03 | 2018-06-06 | Orange | Quantification apres transformation lineaire combinant les signaux audio d'une scene sonore, codeur associe |
| CN101373594A (zh) * | 2007-08-21 | 2009-02-25 | 华为技术有限公司 | 修正音频信号的方法及装置 |
| KR101505831B1 (ko) * | 2007-10-30 | 2015-03-26 | 삼성전자주식회사 | 멀티 채널 신호의 부호화/복호화 방법 및 장치 |
| RU2439720C1 (ru) * | 2007-12-18 | 2012-01-10 | ЭлДжи ЭЛЕКТРОНИКС ИНК. | Способ и устройство для обработки звукового сигнала |
| AU2008344134B2 (en) * | 2007-12-31 | 2011-08-25 | Lg Electronics Inc. | A method and an apparatus for processing an audio signal |
| EP2077550B8 (en) | 2008-01-04 | 2012-03-14 | Dolby International AB | Audio encoder and decoder |
| WO2009131076A1 (ja) | 2008-04-25 | 2009-10-29 | 日本電気株式会社 | 無線通信装置 |
| BR122021009256B1 (pt) | 2008-07-11 | 2022-03-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e. V. | Codificador e decodificador de áudio para estruturas de codificação de sinais de áudio amostrados |
| EP2144230A1 (en) | 2008-07-11 | 2010-01-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Low bitrate audio encoding/decoding scheme having cascaded switches |
| CA2871268C (en) * | 2008-07-11 | 2015-11-03 | Nikolaus Rettelbach | Audio encoder, audio decoder, methods for encoding and decoding an audio signal, audio stream and computer program |
| MY181247A (en) | 2008-07-11 | 2020-12-21 | Frauenhofer Ges Zur Forderung Der Angenwandten Forschung E V | Audio encoder and decoder for encoding and decoding audio samples |
| EP2352147B9 (en) * | 2008-07-11 | 2014-04-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | An apparatus and a method for encoding an audio signal |
| EP2144231A1 (en) * | 2008-07-11 | 2010-01-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Low bitrate audio encoding/decoding scheme with common preprocessing |
| MX2011000375A (es) * | 2008-07-11 | 2011-05-19 | Fraunhofer Ges Forschung | Codificador y decodificador de audio para codificar y decodificar tramas de una señal de audio muestreada. |
| JP5203077B2 (ja) | 2008-07-14 | 2013-06-05 | 株式会社エヌ・ティ・ティ・ドコモ | 音声符号化装置及び方法、音声復号化装置及び方法、並びに、音声帯域拡張装置及び方法 |
| ES2592416T3 (es) * | 2008-07-17 | 2016-11-30 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Esquema de codificación/decodificación de audio que tiene una derivación conmutable |
| KR20130133917A (ko) * | 2008-10-08 | 2013-12-09 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | 다중 분해능 스위치드 오디오 부호화/복호화 방법 |
| WO2010042024A1 (en) | 2008-10-10 | 2010-04-15 | Telefonaktiebolaget Lm Ericsson (Publ) | Energy conservative multi-channel audio coding |
| JP5678071B2 (ja) | 2009-10-08 | 2015-02-25 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ | 線形予測符号化ベースのノイズ整形を用いた多重モードオーディオ信号デコーダ、多重モードオーディオ信号エンコーダ、方法およびコンピュータプログラム |
| EP2473995B9 (en) * | 2009-10-20 | 2016-12-21 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio signal encoder, audio signal decoder, method for providing an encoded representation of an audio content, method for providing a decoded representation of an audio content and computer program for use in low delay applications |
| CN102859589B (zh) | 2009-10-20 | 2014-07-09 | 弗兰霍菲尔运输应用研究公司 | 多模式音频编译码器及其适用的码簿激励线性预测编码 |
| PL2491556T3 (pl) * | 2009-10-20 | 2024-08-26 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Dekoder sygnału audio, odpowiadający mu sposób oraz program komputerowy |
| KR101710113B1 (ko) * | 2009-10-23 | 2017-02-27 | 삼성전자주식회사 | 위상 정보와 잔여 신호를 이용한 부호화／복호화 장치 및 방법 |
| KR101397058B1 (ko) * | 2009-11-12 | 2014-05-20 | 엘지전자 주식회사 | 신호 처리 방법 및 이의 장치 |
| EP2375409A1 (en) * | 2010-04-09 | 2011-10-12 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder, audio decoder and related methods for processing multi-channel audio signals using complex prediction |
| US8166830B2 (en) * | 2010-07-02 | 2012-05-01 | Dresser, Inc. | Meter devices and methods |
| JP5499981B2 (ja) * | 2010-08-02 | 2014-05-21 | コニカミノルタ株式会社 | 画像処理装置 |
| EP2502155A4 (en) * | 2010-11-12 | 2013-12-04 | Polycom Inc | HIERARCHICAL AUDIO CODING IN A MULTIPOINT ENVIRONMENT |
| CN102779518B (zh) * | 2012-07-27 | 2014-08-06 | 深圳广晟信源技术有限公司 | 用于双核编码模式的编码方法和系统 |
| TWI546799B (zh) | 2013-04-05 | 2016-08-21 | 杜比國際公司 | 音頻編碼器及解碼器 |
| EP2830052A1 (en) * | 2013-07-22 | 2015-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio decoder, audio encoder, method for providing at least four audio channel signals on the basis of an encoded representation, method for providing an encoded representation on the basis of at least four audio channel signals and computer program using a bandwidth extension |
| TWI579831B (zh) * | 2013-09-12 | 2017-04-21 | 杜比國際公司 | 用於參數量化的方法、用於量化的參數之解量化方法及其電腦可讀取的媒體、音頻編碼器、音頻解碼器及音頻系統 |
| US20150159036A1 (en) | 2013-12-11 | 2015-06-11 | Momentive Performance Materials Inc. | Stable primer formulations and coatings with nano dispersion of modified metal oxides |
| US9984699B2 (en) * | 2014-06-26 | 2018-05-29 | Qualcomm Incorporated | High-band signal coding using mismatched frequency ranges |
| EP3067887A1 (en) | 2015-03-09 | 2016-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal |
-
2015
- 2015-06-17 EP EP15172599.1A patent/EP3067887A1/en not_active Withdrawn
- 2015-06-17 EP EP15172594.2A patent/EP3067886A1/en not_active Withdrawn
-
2016
- 2016-03-02 TW TW105106306A patent/TWI613643B/zh active
- 2016-03-02 TW TW105106305A patent/TWI609364B/zh active
- 2016-03-07 WO PCT/EP2016/054776 patent/WO2016142337A1/en active Application Filing
- 2016-03-07 CA CA2978814A patent/CA2978814C/en active Active
- 2016-03-07 EP EP16708172.8A patent/EP3268958B1/en active Active
- 2016-03-07 EP EP21171826.7A patent/EP3879527B1/en active Active
- 2016-03-07 RU RU2017133918A patent/RU2679571C1/ru active
- 2016-03-07 PL PL21171835.8T patent/PL3910628T3/pl unknown
- 2016-03-07 PL PL21191544.2T patent/PL3958257T3/pl unknown
- 2016-03-07 ES ES21171831T patent/ES2959970T3/es active Active
- 2016-03-07 PL PL21171831.7T patent/PL3879528T3/pl unknown
- 2016-03-07 JP JP2017548014A patent/JP6606190B2/ja active Active
- 2016-03-07 EP EP21191544.2A patent/EP3958257B1/en active Active
- 2016-03-07 EP EP21171831.7A patent/EP3879528B1/en active Active
- 2016-03-07 PT PT167081728T patent/PT3268958T/pt unknown
- 2016-03-07 MY MYPI2017001286A patent/MY194940A/en unknown
- 2016-03-07 ES ES21171826T patent/ES2959910T3/es active Active
- 2016-03-07 ES ES16708171T patent/ES2910658T3/es active Active
- 2016-03-07 CA CA2978812A patent/CA2978812C/en active Active
- 2016-03-07 KR KR1020177028167A patent/KR102151719B1/ko active IP Right Grant
- 2016-03-07 KR KR1020177028152A patent/KR102075361B1/ko active IP Right Grant
- 2016-03-07 MX MX2017011493A patent/MX364618B/es active IP Right Grant
- 2016-03-07 CN CN201680014669.3A patent/CN107430863B/zh active Active
- 2016-03-07 SG SG11201707335SA patent/SG11201707335SA/en unknown
- 2016-03-07 BR BR112017018441-9A patent/BR112017018441B1/pt active IP Right Grant
- 2016-03-07 CN CN202110178110.7A patent/CN112951248B/zh active Active
- 2016-03-07 RU RU2017134385A patent/RU2680195C1/ru active
- 2016-03-07 BR BR122022025643-0A patent/BR122022025643B1/pt active IP Right Grant
- 2016-03-07 ES ES21171835T patent/ES2958535T3/es active Active
- 2016-03-07 MY MYPI2017001288A patent/MY186689A/en unknown
- 2016-03-07 MX MX2017011187A patent/MX366860B/es active IP Right Grant
- 2016-03-07 CN CN202110019042.XA patent/CN112614497B/zh active Active
- 2016-03-07 PT PT211915442T patent/PT3958257T/pt unknown
- 2016-03-07 ES ES21191544T patent/ES2951090T3/es active Active
- 2016-03-07 ES ES16708172T patent/ES2901109T3/es active Active
- 2016-03-07 CN CN201680014670.6A patent/CN107408389B/zh active Active
- 2016-03-07 CN CN202110018176.XA patent/CN112634913B/zh active Active
- 2016-03-07 FI FIEP21191544.2T patent/FI3958257T3/fi active
- 2016-03-07 PL PL21171826.7T patent/PL3879527T3/pl unknown
- 2016-03-07 PL PL16708171T patent/PL3268957T3/pl unknown
- 2016-03-07 PT PT167081710T patent/PT3268957T/pt unknown
- 2016-03-07 WO PCT/EP2016/054775 patent/WO2016142336A1/en active Application Filing
- 2016-03-07 AU AU2016231283A patent/AU2016231283C1/en active Active
- 2016-03-07 CN CN202110019014.8A patent/CN112614496B/zh active Active
- 2016-03-07 BR BR122022025766-6A patent/BR122022025766B1/pt active IP Right Grant
- 2016-03-07 SG SG11201707343UA patent/SG11201707343UA/en unknown
- 2016-03-07 EP EP23166790.8A patent/EP4224470A1/en active Pending
- 2016-03-07 AU AU2016231284A patent/AU2016231284B2/en active Active
- 2016-03-07 BR BR112017018439-7A patent/BR112017018439B1/pt active IP Right Grant
- 2016-03-07 EP EP21171835.8A patent/EP3910628B1/en active Active
- 2016-03-07 EP EP16708171.0A patent/EP3268957B1/en active Active
- 2016-03-07 PL PL16708172T patent/PL3268958T3/pl unknown
- 2016-03-07 JP JP2017548000A patent/JP6643352B2/ja active Active
- 2016-03-08 AR ARP160100609A patent/AR103881A1/es active IP Right Grant
- 2016-03-08 AR ARP160100608A patent/AR103880A1/es active IP Right Grant
-
2017
- 2017-09-05 US US15/695,424 patent/US10395661B2/en active Active
- 2017-09-05 US US15/695,668 patent/US10388287B2/en active Active
-
2019
- 2019-03-22 US US16/362,462 patent/US10777208B2/en active Active
- 2019-07-09 US US16/506,767 patent/US11238874B2/en active Active
- 2019-10-17 JP JP2019189837A patent/JP7077290B2/ja active Active
-
2020
- 2020-01-06 JP JP2020000185A patent/JP7181671B2/ja active Active
- 2020-08-31 US US17/008,428 patent/US11107483B2/en active Active
-
2021
- 2021-08-24 US US17/410,033 patent/US11741973B2/en active Active
- 2021-10-18 AR ARP210102867A patent/AR123835A2/es unknown
- 2021-10-18 AR ARP210102869A patent/AR123837A2/es unknown
- 2021-10-18 AR ARP210102866A patent/AR123834A2/es unknown
- 2021-10-18 AR ARP210102868A patent/AR123836A2/es unknown
-
2022
- 2022-01-13 US US17/575,260 patent/US11881225B2/en active Active
- 2022-03-22 JP JP2022045510A patent/JP7469350B2/ja active Active
- 2022-11-17 JP JP2022183880A patent/JP2023029849A/ja active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2009066960A1 (en) * | 2007-11-21 | 2009-05-28 | Lg Electronics Inc. | A method and an apparatus for processing a signal |
| US8428958B2 (en) * | 2008-02-19 | 2013-04-23 | Samsung Electronics Co., Ltd. | Apparatus and method of encoding and decoding signals |
| RU2495503C2 (ru) * | 2008-07-29 | 2013-10-10 | Панасоник Корпорэйшн | Устройство кодирования звука, устройство декодирования звука, устройство кодирования и декодирования звука и система проведения телеконференций |
| US8831958B2 (en) * | 2008-09-25 | 2014-09-09 | Lg Electronics Inc. | Method and an apparatus for a bandwidth extension using different schemes |
| US20120002818A1 (en) * | 2009-03-17 | 2012-01-05 | Dolby International Ab | Advanced Stereo Coding Based on a Combination of Adaptively Selectable Left/Right or Mid/Side Stereo Coding and of Parametric Stereo Coding |
| WO2010128386A1 (en) * | 2009-05-08 | 2010-11-11 | Nokia Corporation | Multi channel audio processing |
| US20140016787A1 (en) * | 2011-03-18 | 2014-01-16 | Dolby International Ab | Frame element length transmission in audio coding |
| WO2013156814A1 (en) * | 2012-04-18 | 2013-10-24 | Nokia Corporation | Stereo audio signal encoder |
| WO2013168414A1 (ja) * | 2012-05-11 | 2013-11-14 | パナソニック株式会社 | 音信号ハイブリッドエンコーダ、音信号ハイブリッドデコーダ、音信号符号化方法、及び音信号復号方法 |
| WO2014126682A1 (en) * | 2013-02-14 | 2014-08-21 | Dolby Laboratories Licensing Corporation | Signal decorrelation in an audio processing system |
Also Published As
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2680195C1 (ru) | Аудиокодер для кодирования многоканального сигнала и аудиодекодер для декодирования кодированного аудиосигнала |