Высокоэффективное видеокодирование

HEVC/H.265/MPEG-H, часть 2

Высокоэффективное видеокодирование
Статус	Действующий
Год начался	7 июня 2013 г. ( 07.06.2013 )
Впервые опубликовано	7 июля 2013 г. ( 07.07.2013 )
Последняя версия	9.0 13 сентября 2023 г. ( 13.09.2023 )
Организация	МСЭ-Т , ИСО , МЭК
комитет	SG16 (Секретарь: Симао Кампос ) ( VCEG ), MPEG
Базовые стандарты	H.261 , H.262 , H.263 , ISO/IEC 14496-2 , H.264
Сопутствующие стандарты	H.266 , MPEG-5 , MPEG-H
Домен	Сжатие видео
Лицензия	MPEG Лос-Анджелес
Веб-сайт	www .Что .int /запись /T-REC-H .265

Высокоэффективное кодирование видео ( HEVC ), также известное как H.265 и MPEG-H Part 2 , — это стандарт сжатия видео, разработанный в рамках проекта MPEG-H в качестве преемника широко используемого расширенного кодирования видео (AVC, H. 264 или MPEG-4, часть 10). По сравнению с AVC, HEVC обеспечивает на 25–50 % лучшее сжатие данных при том же уровне качества видео или существенно улучшенное качество видео при той же скорости передачи данных . Он поддерживает разрешения до 8192×4320, включая 8K UHD , и в отличие от преимущественно 8-битного AVC, профиль Main 10 с более высокой точностью HEVC включен практически во все поддерживающее оборудование.

В то время как AVC использует целочисленное дискретное косинусное преобразование (DCT) с размерами блоков 4×4 и 8×8, HEVC использует как целочисленное DCT, так и дискретное синусоидальное преобразование (DST) с различными размерами блоков от 4×4 до 32×32. Высокоэффективный формат изображения (HEIF) основан на HEVC.

Концепция

Во многих отношениях HEVC является расширением концепции H.264/MPEG-4 AVC. Оба работают путем сравнения различных частей кадра видео для поиска избыточных областей как внутри одного кадра, так и между последовательными кадрами. Эти избыточные области затем заменяются кратким описанием вместо исходных пикселей. Основные изменения для HEVC включают расширение областей сравнения шаблонов и разностного кодирования с 16×16 пикселей до размеров до 64×64, улучшенную сегментацию блоков с переменным размером , улучшенное «внутреннее» предсказание в пределах одного и того же изображения, улучшенное движение. векторное предсказание и объединение областей движения, улучшенная фильтрация компенсации движения и дополнительный этап фильтрации, называемый адаптивной к выборке фильтрацией смещения. Эффективное использование этих улучшений требует гораздо больших возможностей обработки сигналов для сжатия видео, но оказывает меньшее влияние на объем вычислений, необходимых для распаковки.

HEVC был стандартизирован Объединенной совместной группой по кодированию видео (JCT-VC), результатом сотрудничества между ISO / IEC MPEG и 16-й исследовательской группой ITU-T VCEG . Группа ISO/IEC называет его MPEG-H Part 2, а ITU-T — H.265. Первая версия стандарта HEVC была ратифицирована в январе 2013 года и опубликована в июне 2013 года. Вторая версия с многовидовыми расширениями (MV-HEVC), расширениями диапазона (RExt) и расширениями масштабируемости (SHVC) была завершена и утверждена в 2014 году. и опубликовано в начале 2015 года. Расширения для 3D-видео (3D-HEVC) были завершены в начале 2015 года, а расширения для кодирования содержимого экрана (SCC) были завершены в начале 2016 года и опубликованы в начале 2017 года, охватывая видео, содержащее визуализированную графику, текст или анимация, а также (или вместо) видеосцены, снятые камерой. В октябре 2017 года стандарт был отмечен премией Primetime Emmy Engineering Award. как оказавшее существенное влияние на технологию телевидения.

HEVC содержит технологии, защищенные патентами , принадлежащими организациям, участвовавшим в JCT-VC. Для реализации устройства или программного приложения, использующего HEVC, может потребоваться лицензия от владельцев патентов HEVC. ISO/IEC и ITU требуют, чтобы компании, принадлежащие их организациям, предлагали свои патенты на разумных и недискриминационных условиях лицензирования (RAND). Патентные лицензии можно получить непосредственно у каждого патентообладателя или через органы по лицензированию патентов, такие как MPEG LA , Access Advance и Velos Media.

Совокупные лицензионные сборы, предлагаемые в настоящее время всеми органами по патентному лицензированию, выше, чем для AVC. Лицензионные сборы являются одной из основных причин низкого уровня внедрения HEVC в сети, и именно поэтому некоторые крупнейшие технологические компании ( Amazon , AMD , Apple , ARM , Cisco , Google , Intel , Microsoft , Mozilla , Netflix , Nvidia и подробнее) присоединились к Альянсу открытых медиа , завершила разработку бесплатного альтернативного формата кодирования видео AV1 . 28 марта 2018 года

История

Формат HEVC был совместно разработан более чем дюжиной организаций по всему миру. Наибольший активный патентный вклад в развитие формата HEVC поступил от пяти организаций: Samsung Electronics (4249 патентов), General Electric (1127 патентов), M&K Holdings (907 патентов), NTT (878 патентов) и JVC Kenwood (628 патентов). Другие держатели патентов включают Fujitsu , Apple , Canon , Колумбийский университет , KAIST , Университет Квангун , Массачусетский технологический институт , Университет Сунгюнкван , Funai , Hikvision , KBS , KT и NEC .

Предыдущая работа

ITU-T В 2004 году Группа экспертов по кодированию видео (VCEG) начала масштабное исследование технологических достижений, которые могли бы позволить создать новый стандарт сжатия видео (или существенные улучшения стандарта /MPEG-4 AVC H.264 , ориентированные на сжатие). ). В октябре 2004 года были рассмотрены различные методы потенциального улучшения стандарта H.264/MPEG-4 AVC. В январе 2005 года на следующем заседании VCEG VCEG начала определять определенные темы как «ключевые технические области» (KTA) для дальнейшего изучения. Для оценки таких предложений была создана кодовая база программного обеспечения, называемая кодовой базой KTA. Программное обеспечение KTA было основано на эталонном программном обеспечении Joint Model (JM), разработанном совместной видеогруппой MPEG и VCEG для H.264/MPEG-4 AVC. Дополнительные предложенные технологии были интегрированы в программное обеспечение KTA и протестированы в ходе экспериментов в течение следующих четырех лет.

Были рассмотрены два подхода к стандартизации технологии улучшенного сжатия: либо создание нового стандарта, либо создание расширений H.264/MPEG-4 AVC. Проект имел предварительные названия H.265 и H.NGVC (кодирование видео следующего поколения) и был основной частью работы VCEG, пока в 2010 году не превратился в совместный проект HEVC с MPEG.

Предварительными требованиями для NGVC были возможность снижения скорости передачи данных на 50% при том же субъективном качестве изображения по сравнению с H.264/MPEG-4 AVC High Profile, а также вычислительная сложность в диапазоне от 1/2 до 3 раз выше, чем у H.264/MPEG-4 AVC High Profile. Высокий профиль. NGVC сможет обеспечить снижение скорости передачи данных на 25 % и снижение сложности на 50 % при том же воспринимаемом качестве видео, что и профиль High, или обеспечить большее снижение скорости передачи данных при несколько более высокой сложности.

Группа ISO / IEC экспертов по движущимся изображениям (MPEG) начала аналогичный проект в 2007 году, предварительно получивший название « Высокопроизводительное кодирование видео» . Соглашение о снижении скорости передачи данных на 50% было принято в качестве цели проекта к июлю 2007 года. Первые оценки проводились с использованием модификаций эталонного программного обеспечения-кодера KTA, разработанного VCEG. К июлю 2009 года результаты экспериментов показали среднее снижение битов примерно на 20% по сравнению с AVC High Profile; Эти результаты побудили MPEG начать работу по стандартизации в сотрудничестве с VCEG.

Объединенная совместная группа

MPEG и VCEG создали совместную совместную группу по кодированию видео ( JCT-VC ) для разработки стандарта HEVC.

Стандартизация

Официальный совместный конкурс предложений по технологии сжатия видео был объявлен в январе 2010 года VCEG и MPEG, и предложения были оценены на первом заседании совместной группы сотрудничества MPEG и VCEG по кодированию видео (JCT-VC), которое состоялось в апреле. 2010 г. Всего было подано 27 полных предложений. Оценки показали, что некоторые предложения могут достичь того же визуального качества, что и AVC, только при половине скорости передачи данных во многих тестовых случаях, за счет увеличения вычислительной сложности в 2–10 раз, а некоторые предложения достигают хороших субъективных результатов качества и скорости передачи данных. с меньшей вычислительной сложностью, чем эталонные кодировки высокого профиля AVC. название «Высокоэффективное видеокодирование» (HEVC). На этой встрече для совместного проекта было принято Начиная с этой встречи, JCT-VC объединил функции некоторых из лучших предложений в единую кодовую базу программного обеспечения и «Рассматриваемую тестовую модель», а также провел дальнейшие эксперименты для оценки различных предложенных функций. Первый рабочий проект спецификации HEVC был подготовлен на третьем заседании JCT-VC в октябре 2010 года. Многие изменения в инструментах кодирования и конфигурации HEVC были внесены на более поздних собраниях JCT-VC.

25 января 2013 года ITU объявил, что HEVC получил одобрение (согласие) первого этапа в альтернативном процессе утверждения ITU-T (AAP) . В тот же день MPEG объявил, что HEVC получил статус окончательного проекта международного стандарта (FDIS) в процессе стандартизации MPEG .

13 апреля 2013 г. HEVC/H.265 был утвержден в качестве стандарта ITU-T. Стандарт был официально опубликован ITU-T 7 июня 2013 г. и ISO/IEC 25 ноября 2013 г.

11 июля 2014 года MPEG объявил, что второе издание HEVC будет содержать три недавно завершенных расширения: многовидовые расширения (MV-HEVC), расширения диапазона (RExt) и расширения масштабируемости (SHVC).

29 октября 2014 г. HEVC/H.265 версии 2 был утвержден в качестве стандарта ITU-T. Затем он был официально опубликован 12 января 2015 года.

29 апреля 2015 года HEVC/H.265 версии 3 был утвержден в качестве стандарта ITU-T.

3 июня 2016 года версия 4 HEVC/H.265 была одобрена ITU-T и не была одобрена во время голосования в октябре 2016 года.

22 декабря 2016 года HEVC/H.265 версии 4 был утвержден в качестве стандарта ITU-T.

Лицензирование патентов

Основная статья: MPEG Лос-Анджелес

29 сентября 2014 г. MPEG LA объявила о своей лицензии HEVC, которая охватывает основные патенты 23 компаний. Первые 100 000 «устройств» (включая реализации программного обеспечения) не требуют лицензионных отчислений, а после этого плата составляет 0,20 доллара США за устройство до годового лимита в 25 миллионов долларов США. Это значительно дороже, чем плата за AVC, которая составляла 0,10 доллара США за устройство, с тем же отказом в размере 100 000 и годовым лимитом в 6,5 миллиона долларов США. MPEG LA не взимает никакой платы за сам контент, что они пытались сделать при первоначальном лицензировании AVC, но впоследствии отказались от нее, когда производители контента отказались ее платить. Лицензия была расширена за счет включения профилей второй версии стандарта HEVC.

Когда были объявлены условия MPEG LA, комментаторы отметили, что ряд известных обладателей патентов не входили в группу. Среди них были AT&T , Microsoft , Nokia и Motorola . В то время предполагалось, что эти компании сформируют свой собственный пул лицензий, чтобы конкурировать с пулом MPEG LA или дополнить его. О такой группе было официально объявлено 26 марта 2015 года как HEVC Advance . Условия, охватывающие 500 основных патентов, были объявлены 22 июля 2015 г., причем ставки зависят от страны продажи, типа устройства, профиля HEVC, расширений HEVC и дополнительных функций HEVC. В отличие от условий MPEG LA, HEVC Advance вновь ввела лицензионные сборы за контент, закодированный с помощью HEVC, посредством платы за распределение доходов.

Первоначальная лицензия HEVC Advance имела максимальную ставку роялти в размере 2,60 долларов США за устройство для стран региона 1 и ставку роялти за контент в размере 0,5% от дохода, полученного от видеоуслуг HEVC. Страны региона 1, в которых действует лицензия HEVC Advance, включают США, Канаду, Европейский Союз, Японию, Южную Корею, Австралию, Новую Зеландию и другие. Страны Региона 2 — это страны, не включенные в список стран Региона 1. Лицензия HEVC Advance имела максимальную ставку роялти в размере 1,30 доллара США за устройство для стран Региона 2. В отличие от MPEG LA, здесь не было годового ограничения. Помимо этого, HEVC Advance также взимает роялти в размере 0,5% от дохода, полученного от видеосервисов, кодирующих контент в HEVC.

Когда о них было объявлено, отраслевые обозреватели вызвали резкую реакцию по поводу «необоснованных и жадных» сборов за устройства, которые примерно в семь раз превышали сборы MPEG LA. В сумме для устройства потребуются лицензии стоимостью 2,80 доллара, что в двадцать восемь раз дороже, чем AVC, а также лицензионные сборы за контент. Это привело к призывам «владельцев контента объединиться и согласиться не лицензировать HEVC Advance». Другие утверждали, что эти тарифы могут заставить компании перейти на конкурирующие стандарты, такие как Daala и VP9 .

18 декабря 2015 г. HEVC Advance объявила об изменении ставок роялти. Изменения включают снижение максимальной ставки роялти для стран Региона 1 до 2,03 доллара США за устройство, установление годового лимита роялти и отмену роялти за контент, который является бесплатным для конечных пользователей. Ежегодный лимит роялти для компании составляет 40 миллионов долларов США за устройства, 5 миллионов долларов США за контент и 2 миллиона долларов США за дополнительные функции.

3 февраля 2016 г. Technicolor SA объявила о выходе из патентного пула HEVC Advance. и будут напрямую лицензировать свои патенты HEVC. HEVC Advance ранее перечислил 12 патентов Technicolor. Technicolor объявили, что воссоединились 22 октября 2019 года.

22 ноября 2016 года HEVC Advance объявила о крупной инициативе, пересмотрев свою политику, позволяющую распространять программные реализации HEVC напрямую на потребительские мобильные устройства и персональные компьютеры без лицензионных отчислений и без необходимости получения патентной лицензии.

31 марта 2017 года Velos Media объявила о своей лицензии HEVC, которая охватывает основные патенты Ericsson, Panasonic, Qualcomm Incorporated, Sharp и Sony.

По состоянию на апрель 2019 года Список патентов MPEG LA HEVC занимает 164 страницы.

Патентовладельцы

Следующие организации в настоящее время обладают наиболее активными патентами в патентных пулах HEVC, перечисленных MPEG LA и HEVC Advance :

Организация	Активный патенты	Ссылка
Самсунг Электроникс	4249
Дженерал Электрик (GE)	1127
М&К Холдингс Инк.	0 907
Nippon Telegraph and Telephone (включая NTT Docomo )	0 878
JVC Кенвуд	0 628
Долби Лаборатории	0 624
Инфобридж Пте. ООО	0 572
Митсубиси Электрик	0 401
SK Telecom (включая SK Planet )	0 380
MediaTek (через HFI Inc.)	0 337
Университет Седжонга	0 330
КТ Корп	0 289
Филипс	0 230
Годо Кайша IP-мост	0 219
НЭК Корпорация	0 219
Научно-исследовательский институт электроники и телекоммуникаций (ETRI) Кореи	0 208
Кэнон Инк.	0 180
Тагиван II	0 162
Фуджицу	0 144
Университет Кён Хи	0 103

Версии

Версии стандарта HEVC/H.265, использующие даты утверждения ITU-T.

• Версия 1: (13 апреля 2013 г.) Первая утвержденная версия стандарта HEVC/H.265, содержащая профили Main, Main10 и Main Still Picture.
• Версия 2: (29 октября 2014 г.) Вторая утвержденная версия стандарта HEVC/H.265, которая добавляет 21 профиль расширения диапазона, два профиля масштабируемых расширений и один профиль расширений с несколькими представлениями.
• Версия 3: (29 апреля 2015 г.) Третья утвержденная версия стандарта HEVC/H.265, в которую добавлен основной профиль 3D.
• Версия 4: (22 декабря 2016 г.) Четвертая утвержденная версия стандарта HEVC/H.265, которая добавляет семь профилей расширений кодирования содержимого экрана, три профиля расширений с высокой пропускной способностью и четыре профиля масштабируемых расширений.
• Версия 5: (13 февраля 2018 г.) Пятая утвержденная версия стандарта HEVC/H.265, которая добавляет дополнительные сообщения SEI, в том числе всенаправленные видеосообщения SEI, профиль Monochrome 10, профиль Main 10 Still Picture, а также исправления различных мелких дефектов. в предыдущем содержании Спецификации.
• Версия 6: (29 июня 2019 г.) Шестая утвержденная версия стандарта HEVC/H.265, которая добавляет дополнительные сообщения SEI, включающие сообщения манифеста SEI и сообщения префикса SEI, а также исправления различных незначительных дефектов в предыдущем содержании Спецификации.
• Версия 7: (29 ноября 2019 г.) Седьмая утвержденная версия стандарта HEVC/H.265, которая добавляет дополнительные сообщения SEI для видеоинформации «рыбий глаз» и аннотированных областей, а также включает исправления различных незначительных дефектов в предыдущем содержании Спецификации.
• Версия 8: 22 августа 2021 г. утверждена Версия 8.
• Версия 9: Версия 9 была утверждена 13 сентября 2023 г., это последняя версия.

Реализации и продукты

Основная статья: Реализации и продукты высокоэффективного видеокодирования

2012

компания 29 февраля 2012 года на выставке Mobile World Congress 2012 Qualcomm продемонстрировала декодер HEVC, работающий на планшете Android, с Qualcomm Snapdragon двухъядерным процессором S4, работающим на частоте 1,5 ГГц, продемонстрировав версии H.264/MPEG-4 AVC и HEVC. одного и того же видеоконтента, воспроизводимого рядом. Сообщается, что в этой демонстрации HEVC продемонстрировал снижение скорости передачи данных почти на 50% по сравнению с H.264/MPEG-4 AVC.

2013

11 февраля 2013 года исследователи из Массачусетского технологического института продемонстрировали первый в мире опубликованный декодер HEVC ASIC на Международной конференции по твердотельным схемам (ISSCC) 2013. Их чип был способен декодировать видеопоток 3840×2160p со скоростью 30 кадров в секунду в реальном времени, потребляя менее 0,1 Вт мощности.

3 апреля 2013 года Ateme объявила о доступности первой реализации программного проигрывателя HEVC с открытым исходным кодом на основе декодера OpenHEVC и GPAC видеоплеера , которые лицензируются в соответствии с LGPL . Декодер OpenHEVC поддерживает основной профиль HEVC и может декодировать видео 1080p со скоростью 30 кадров в секунду, используя одноядерный процессор. Живой транскодер, поддерживающий HEVC и используемый в сочетании с видеоплеером GPAC, был показан на стенде ATEME на выставке NAB в апреле 2013 года.

23 июля 2013 года MulticoreWare объявила и предоставила исходному коду доступ к библиотеки кодировщиков x265 HEVC под лицензией GPL v2 .

8 августа 2013 года компания Nippon Telegraph and Telephone объявила о выпуске своего программного кодировщика HEVC-1000 SDK, который поддерживает профиль Main 10, разрешение до 7680×4320 и частоту кадров до 120 кадров в секунду.

14 ноября 2013 г. разработчики DivX опубликовали информацию о производительности декодирования HEVC с использованием процессора Intel i7 с частотой 3,5 ГГц, 4 ядрами и 8 потоками. Декодер DivX 10.1 Beta обеспечивал скорость 210,9 кадров в секунду при разрешении 720p, 101,5 кадров в секунду при разрешении 1080p и 29,6 кадров в секунду при разрешении 4K.

18 декабря 2013 года ViXS Systems объявила о поставках своего XCode (не путать с Apple Xcode IDE для MacOS) 6400 SoC, который был первым SoC, поддерживающим профиль Main 10 HEVC.

2014

5 апреля 2014 г. на выставке NAB компании eBrisk Video, Inc. и Altera Corporation продемонстрировали кодер HEVC Main10 с ускорением FPGA, который кодировал видео 4Kp60/10-бит в реальном времени с использованием двухпроцессорного процессора Xeon E5-2697-v2. платформа.

13 августа 2014 года компания Ittiam Systems объявила о выпуске кодека H.265/HEVC третьего поколения с поддержкой 12-битного формата 4:2:2.

5 сентября 2014 года Ассоциация дисков Blu-ray объявила, что спецификация дисков Blu-ray 4K будет поддерживать видео 4K в кодировке HEVC со скоростью 60 кадров в секунду, Rec. 2020 Цветовое пространство , широкий динамический диапазон ( PQ и HLG ) и 10-битная глубина цвета . Диски Blu-ray 4K имеют скорость передачи данных не менее 50 Мбит/с и емкость диска до 100 ГБ. Диски Blu-ray 4K и проигрыватели стали доступны для покупки в 2015 или 2016 году.

9 сентября 2014 года Apple анонсировала iPhone 6 и iPhone 6 Plus , которые поддерживают HEVC/H.265 для FaceTime по сотовой связи.

18 сентября 2014 года Nvidia выпустила GeForce GTX 980 (GM204) и GTX 970 (GM204), в состав которых входит Nvidia NVENC , первый в мире аппаратный кодировщик HEVC в дискретной видеокарте.

31 октября 2014 года Microsoft подтвердила, что Windows 10 будет поддерживать HEVC «из коробки» , согласно заявлению Габриэля Аула, руководителя группы данных и фундаментальных исследований Microsoft Operating Systems Group. В Windows 10 Техническая предварительная версия сборки 9860 добавлена ​​поддержка на уровне платформы для HEVC и Matroska .

3 ноября 2014 года Android Lollipop был выпущен со стандартной поддержкой HEVC с использованием программного обеспечения Ittiam Systems .

2015

5 января 2015 года ViXS Systems анонсировала XCode 6800, который является первой SoC, поддерживающей профиль Main 12 HEVC.

5 января 2015 года Nvidia официально анонсировала SoC Tegra X1 с полным аппаратным декодированием HEVC с фиксированными функциями.

22 января 2015 года Nvidia выпустила GeForce GTX 960 (GM206), которая включает в себя первый в мире аппаратный декодер HEVC Main/Main10 с фиксированными функциями в дискретной видеокарте.

23 февраля 2015 года компания Advanced Micro Devices (AMD) объявила, что ее ASIC UVD , который можно найти в APU Carrizo , станет первым процессором на базе x86, имеющим аппаратный декодер HEVC.

27 февраля 2015 г. был выпущен медиаплеер VLC версии 2.2.0 с надежной поддержкой воспроизведения HEVC. Соответствующие версии для Android и iOS также могут воспроизводить HEVC.

31 марта 2015 года VITEC анонсировала MGW Ace, который стал первым полностью аппаратным портативным кодером HEVC, обеспечивающим мобильное кодирование HEVC.

5 августа 2015 года Intel выпустила продукты Skylake с полностью фиксированными функциями основного/8-битного декодирования/кодирования и гибридного/частичного основного 10/10-битного декодирования.

9 сентября 2015 года Apple анонсировала чип Apple A9 , впервые использованный в iPhone 6S , свой первый процессор с аппаратным декодером HEVC, поддерживающим Main 8 и 10. Эта функция не будет разблокирована до выпуска iOS 11 в 2017 году.

2016

11 апреля 2016 г. было объявлено о полной поддержке HEVC (H.265) в новейшей версии MythTV (0.28).

30 августа 2016 года Intel официально анонсировала продукты процессоров Core 7-го поколения ( Kaby Lake ) с полной фиксированной поддержкой аппаратного декодирования HEVC Main10.

7 сентября 2016 года Apple анонсировала чип Apple A10 , впервые использованный в iPhone 7 , который включал аппаратный кодер HEVC, поддерживающий Main 8 и 10. Эта функция не будет разблокирована до выпуска iOS 11 в 2017 году.

25 октября 2016 года Nvidia выпустила GeForce GTX 1050Ti (GP107) и GeForce GTX 1050 (GP107), которые включают в себя полностью фиксированные функции аппаратного кодирования HEVC Main10/Main12.

2017

5 июня 2017 года Apple объявила о поддержке HEVC H.265 в macOS High Sierra , iOS 11 , tvOS , HTTP-трансляция в прямом эфире и Сафари .

25 июня 2017 года Microsoft выпустила бесплатное расширение приложения HEVC для Windows 10 , позволяющее некоторым устройствам Windows 10 с аппаратным обеспечением декодирования HEVC воспроизводить видео в формате HEVC внутри любого приложения.

19 сентября 2017 года Apple выпустила iOS 11 и tvOS 11 с поддержкой кодирования и декодирования HEVC.

25 сентября 2017 года Apple выпустила macOS High Sierra с поддержкой кодирования и декодирования HEVC.

28 сентября 2017 года GoPro выпустила экшн-камеру Hero6 Black с кодированием видео 4K60P HEVC.

17 октября 2017 года Microsoft удалила поддержку декодирования HEVC из Windows 10 с помощью обновления Fall Creators Update версии 1709, сделав HEVC доступным вместо этого в виде отдельной платной загрузки из Microsoft Store.

2 ноября 2017 года Nvidia выпустила GeForce GTX 1070 Ti (GP104), которая включает в себя полностью фиксированный аппаратный декодер HEVC Main10/Main12.

2018

20 сентября 2018 года Nvidia выпустила GeForce RTX 2080 (TU104), которая включает в себя полностью фиксированный аппаратный декодер HEVC Main 4:4:4 12.

2022

25 октября 2022 года Chrome выпустил версию 107, которая начинает поддерживать аппаратное декодирование HEVC для всех платформ «из коробки», если оборудование поддерживается.

Поддержка браузера

Дополнительная информация: HTML-видео § Поддержка браузера.

HEVC реализован в следующих веб-браузерах:

• Браузер Android (начиная с версии 5 от ноября 2014 г.)
• Safari (начиная с версии 11 от сентября 2017 г.)
• Edge (начиная с версии 77 с июля 2017 г., поддерживается в Windows 10 1709+ для устройств с поддерживаемым оборудованием при установке видеорасширений HEVC, начиная с версии 107 с октября 2022 г., поддерживается в macOS 11+, Android 5.0+ для всех устройств)
• Chrome (начиная с версии 107 от октября 2022 г., поддерживается на macOS 11+, Android 5.0+ для всех устройств, поддерживается на Windows 8+, ChromeOS и Linux для устройств с поддерживаемым оборудованием)
• Opera (начиная с версии 94 от декабря 2022 г., поддерживается на тех же платформах, что и Chrome)

По данным Can I Use, в июне 2023 года примерно 88,31% браузеров, используемых на настольных и мобильных системах, могли воспроизводить видео HEVC на веб-страницах HTML5.

Поддержка операционной системы

Поддержка HEVC различными операционными системами

	Microsoft Windows	macOS	Андроид	iOS
Поддержка кодеков	Да	Да	Да	Да
Поддержка контейнеров	MP4 (.mp4, .m4v) Формат файла QuickTime (.mov) Матроска (.mkv)	MP4 (.mp4, .m4v) Формат файла QuickTime (.mov)	MP4 (.mp4, .m4v) Матроска (.mkv)	MP4 (.mp4, .m4v) Формат файла QuickTime (.mov)
Примечания	- Поддержка появилась в Windows 10 версии 1507. - Встроенная поддержка была удалена в Windows 10 версии 1709 из-за затрат на лицензирование. Надстройку HEVC Video Extensions можно приобрести в Microsoft Store, чтобы включить воспроизведение HEVC в приложении медиаплеера по умолчанию Microsoft Movies & TV . - Начиная с Windows 11 версии 22H2, видеорасширения HEVC встроены в установку по умолчанию.	Поддержка появилась в macOS 10.13 High Sierra.	- Поддержка появилась в Android 5.0. - Некоторые устройства Android могут поддерживать только 8-битное аппаратное декодирование (основной профиль), но не 10-битное (основной профиль 10).	- Поддержка появилась в iOS 11.0. - Воспроизведение с программным декодированием возможно на iPhone 5s (с разрешением 720p/240 кадров в секунду, 1080p/60 кадров в секунду) и iPhone 6 (с разрешением 1080p/240 кадров в секунду). - Аппаратное декодирование доступно на Apple A9 (iPhone 6s), а аппаратное декодирование и кодирование доступно на Apple A10 (iPhone 7).

Эффективность кодирования

Блок-схема HEVC

Большинство стандартов кодирования видео разработаны в первую очередь для достижения максимальной эффективности кодирования. Эффективность кодирования — это способность кодировать видео с минимально возможной скоростью передачи данных, сохраняя при этом определенный уровень качества видео. Существует два стандартных способа измерения эффективности кодирования стандарта видеокодирования: использовать объективный показатель, такой как пиковое соотношение сигнал/шум (PSNR), или использовать субъективную оценку качества видео. Субъективная оценка качества видео считается наиболее важным способом измерения стандарта кодирования видео, поскольку люди воспринимают качество видео субъективно.

HEVC выигрывает от использования блоков дерева кодирования (CTU) большего размера. Это было показано в тестах PSNR с кодером HM-8.0 HEVC, где он был вынужден использовать постепенно меньшие размеры CTU. Для всех тестовых последовательностей по сравнению с размером CTU 64×64 было показано, что скорость передачи данных HEVC увеличилась на 2,2% при принудительном использовании размера CTU 32×32 и увеличилась на 11,0% при принудительном использовании размера 16×. Размер 16 ГТЕ. В тестовых последовательностях класса A, где разрешение видео составляло 2560×1600, по сравнению с размером CTU 64×64, было показано, что скорость передачи данных HEVC увеличилась на 5,7% при принудительном использовании размера CTU 32×32. и увеличился на 28,2% при использовании CTU размером 16×16. Тесты показали, что большие размеры CTU повышают эффективность кодирования, а также сокращают время декодирования.

Основной профиль HEVC (MP) сравнивался по эффективности кодирования с H.264/MPEG-4 AVC High Profile (HP), MPEG-4 Advanced Simple Profile (ASP), H.263 High Latency Profile (HLP) и H. .262/MPEG-2 Основной профиль (MP). Кодирование видео было выполнено для развлекательных приложений, и для девяти тестовых видеопоследовательностей было создано двенадцать различных битрейтов с использованием кодера HM-8.0 HEVC. Из девяти тестовых последовательностей видео пять имели разрешение HD, а четыре — разрешение WVGA (800×480). Снижение скорости передачи данных для HEVC было определено на основе PSNR, при этом HEVC имел снижение скорости передачи данных на 35,4% по сравнению с H.264/MPEG-4 AVC HP, на 63,7% по сравнению с MPEG-4 ASP, на 65,1% по сравнению с H.263 HLP. и 70,8% по сравнению с H.262/MPEG-2 MP.

HEVC MP также сравнивался с H.264/MPEG-4 AVC HP по субъективному качеству видео. Кодирование видео было выполнено для развлекательных приложений, и для девяти тестовых видеопоследовательностей были созданы четыре различных битрейта с использованием кодера HM-5.0 HEVC. Субъективная оценка была проведена раньше, чем сравнение PSNR, поэтому использовалась более ранняя версия кодера HEVC, которая имела немного более низкую производительность. Снижение скорости передачи данных определялось на основе субъективной оценки с использованием средних значений оценок . Общее субъективное снижение битрейта для HEVC MP по сравнению с H.264/MPEG-4 AVC HP составило 49,3%.

Федеральная политехническая школа Лозанны (EPFL) провела исследование для оценки субъективного качества видео HEVC при разрешениях выше, чем HDTV. Исследование проводилось с использованием трех видеороликов с разрешением 3840×1744 при 24 кадрах в секунду, 3840×2048 при 30 кадрах в секунду и 3840×2160 при 30 кадрах в секунду. В пятисекундных видеороликах были показаны люди на улице, движение транспорта и сцена из с открытым исходным кодом компьютерного анимационного фильма «Синтел» . Видеопоследовательности были закодированы с пятью различными скоростями передачи данных с использованием кодера HM-6.1.1 HEVC и кодера JM-18.3 H.264/MPEG-4 AVC. Субъективное снижение скорости передачи данных определялось на основе субъективной оценки с использованием средних значений оценок. Исследование сравнило HEVC MP с H.264/MPEG-4 AVC HP и показало, что для HEVC MP среднее снижение битрейта на основе PSNR составило 44,4%, тогда как среднее снижение битрейта на основе субъективного качества видео составило 66,5%.

В сравнении производительности HEVC, опубликованном в апреле 2013 года, HEVC MP и основной профиль 10 (M10P) сравнивались с H.264/MPEG-4 AVC HP и профилем High 10 (H10P) с использованием видеопоследовательностей 3840×2160. Видеопоследовательности кодировались с помощью кодера HM-10.0 HEVC и кодера JM-18.4 H.264/MPEG-4 AVC. Среднее снижение скорости передачи данных на основе PSNR составило 45 % для межкадрового видео.

В сравнении видеокодеров, опубликованном в декабре 2013 года, кодер HM-10.0 HEVC сравнивался с кодером x264 (версия r2334) и кодером VP9 (версия v1.2.0-3088-ga81bd12). Для сравнения использовался метод измерения скорости передачи данных Бьёнтегора-Дельта (BD-BR), в котором отрицательные значения показывают, насколько ниже снижается скорость передачи данных, а положительные значения показывают, насколько скорость передачи данных увеличивается для того же PSNR. В сравнении, кодер HM-10.0 HEVC имел самую высокую эффективность кодирования, и в среднем для получения такого же объективного качества кодеру x264 требовалось увеличить битрейт на 66,4%, тогда как кодеру VP9 требовалось увеличить битрейт. на 79,4%.

Субъективное сравнение производительности видео

Видео кодирование стандартный	Снижение средней скорости передачи данных по сравнению с H.264/MPEG-4 AVC HP
	480p	720p	1080p	2160p
HEVC	52%	56%	62%	64%

В ходе субъективного сравнения производительности видео, опубликованного в мае 2014 года, JCT-VC сравнил основной профиль HEVC с профилем H.264/MPEG-4 AVC High. В сравнении использовались средние значения оценок общественного мнения, оно было проведено BBC и Университетом Западной Шотландии . Видеопоследовательности кодировались с помощью кодера HM-12.1 HEVC и кодера JM-18.5 H.264/MPEG-4 AVC. В сравнении использовался диапазон разрешений, а среднее снижение скорости передачи данных для HEVC составило 59%. Среднее снижение скорости передачи данных для HEVC составило 52% для 480p, 56% для 720p, 62% для 1080p и 64% для 4K UHD.

В ходе субъективного сравнения видеокодеков, опубликованного EPFL в августе 2014 года, кодер HM-15.0 HEVC сравнивался с кодером VP9 1.2.0–5183 и кодером JM-18.8 H.264/MPEG-4 AVC. Четыре последовательности с разрешением 4K были закодированы с пятью различными скоростями передачи данных, при этом кодеры были настроены на использование внутреннего периода в одну секунду. В сравнении, кодер HM-15.0 HEVC имел наибольшую эффективность кодирования и в среднем при том же субъективном качестве битрейт можно было снизить на 49,4% по сравнению с кодером VP9 1.2.0–5183, и его можно было снизить. на 52,6% по сравнению с кодером JM-18.8 H.264/MPEG-4 AVC.

В августе 2016 года Netflix опубликовал результаты крупномасштабного исследования, сравнивающего ведущий кодировщик HEVC с открытым исходным кодом, x265 , с ведущим кодером AVC с открытым исходным кодом, x264 и эталонным кодером VP9 , ​​libvpx. Используя свой усовершенствованный инструмент измерения качества видео Video Multimethod Assessment Fusion (VMAF), Netflix обнаружил, что x265 обеспечивает идентичное качество при скорости передачи данных в диапазоне от 35,4% до 53,3% ниже, чем x264, и от 17,8% до 21,8% ниже, чем VP9.

Особенности

HEVC был разработан для существенного повышения эффективности кодирования по сравнению с H.264/MPEG-4 AVC HP, т.е. для снижения требований к битрейту вдвое при сопоставимом качестве изображения за счет увеличения вычислительной сложности. HEVC был разработан с целью обеспечить степень сжатия видеоконтента до 1000:1. В зависимости от требований приложения кодеры HEVC могут выбирать между вычислительной сложностью, степенью сжатия, устойчивостью к ошибкам и временем задержки кодирования. Двумя ключевыми особенностями, в которых HEVC был улучшен по сравнению с H.264/MPEG-4 AVC, были поддержка видео более высокого разрешения и улучшенные методы параллельной обработки.

HEVC предназначен для HDTV-дисплеев нового поколения и систем захвата контента, которые поддерживают с прогрессивной разверткой частоту кадров и разрешение дисплея от QVGA (320×240) до 4320p (7680×4320), а также улучшенное качество изображения с точки зрения уровня шума и цвета. пробелы и динамический диапазон .

Уровень кодирования видео

Уровень кодирования видео HEVC использует тот же «гибридный» подход, который используется во всех современных видеостандартах, начиная с H.261 , поскольку он использует предсказание между/внутри изображения и кодирование 2D-преобразования. Кодер HEVC сначала разделяет изображение на области блочной формы для первого изображения или первого изображения точки произвольного доступа, которая использует внутрикадровое предсказание. Прогнозирование внутри изображения — это когда прогнозирование блоков изображения основано только на информации, содержащейся в этом изображении. Для всех остальных изображений используется межкадровое предсказание, при котором информация предсказания используется из других изображений. После завершения работы методов прогнозирования и прохождения изображения через контурные фильтры окончательное представление изображения сохраняется в буфере декодированного изображения. Изображения, хранящиеся в буфере декодированных изображений, могут использоваться для предсказания других изображений.

HEVC был разработан с идеей, что с прогрессивной разверткой будет использоваться видео , и не было добавлено никаких инструментов кодирования специально для чересстрочного видео . Специальные инструменты чересстрочного кодирования, такие как MBAFF и PAFF, не поддерживаются в HEVC. Вместо этого HEVC отправляет метаданные , сообщающие, как было отправлено чересстрочное видео. Чересстрочное видео можно отправлять либо путем кодирования каждого кадра как отдельного изображения, либо путем кодирования каждого поля как отдельного изображения. Для чересстрочного видео HEVC может переключаться между кодированием кадров и кодированием полей с помощью Sequence Adaptive Frame Field (SAFF), что позволяет изменять режим кодирования для каждой видеопоследовательности. Это позволяет отправлять чересстрочное видео с помощью HEVC без необходимости добавления специальных процессов чересстрочного декодирования в декодеры HEVC.

Цветовые пространства

Стандарт HEVC поддерживает такие цветовые пространства , как обычный фильм, NTSC , PAL , Rec. 601 , Рек. 709 , Рек. 2020 , Рек. 2100 , SMPTE 170M, SMPTE 240M, sRGB , sYCC , xvYCC , XYZ и внешние цветовые пространства. HEVC поддерживает представления кодирования цвета, такие как RGB , YCbCr и YCoCg .

Инструменты кодирования

Единица дерева кодирования

Основная статья: Единица дерева кодирования

HEVC заменяет макроблоки размером 16×16 пикселей , которые использовались в предыдущих стандартах, на единицы дерева кодирования (CTU), которые могут использовать более крупные блочные структуры, содержащие до 64×64 выборок, и могут лучше разбивать изображение на структуры переменного размера. HEVC первоначально делит изображение на CTU, которые могут иметь размеры 64×64, 32×32 или 16×16, причем больший размер блока пикселей обычно увеличивает эффективность кодирования.

Обратные преобразования

HEVC определяет четыре размера единиц преобразования (TU) 4×4, 8×8, 16×16 и 32×32 для кодирования остатка предсказания. CTB может быть рекурсивно разделен на 4 или более TU. TU используют целочисленные базисные функции, основанные на дискретном косинусном преобразовании (DCT). Кроме того, блоки преобразования яркости 4×4, которые принадлежат области внутреннего кодирования, преобразуются с использованием целочисленного преобразования, которое получается из дискретного синусоидального преобразования (DST). Это обеспечивает снижение скорости передачи данных на 1%, но было ограничено блоками преобразования яркости 4×4 из-за незначительных преимуществ для других случаев преобразования. Chroma использует те же размеры TU, что и яркость, поэтому для цветности нет преобразования 2×2.

Инструменты параллельной обработки

• Плитки позволяют разделить изображение на сетку прямоугольных областей, которые можно независимо декодировать/кодировать. Основное назначение тайлов — обеспечить параллельную обработку. Плитки могут декодироваться независимо и даже обеспечивать произвольный доступ к определенным областям изображения в видеопотоке.
• Параллельная обработка волнового фронта (WPP) — это когда срез делится на строки CTU, в которых первая строка декодируется нормально, но каждая дополнительная строка требует принятия решений в предыдущей строке. WPP использует информацию об использовании энтропийного кодировщика из предыдущей строки CTU и допускает метод параллельной обработки, который может обеспечить лучшее сжатие, чем фрагменты.
• Плитки и WPP разрешены, но не являются обязательными. Если плитки присутствуют, они должны быть не менее 64 пикселей в высоту и 256 пикселей в ширину с ограничением на количество разрешенных плиток, специфичным для уровня.
• Срезы по большей части могут декодироваться независимо друг от друга, при этом основным назначением тайлов является повторная синхронизация в случае потери данных в видеопотоке. Срезы можно определить как автономные, поскольку прогнозирование не осуществляется за пределами границ срезов. Однако при выполнении внутриконтурной фильтрации изображения может потребоваться информация о границах срезов. Срезы представляют собой CTU, декодированные в порядке растрового сканирования, и для срезов могут использоваться разные типы кодирования, такие как типы I, типы P или типы B.
• Зависимые фрагменты могут обеспечить более быстрый доступ системы к данным, связанным с фрагментами или WPP, чем если бы приходилось декодировать весь фрагмент. Основная цель зависимых фрагментов — обеспечить кодирование видео с малой задержкой благодаря меньшей задержке.

Другие инструменты кодирования

Энтропийное кодирование

HEVC использует контекстно-адаптивный алгоритм двоичного арифметического кодирования (CABAC), который по своей сути аналогичен CABAC в H.264/MPEG-4 AVC. CABAC — единственный метод статистического кодирования, разрешенный в HEVC, тогда как в H.264/MPEG-4 AVC разрешены два метода статистического кодирования. CABAC и энтропийное кодирование коэффициентов преобразования в HEVC были разработаны для более высокой пропускной способности, чем H.264/MPEG-4 AVC. сохраняя при этом более высокую эффективность сжатия для блоков преобразования большего размера по сравнению с простыми расширениями. Например, количество ячеек с контекстным кодированием было уменьшено в 8 раз, а режим обхода CABAC был улучшен с точки зрения его конструкции для увеличения пропускной способности. Еще одно улучшение HEVC заключается в том, что зависимости между закодированными данными были изменены для дальнейшего увеличения пропускной способности. Моделирование контекста в HEVC также было улучшено, так что CABAC может лучше выбирать контекст, который повышает эффективность по сравнению с H.264/MPEG-4 AVC.

Внутреннее предсказание

HEVC имеет 33 режима внутреннего прогнозирования.

HEVC определяет 33 направленных режима для внутреннего предсказания по сравнению с 8 направленными режимами для внутреннего предсказания, указанными в H.264/MPEG-4 AVC. HEVC также определяет режимы внутреннего предсказания постоянного тока и плоского предсказания. Режим внутреннего прогнозирования постоянного тока генерирует среднее значение путем усреднения эталонных выборок и может использоваться для плоских поверхностей. Режим планарного прогнозирования в HEVC поддерживает все размеры блоков, определенные в HEVC, тогда как режим планарного прогнозирования в H.264/MPEG-4 AVC ограничен размером блока 16×16 пикселей. Режимы внутреннего предсказания используют данные из соседних блоков предсказания, которые были ранее декодированы из одного и того же изображения.

Компенсация движения

Для интерполяции позиций дробных выборок яркости HEVC использует отдельное применение одномерной интерполяции половинной выборки с 8-отводным фильтром или интерполяции четверти выборки с 7-отводным фильтром, в то время как, для сравнения, H.264/MPEG-4 AVC использует двухэтапный процесс, который сначала выводит значения в позициях полувыборки с использованием разделимой одномерной 6-точечной интерполяции с последующим целочисленным округлением, а затем применяет линейную интерполяцию между значениями в соседних позициях полувыборки для генерации значений в позициях четверти выборки. HEVC имеет повышенную точность благодаря более длинному фильтру интерполяции и устранению промежуточной ошибки округления. Для видео 4:2:0 образцы цветности интерполируются с помощью разделяемой одномерной 4-кратной фильтрации для получения точности до восьмой выборки, в то время как для сравнения H.264/MPEG-4 AVC использует только 2-кратный билинейный фильтр (также с точностью до восьмой выборки).

Как и в H.264/MPEG-4 AVC, взвешенное прогнозирование в HEVC может использоваться либо с однопрогнозированием (при котором используется одно значение прогнозирования), либо с двойным прогнозированием (при котором значения прогнозирования из двух блоков прогнозирования объединяются). .

движения

HEVC определяет 16-битный диапазон со знаком как для горизонтальных, так и для вертикальных векторов движения (MV). Это было добавлено в HEVC на встрече HEVC в июле 2012 года с переменными mvLX. Горизонтальные/вертикальные MV HEVC имеют диапазон от -32768 до 32767, что, учитывая точность в четверть пикселя, используемую HEVC, позволяет использовать диапазон MV от -8192 до 8191,75 выборок яркости. Это можно сравнить с H.264/MPEG-4 AVC, который допускает диапазон MV по горизонтали от -2048 до 2047,75 выборок яркости и диапазон MV по вертикали от -512 до 511,75 выборок яркости.

HEVC допускает два режима MV: расширенное прогнозирование вектора движения (AMVP) и режим слияния. AMVP использует данные из опорного изображения, а также может использовать данные из соседних блоков предсказания. Режим слияния позволяет наследовать MV от соседних блоков прогнозирования. Режим слияния в HEVC аналогичен режимам «пропущенного» и «прямого» вывода движения в H.264/MPEG-4 AVC, но с двумя улучшениями. Первое улучшение заключается в том, что HEVC использует индексную информацию для выбора одного из нескольких доступных кандидатов. Второе улучшение заключается в том, что HEVC использует информацию из списка опорных изображений и индекса опорных изображений.

Петлевые фильтры

HEVC определяет два контурных фильтра, которые применяются последовательно: сначала применяется фильтр деблокирования (DBF), а затем фильтр адаптивного смещения выборки (SAO). Оба контурных фильтра применяются в цикле межкадрового предсказания, т.е. отфильтрованное изображение сохраняется в буфере декодированного изображения (DPB) в качестве эталона для межкадрового предсказания.

Разблокирующий фильтр

DBF аналогичен тому, который используется в H.264/MPEG-4 AVC, но имеет более простую конструкцию и лучшую поддержку параллельной обработки. В HEVC DBF применяется только к сетке выборки 8×8, тогда как в H.264/MPEG-4 AVC DBF применяется к сетке выборки 4×4. DBF использует сетку выборки 8×8, поскольку она не вызывает заметного ухудшения качества и значительно улучшает параллельную обработку, поскольку DBF больше не вызывает каскадных взаимодействий с другими операциями. Еще одно изменение заключается в том, что HEVC допускает только три уровня DBF от 0 до 2. HEVC также требует, чтобы DBF сначала применял горизонтальную фильтрацию для вертикальных краев к изображению и только после этого применял вертикальную фильтрацию для горизонтальных краев к изображению. Это позволяет использовать несколько параллельных потоков для DBF.

Пример адаптивного смещения

Фильтр SAO применяется после DBF и предназначен для лучшего восстановления амплитуд исходного сигнала путем применения смещений, хранящихся в справочной таблице в битовом потоке. В соответствии с CTB фильтр SAO можно отключить или применить в одном из двух режимов: режим смещения края или режим смещения полосы. Режим смещения края работает путем сравнения значения выборки с двумя из восьми соседей, используя одну из четырех диаграмм направленного градиента. На основе сравнения с этими двумя соседями выборка классифицируется по одной из пяти категорий: минимальная, максимальная, граница с выборкой, имеющей более низкое значение, граница с выборкой, имеющей более высокое значение, или монотонная. Для каждой из первых четырех категорий применяется смещение. Режим смещения полосы применяет смещение, основанное на амплитуде одной выборки. Выборка классифицируется по амплитуде в одну из 32 полос ( ячейки гистограммы ). Смещения указаны для четырех последовательных из 32 полос, поскольку на плоских участках, склонных к появлению артефактов в виде полос, амплитуды выборок имеют тенденцию группироваться в небольшом диапазоне. Фильтр SAO был разработан для повышения качества изображения, уменьшения артефактов полос и помех .

Расширения диапазона

Расширения диапазона в MPEG — это дополнительные профили, уровни и методы, которые удовлетворяют потребности, выходящие за рамки потребительского воспроизведения видео:

• Профили, поддерживающие разрядность выше 10 и различную разрядность яркости / цветности .
• Внутренние профили для случаев, когда размер файла гораздо менее важен, чем скорость декодирования с произвольным доступом.
• Профили неподвижных изображений, составляющие основу высокоэффективного формата файлов изображений , без каких-либо ограничений на размер или сложность изображения (уровень 8.5). В отличие от всех других уровней, минимальная мощность декодера не требуется, а только максимально возможный вариант с разумным запасом хода.

В этих новых профилях появились расширенные функции кодирования, многие из которых поддерживают эффективное кодирование экрана или высокоскоростную обработку:

• Постоянная адаптация Райса, общая оптимизация энтропийного кодирования.
• с более высокой точностью Взвешенное предсказание и большой битовой глубиной.
• Межкомпонентное прогнозирование, позволяющее несовершенной цветовой декорреляции YCbCr , позволяющей сопоставлению яркости (или G) устанавливать прогнозируемые совпадения цветности (или R/B), что приводит к выигрышу до 7% для YCbCr 4:4:4 и до 26% для видео RGB. Особенно полезно для кодирования экрана.
• Управление внутренним сглаживанием, позволяющее кодировщику включать и выключать сглаживание для каждого блока, а не для каждого кадра.
• Модификации пропуска преобразования:
  • Остаточный DPCM (RDPCM), позволяющий, если возможно, более оптимально кодировать остаточные данные по сравнению с типичным зигзагообразным кодированием.
  • Гибкость размера блока, поддержка размеров блоков до 32×32 (по сравнению с поддержкой пропуска преобразования только 4×4 в версии 1).
  • Вращение 4×4 для потенциальной эффективности.
  • Преобразуйте контекст пропуска, позволяя блокам DCT и RDPCM переносить отдельный контекст.
• Повышенная точность обработки, обеспечивающая немного более точное декодирование видео с низкой разрядностью.
• Выравнивание обхода CABAC, оптимизация декодирования, специфичная для профиля High Throughput 4:4:4 16 Intra.

HEVC версии 2 добавляет несколько сообщений дополнительной информации о расширении (SEI):

• Переназначение цвета: сопоставление одного цветового пространства с другим.
• Функция Knee: подсказки по преобразованию динамических диапазонов, в частности, из HDR в SDR.
• Освоение цветового объема дисплея
• Временной код для архивных целей

Расширения кодирования содержимого экрана

Дополнительные параметры инструмента кодирования были добавлены в проект расширений кодирования содержимого экрана (SCC) за март 2016 г.:

• Адаптивное преобразование цвета.
• Адаптивное разрешение вектора движения.
• Внутриблочное копирование.
• Режим палитры.

Версия стандарта ITU-T, в которую добавлены расширения SCC (утверждена в декабре 2016 года и опубликована в марте 2017 года), добавлена ​​поддержка функции передачи гибридной логарифмической гаммы (HLG) и цветовой матрицы ICtCp . Это позволяет четвертой версии HEVC поддерживать обе функции передачи HDR, определенные в Рек. 2100 .

Четвертая версия HEVC добавляет несколько сообщений дополнительной информации расширения (SEI), которые включают в себя:

• Информационное сообщение SEI об альтернативных характеристиках передачи предоставляет информацию о предпочтительной функции передачи для использования. Основным вариантом использования этого будет доставка видео HLG способом, обеспечивающим обратную совместимость с устаревшими устройствами.
• Сообщение SEI об окружающей среде просмотра предоставляет информацию об окружающем освещении среды просмотра, которая использовалась для создания видео.

Профили

Поддержка функций в некоторых профилях видео.

Особенность	Версия 1		Версия 2
	Основной	Главная 10	Главная 12	Основной 4:2:2 10	Основной 4:2:2 12	Основной 4:4:4	Основной 4:4:4 10	Основной 4:4:4 12	Основной 4:4:4 16 Внутри
Разрядность	8	с 8 до 10	с 8 до 12	с 8 до 10	с 8 до 12	8	с 8 до 10	с 8 до 12	с 8 до 16
выборки цветности Форматы	4:2:0	4:2:0	4:2:0	4:2:0/ 4:2:2	4:2:0/ 4:2:2	4:2:0/ 4:2:2/ 4:4:4	4:2:0/ 4:2:2/ 4:4:4	4:2:0/ 4:2:2/ 4:4:4	4:2:0/ 4:2:2/ 4:4:4
4:0:0 ( Монохромный )	Нет	Нет	Да	Да	Да	Да	Да	Да	Да
Высокоточный взвешенный прогноз	Нет	Нет	Да	Да	Да	Да	Да	Да	Да
Список смещений Chroma QP	Нет	Нет	Да	Да	Да	Да	Да	Да	Да
Межкомпонентное прогнозирование	Нет	Нет	Нет	Нет	Нет	Да	Да	Да	Да
Отключение внутреннего сглаживания	Нет	Нет	Нет	Нет	Нет	Да	Да	Да	Да
Адаптация стойкого риса	Нет	Нет	Нет	Нет	Нет	Да	Да	Да	Да
RDPCM неявный/явный	Нет	Нет	Нет	Нет	Нет	Да	Да	Да	Да
Преобразование блоков пропуска размером более 4×4.	Нет	Нет	Нет	Нет	Нет	Да	Да	Да	Да
Преобразование пропуска контекста/поворота	Нет	Нет	Нет	Нет	Нет	Да	Да	Да	Да
Повышенная точность обработки	Нет	Нет	Нет	Нет	Нет	Нет	Нет	Нет	Да

Версия 1 стандарта HEVC определяет три профиля: Main , Main 10 и Main Still Picture . Версия 2 HEVC добавляет 21 профиль расширения диапазона, два профиля масштабируемых расширений и один профиль с несколькими представлениями. HEVC также содержит положения для дополнительных профилей. Расширения, добавленные в HEVC, включают увеличенную разрядность 4:2:2/4:4:4 , выборку цветности , многовидовое видеокодирование (MVC) и масштабируемое видеокодирование (SVC). Расширения диапазона HEVC, масштабируемые расширения HEVC и многопросмотровые расширения HEVC были завершены в июле 2014 года. В июле 2014 года был выпущен черновой вариант второй версии HEVC. Расширения кодирования содержимого экрана (SCC) находились в стадии разработки для видео с содержимым экрана, которое содержит текст и графику, окончательный вариант проекта ожидается в 2015 году.

Профиль — это определенный набор инструментов кодирования, который можно использовать для создания битового потока, соответствующего этому профилю. Кодер профиля может выбирать, какие инструменты кодирования использовать, при условии, что он генерирует соответствующий поток битов, тогда как декодер профиля должен поддерживать все инструменты кодирования, которые могут использоваться в этом профиле.

Профили версии 1

Главное

Основной профиль допускает битовую глубину 8 бит на семпл с сэмплированием цветности 4:2:0, который является наиболее распространенным типом видео, используемым в потребительских устройствах.

Основная 10

Главная 10 ( Main10) профиль был добавлен на совещании HEVC в октябре 2012 года на основе предложения JCTVC-K0109, в котором предлагалось добавить 10-битный профиль в HEVC для потребительских приложений. В предложении говорилось, что это позволит улучшить качество видео и поддержать Rec. 2020 , которое стало широко использоваться в системах UHDTV и обеспечивает более широкий динамический диапазон и точность цветопередачи, избегая артефактов полос. Предложение поддержали различные компании, в том числе Ateme , BBC , BSkyB , Cisco , DirecTV , Ericsson , Motorola Mobility , NGCodec, NHK , RAI , ST, SVT , Thomson Video Networks , Technicolor и ViXS Systems . Профиль Main 10 допускает разрядность от 8 до 10 бит на семпл с семплированием цветности 4:2:0. Декодеры HEVC, соответствующие профилю Main 10, должны быть способны декодировать потоки битов, созданные с помощью следующих профилей: Main и Main 10. Более высокая разрядность позволяет использовать большее количество цветов. 8 бит на образец позволяют получить 256 оттенков основного цвета (всего 16,78 миллиона цветов), а 10 бит на образец позволяют получить 1024 оттенка основного цвета (всего 1,07 миллиарда цветов). Более высокая разрядность обеспечивает более плавный переход цвета, что решает проблему, известную как цветовые полосы .

Профиль Main 10 позволяет улучшить качество видео, поскольку он может поддерживать видео с более высокой битовой глубиной, чем то, что поддерживается основным профилем. Кроме того, в профиле «Основной 10» 8-битное видео можно кодировать с большей разрядностью в 10 бит, что позволяет повысить эффективность кодирования по сравнению с профилем «Основной».

В компании Ericsson заявили, что профиль Main 10 принесет потребительскому телевидению преимущества 10 бит на выборку видео. Они также заявили, что для более высоких разрешений нет штрафа за скорость передачи данных при кодировании видео со скоростью 10 бит на выборку. Imagination Technologies заявила, что 10-битное видео на выборку позволит использовать большее цветовое пространство и требуется для Rec. Цветовое пространство 2020 года , которое будет использоваться UHDTV. Они также сказали, что Rec. Цветовое пространство 2020 года будет способствовать широкому распространению 10-битного видео.

В сравнении производительности на основе PSNR, опубликованном в апреле 2013 года, профиль Main 10 сравнивался с основным профилем с использованием набора 10-битных видеопоследовательностей 3840 × 2160. 10-битные видеопоследовательности были преобразованы в 8 бит для профиля Main и остались на уровне 10 бит для профиля Main 10. Эталонный PSNR был основан на исходных 10-битных видеопоследовательностях. При сравнении производительности профиль Main 10 обеспечил снижение скорости передачи данных для межкадрового видеокодирования на 5% по сравнению с профилем Main. Сравнение производительности показывает, что для протестированных видеопоследовательностей профиль Main 10 превзошел профиль Main.

Основное неподвижное изображение

Сравнение стандартов сжатия неподвижных изображений на основе равных PSNR и MOS.

Неподвижное изображение стандарт кодирования (метод испытания)	Средняя скорость передачи данных сокращение по сравнению с
	JPEG 2000	JPEG
HEVC (ПСНР)	20%	62%
HEVC (МОС)	31%	43%

Основной кадр ( MainStillPicture) позволяет кодировать одно неподвижное изображение с теми же ограничениями, что и основной профиль. В качестве подмножества основного профиля профиль основного неподвижного изображения допускает битовую глубину 8 бит на семпл с семплированием цветности 4:2:0. Объективное сравнение производительности было проведено в апреле 2012 года, в ходе которого HEVC снизил среднюю скорость передачи данных для изображений на 56% по сравнению с JPEG . Сравнение производительности сжатия неподвижных изображений на основе PSNR было проведено в мае 2012 года с использованием кодера HEVC HM 6.0 и эталонных программных кодеров для других стандартов. Для неподвижных изображений HEVC снизил среднюю скорость передачи данных на 15,8% по сравнению с H.264/MPEG-4 AVC, на 22,6% по сравнению с JPEG 2000 , на 30,0% по сравнению с JPEG XR , на 31,0% по сравнению с WebP и на 43,0% по сравнению с JPEG.

Сравнение производительности сжатия неподвижных изображений было проведено в январе 2013 года с использованием кодера HEVC HM 8.0rc2, Kakadu версии 6.0 для JPEG 2000 и IJG версии 6b для JPEG. При сравнении производительности использовался PSNR для объективной оценки и значения среднего балла мнения (MOS) для субъективной оценки. При субъективной оценке использовалась та же методология тестирования и изображения, что и комитет JPEG при оценке JPEG XR. Для изображений с цветовой выборкой 4:2:0 среднее снижение скорости передачи данных для HEVC по сравнению с JPEG 2000 составило 20,26% для PSNR и 30,96% для MOS, тогда как по сравнению с JPEG оно составило 61,63% для PSNR и 43,10% для MOS.

Сравнение производительности HEVC для сжатия неподвижных изображений на основе PSNR было проведено компанией Nokia в апреле 2013 года . HEVC имеет большее улучшение производительности для изображений с более высоким разрешением, чем для изображений с более низким разрешением, и большее улучшение производительности для более низких скоростей передачи данных, чем для изображений с более высокими скоростями передачи данных. Для сжатия с потерями для получения того же PSNR, что и у HEVC, потребовалось в среднем в 1,4 раза больше битов для JPEG 2000, в 1,6 раза больше битов для JPEG-XR и в 2,3 раза больше битов для JPEG.

Исследование эффективности сжатия HEVC, JPEG, JPEG XR и WebP было проведено в октябре 2013 года компанией Mozilla . Исследование показало, что HEVC значительно лучше сжимает, чем другие протестированные форматы изображений. В исследовании использовались четыре различных метода сравнения качества изображения: Y-SSIM, RGB-SSIM, IW-SSIM и PSNR-HVS-M.

Профили версии 2

Версия 2 HEVC добавляет 21 профиль расширения диапазона, два профиля масштабируемых расширений и один профиль с несколькими представлениями: монохромный , монохромный 12 , монохромный 16 , основной 12 , основной 4:2:2 10 , основной 4:2:2 12 , основной. 4:4:4 , Основной 4:4:4 10 , Основной 4:4:4 12 , Монохромный 12 Внутри , Монохромный 16 Внутри , Основной 12 Внутри , Основной 4:2:2 10 Внутри , Основной 4:2:2 12 Внутренний , Основной 4:4:4 Внутренний , Основной 4:4:4 10 Внутренний , Основной 4:4:4 12 Внутренний , Основной 4:4:4 16 Внутренний , Основной 4:4:4 Фото , Основной 4:4 :4 16 Неподвижное изображение , Высокая пропускная способность 4:4:4 16 Внутренний , Масштабируемый главный , Масштабируемый главный 10 и Многопросмотровый главный . Все профили расширения межкадрового диапазона имеют профиль Intra.

Монохромный

Профиль Monochrome допускает битовую глубину 8 бит на семпл с поддержкой сэмплирования цветности 4:0:0.

Монохромный 12

Профиль Monochrome 12 обеспечивает разрядность от 8 до 12 бит на семпл с поддержкой семплирования цветности 4:0:0.

Монохромный 16

Профиль Monochrome 16 обеспечивает разрядность от 8 до 16 бит на семпл с поддержкой семплирования цветности 4:0:0. Декодеры HEVC, соответствующие профилю Monochrome 16, должны быть способны декодировать потоки битов, созданные с помощью следующих профилей: Monochrome, Monochrome 12 и Monochrome 16.

Главная 12

Профиль Main 12 допускает разрядность от 8 до 12 бит на семпл с поддержкой семплирования цветности 4:0:0 и 4:2:0. Декодеры HEVC, соответствующие профилю Main 12, должны быть способны декодировать потоки битов, созданные со следующими профилями: Monochrome, Monochrome 12, Main, Main 10 и Main 12.

Основной 4:2:2 10

Профиль Main 4:2:2 10 допускает разрядность от 8 до 10 бит на семпл с поддержкой семплирования цветности 4:0:0, 4:2:0 и 4:2:2. Декодеры HEVC, соответствующие профилю Main 4:2:2 10, должны быть способны декодировать потоки битов, созданные со следующими профилями: Monochrome, Main, Main 10 и Main 4:2:2 10.

Основной 4:2:2 12

Профиль Main 4:2:2 12 допускает разрядность от 8 до 12 бит на семпл с поддержкой семплирования цветности 4:0:0, 4:2:0 и 4:2:2. Декодеры HEVC, соответствующие профилю Main 4:2:2 12, должны быть способны декодировать потоки битов, созданные со следующими профилями: Monochrome, Monochrome 12, Main, Main 10, Main 12, Main 4:2:2 10 и Main 4. :2:2 12.

Основной 4:4:4

Профиль Main 4:4:4 допускает разрядность 8 бит на семпл с поддержкой семплирования цветности 4:0:0, 4:2:0, 4:2:2 и 4:4:4. Декодеры HEVC, соответствующие основному профилю 4:4:4, должны быть способны декодировать потоки битов, созданные с помощью следующих профилей: монохромный, основной и основной 4:4:4.

Основной 4:4:4 10

Профиль Main 4:4:4 10 допускает разрядность от 8 до 10 бит на семпл с поддержкой цветности 4:0:0, 4:2:0, 4:2:2 и 4:4:4. выборка. Декодеры HEVC, соответствующие профилю Main 4:4:4 10, должны быть способны декодировать потоки битов, созданные со следующими профилями: Monochrome, Main, Main 10, Main 4:2:2 10, Main 4:4:4 и Main. 4:4:4 10.

Основной 4:4:4 12

Профиль Main 4:4:4 12 обеспечивает разрядность от 8 до 12 бит на семпл с поддержкой цветности 4:0:0, 4:2:0, 4:2:2 и 4:4:4. выборка. Декодеры HEVC, соответствующие профилю Main 4:4:4 12, должны быть способны декодировать потоки битов, созданные со следующими профилями: Monochrome, Main, Main 10, Main 12, Main 4:2:2 10, Main 4:2:2. 12, Основной 4:4:4, Основной 4:4:4 10, Основной 4:4:4 12 и Монохромный 12.

Основной 4:4:4 16 Интра

Профиль Main 4:4:4 16 Intra допускает разрядность от 8 до 16 бит на выборку с поддержкой 4:0:0, 4:2:0, 4:2:2 и 4:4:4. выборка цветности. Декодеры HEVC, соответствующие основному профилю 4:4:4 16 Intra, должны быть способны декодировать битовые потоки, созданные со следующими профилями: Monochrome Intra, Monochrome 12 Intra, Monochrome 16 Intra, Main Intra, Main 10 Intra, Main 12 Intra, Main 4:2:2 10 Внутри, Основная 4:2:2 12 Внутри, Основная 4:4:4 Внутри, Основная 4:4:4 10 Внутри и Основная 4:4:4 12 Внутри.

Высокая пропускная способность 4:4:4 16 Внутри

Профиль High Throughput 4:4:4 16 Intra обеспечивает разрядность от 8 до 16 бит на выборку с поддержкой форматов 4:0:0, 4:2:0, 4:2:2 и 4:4: 4 выборки цветности. Профиль High Throughput 4:4:4 16 Intra имеет HbrFactor В 12 раз выше, чем у других профилей HEVC, что позволяет ему иметь максимальную скорость передачи данных в 12 раз выше, чем у основного профиля 4:4:4 16 Intra. Профиль High Throughput 4:4:4 16 Intra предназначен для создания высококачественного профессионального контента, и декодеры для этого профиля не требуются для поддержки других профилей.

Основное фото 4:4:4

Профиль основного неподвижного изображения 4:4:4 позволяет кодировать одно неподвижное изображение с теми же ограничениями, что и основной профиль 4:4:4. Являясь подмножеством профиля Main 4:4:4, профиль Main 4:4:4 Still Picture обеспечивает битовую глубину 8 бит на сэмпл с поддержкой 4:0:0, 4:2:0, 4: Выборка цветности 2:2 и 4:4:4.

Основной 4:4:4 16 Неподвижное изображение

См. также: Улучшенная портативная графика

Профиль Main 4:4:4 16 Still Picture позволяет кодировать одно неподвижное изображение с теми же ограничениями, что и профиль Main 4:4:4 16 Intra. В качестве подмножества профиля Main 4:4:4 16 Intra профиль Main 4:4:4 16 Still Picture допускает разрядность от 8 до 16 бит на семпл с поддержкой 4:0:0, 4: Выборка цветности 2:0, 4:2:2 и 4:4:4.

Масштабируемая основная

Масштабируемый основной профиль позволяет использовать базовый уровень, соответствующий основному профилю HEVC.

Масштабируемая основная 10

Профиль Scalable Main 10 позволяет использовать базовый уровень, соответствующий профилю Main 10 HEVC.

Мультипросмотр Главный

Основной профиль Multiview позволяет использовать базовый уровень, соответствующий основному профилю HEVC.

Профили версии 3 и выше

В версии 3 HEVC добавлен один 3D-профиль: 3D Main . В проект расширений кодирования содержимого экрана от февраля 2016 года добавлены семь профилей расширений кодирования содержимого экрана, три профиля расширений с высокой пропускной способностью и четыре профиля масштабируемых расширений: Screen-Extended Main , Screen-Extended Main 10 , Screen-Extended Main 4:4:4. , Основной экран с расширением 4:4:4 10 , Расширенный экран с высокой пропускной способностью 4:4:4 , Расширенный экран с высокой пропускной способностью 4:4:4 10 , Расширенный экран с высокой пропускной способностью 4:4:4 14 , Высокая пропускная способность 4 :4:4 , Высокая пропускная способность 4:4:4 10 , Высокая пропускная способность 4:4:4 14 , Масштабируемый монохромный , Масштабируемый монохромный 12 , Масштабируемый монохромный 16 и Масштабируемый основной 4:4:4 .

3D Главное

Основной профиль 3D позволяет использовать базовый слой, соответствующий основному профилю HEVC.

Расширенная экранная главная

Основной профиль Screen-Extended Main допускает битовую глубину 8 бит на семпл с поддержкой сэмплирования цветности 4:0:0 и 4:2:0. Декодеры HEVC, соответствующие основному профилю Screen-Extended Main, должны быть способны декодировать потоки битов, созданные с помощью следующих профилей: Monochrome, Main и Screen-Extended Main.

Расширенная экранная главная 10

Профиль Screen-Extended Main 10 допускает разрядность от 8 до 10 бит на семпл с поддержкой семплирования цветности 4:0:0 и 4:2:0. Декодеры HEVC, соответствующие профилю Screen-Extended Main 10, должны быть способны декодировать битовые потоки, созданные с помощью следующих профилей: Monochrome, Main, Main 10, Screen-Extended Main и Screen-Extended Main 10.

Расширенный экран: основной 4:4:4

Профиль Screen-Extended Main 4:4:4 допускает разрядность 8 бит на семпл с поддержкой выборки цветности 4:0:0, 4:2:0, 4:2:2 и 4:4:4. . Декодеры HEVC, соответствующие основному профилю Screen-Extended Main 4:4:4, должны быть способны декодировать битовые потоки, созданные со следующими профилями: Monochrome, Main, Main 4:4:4, Screen-Extended Main и Screen-Extended Main 4. :4:4.

Расширенный экран Основной 4:4:4 10

Профиль Screen-Extended Main 4:4:4 10 допускает разрядность от 8 до 10 бит на выборку с поддержкой форматов 4:0:0, 4:2:0, 4:2:2 и 4:4. :4 выборка цветности. Декодеры HEVC, соответствующие профилю Screen-Extended Main 4:4:4 10, должны быть способны декодировать битовые потоки, созданные со следующими профилями: Monochrome, Main, Main 10, Main 4:2:2 10, Main 4:4:4. , Основной 4:4:4 10, Расширенный экранный основной, Расширенный экранный основной 10, Расширенный экранный основной 4:4:4 и Расширенный экранный основной 4:4:4 10.

Высокая пропускная способность с расширенным экраном 4:4:4

Профиль Screen-Extended High Throughput 4:4:4 обеспечивает битовую глубину 8 бит на сэмпл с поддержкой цветности 4:0:0, 4:2:0, 4:2:2 и 4:4:4. выборка. Профиль Screen-Extended High Throughput 4:4:4 имеет HbrFactor в 6 раз выше, чем у большинства межкадровых профилей HEVC, что позволяет ему иметь максимальную скорость передачи данных в 6 раз выше, чем у основного профиля 4:4:4. Декодеры HEVC, соответствующие профилю Screen-Extended High Throughput 4:4:4, должны быть способны декодировать битовые потоки, созданные со следующими профилями: Monochrome, Main, Main 4:4:4, Screen-Extended Main, Screen-Extended Main 4. :4:4, высокая пропускная способность с расширенным экраном 4:4:4 и высокая пропускная способность 4:4:4.

Высокая пропускная способность с расширенным экраном 4:4:4 10

Профиль Screen-Extended High Throughput 4:4:4 10 обеспечивает разрядность от 8 до 10 бит на выборку с поддержкой 4:0:0, 4:2:0, 4:2:2 и 4: Выборка цветности 4:4. Профиль Screen-Extended High Throughput 4:4:4 10 имеет HbrFactor в 6 раз выше, чем у большинства межкадровых профилей HEVC, что позволяет ему иметь максимальную скорость передачи данных в 6 раз выше, чем у основного профиля 4:4:4 10. Декодеры HEVC, соответствующие профилю Screen-Extended High Throughput 4:4:4 10, должны быть способны декодировать потоки битов, созданные со следующими профилями: Монохромный, Основной, Основной 10, Основной 4:2:2 10, Основной 4:4: 4, основной 4:4:4 10, основной экран, расширенный экран 10, основной экран, расширенный 4:4:4, основной экран, расширенный 4:4:4 10, расширенный экран, высокая пропускная способность 4:4 :4, расширенный экран, высокая пропускная способность 4:4:4 10, высокая пропускная способность 4:4:4 и высокая пропускная способность 4:4:4.

Высокая пропускная способность с расширенным экраном 4:4:4 14

Профиль Screen-Extended High Throughput 4:4:4 14 допускает разрядность от 8 до 14 бит на выборку с поддержкой 4:0:0, 4:2:0, 4:2:2 и 4: Выборка цветности 4:4. Профиль Screen-Extended High Throughput 4:4:4 14 имеет HbrFactor в 6 раз выше, чем большинство межкадровых профилей HEVC. Декодеры HEVC, соответствующие профилю Screen-Extended High Throughput 4:4:4 14, должны быть способны декодировать потоки битов, созданные со следующими профилями: Монохромный, Основной, Основной 10, Основной 4:2:2 10, Основной 4:4: 4, основной 4:4:4 10, основной экран, расширенный экран 10, основной экран, расширенный 4:4:4, основной экран, расширенный 4:4:4 10, расширенный экран, высокая пропускная способность 4:4 :4, высокая пропускная способность с расширенным экраном 4:4:4 10, высокая пропускная способность с расширенным экраном 4:4:4 14, высокая пропускная способность 4:4:4, высокая пропускная способность 4:4:4 10 и высокая пропускная способность 4:4 :4 14.

Высокая пропускная способность 4:4:4

Профиль High Throughput 4:4:4 обеспечивает разрядность 8 бит на семпл с поддержкой семплирования цветности 4:0:0, 4:2:0, 4:2:2 и 4:4:4. Профиль High Throughput 4:4:4 имеет HbrFactor в 6 раз выше, чем у большинства межкадровых профилей HEVC, что позволяет ему иметь максимальную скорость передачи данных в 6 раз выше, чем у основного профиля 4:4:4. Декодеры HEVC, соответствующие профилю высокой пропускной способности 4:4:4, должны быть способны декодировать потоки битов, созданные с помощью следующих профилей: Высокая пропускная способность 4:4:4.

Высокая пропускная способность 4:4:4 10

Профиль High Throughput 4:4:4 10 обеспечивает разрядность от 8 до 10 бит на выборку с поддержкой 4:0:0, 4:2:0, 4:2:2 и 4:4:4. выборка цветности. Профиль High Throughput 4:4:4 10 имеет HbrFactor в 6 раз выше, чем у большинства межкадровых профилей HEVC, что позволяет ему иметь максимальную скорость передачи данных в 6 раз выше, чем у основного профиля 4:4:4 10. Декодеры HEVC, соответствующие профилю High Throughput 4:4:4 10, должны быть способны декодировать потоки битов, созданные со следующими профилями: High Throughput 4:4:4 и High Throughput 4:4:4 10.

Высокая пропускная способность 4:4:4 14

Профиль High Throughput 4:4:4 14 обеспечивает разрядность от 8 до 14 бит на выборку с поддержкой форматов 4:0:0, 4:2:0, 4:2:2 и 4:4:4. выборка цветности. Профиль High Throughput 4:4:4 14 имеет HbrFactor в 6 раз выше, чем большинство межкадровых профилей HEVC. Декодеры HEVC, соответствующие профилю High Throughput 4:4:4 14, должны быть способны декодировать потоки битов, созданные со следующими профилями: High Throughput 4:4:4, High Throughput 4:4:4 10 и High Throughput 4:4. :4 14.

Масштабируемый монохромный

Профиль «Масштабируемый монохромный» позволяет использовать базовый слой, соответствующий профилю «Монохромный» HEVC.

Масштабируемый монохромный 12

Профиль Scalable Monochrome 12 позволяет использовать базовый слой, соответствующий профилю Monochrome 12 HEVC.

Масштабируемый монохромный 16

Профиль Scalable Monochrome 16 позволяет использовать базовый слой, соответствующий профилю Monochrome 16 HEVC.

Масштабируемая основная 4:4:4

Масштабируемый основной профиль 4:4:4 позволяет использовать базовый уровень, соответствующий основному профилю 4:4:4 HEVC.

Уровни и уровни

Основная статья: Уровни и уровни высокоэффективного видеокодирования

Стандарт HEVC определяет два уровня: основной и высокий, а также тринадцать уровней. Уровень — это набор ограничений для битового потока. Для уровней ниже уровня 4 разрешен только основной уровень. Основной уровень является более низким уровнем, чем Высокий уровень. Эти уровни были созданы для работы с приложениями, которые различаются максимальной скоростью передачи данных. Уровень Main был разработан для большинства приложений, а уровень High — для очень ресурсоемких приложений. Декодер, соответствующий данному ярусу/уровню, должен быть способен декодировать все потоки битов, которые закодированы для этого яруса/уровня и для всех нижних ярусов/уровней.

Ярусы и уровни с максимальными значениями свойств

Уровень	Максимальная частота дискретизации яркости (образцов/ов)	Максимальный размер изображения яркости (образцы)	Максимальная скорость передачи данных для основного и Основные 10 профилей (кбит/с) [А]		Пример разрешения изображения @ самая высокая частота кадров [Б] (МаксДпбСизе [С] ) Больше/меньше примеров
			Основной уровень	Высокий уровень
1	552,960	36,864	128	–	128× [адрес электронной почты защищен] (6) 176×144@15 (6)
2	3,686,400	122,880	1,500	–	176×144@100 (16) 352×288@30 (6)
2.1	7,372,800	245,760	3,000	–	352×288@60 (12) 640×360@30 (6)
3	16,588,800	552,960	6,000	–	640× [электронная почта защищена] (12) 720× [электронная почта защищена] (8) 960×540@30 (6)
3.1	33,177,600	983,040	10,000	–	720×576@75 (12) 960×540@60 (8) 1280× [электронная почта защищена] (6)
4	66,846,720	2,228,224	12,000	30,000	1,280×720@68 (12) 1,920×1,080@32 (6) 2048×1, [электронная почта защищена] (6)
4.1	133,693,440		20,000	50,000	1,280×720@136 (12) 1,920×1,080@64 (6) 2,048×1,080@60 (6)
5	267,386,880	8,912,896	25,000	100,000	1,920×1,080@128 (16) 3,840×2,160@32 (6) 4,096×2,160@30 (6)
5.1	534,773,760		40,000	160,000	1,920×1,080@256 (16) 3,840×2,160@64 (6) 4,096×2,160@60 (6)
5.2	1,069,547,520		60,000	240,000	1,920×1,080@300 (16) 3,840×2,160@128 (6) 4,096×2,160@120 (6)
6	1,069,547,520	35,651,584	60,000	240,000	3,840×2,160@128 (16) 7,680×4,320@32 (6) 8,192×4,320@30 (6)
6.1	2,139,095,040		120,000	480,000	3,840×2,160@256 (16) 7,680×4,320@64 (6) 8,192×4,320@60 (6)
6.2	4,278,190,080		240,000	800,000	3,840×2,160@300 (16) 7,680×4,320@128 (6) 8,192×4,320@120 (6)

^А Максимальная скорость передачи данных профиля основана на сочетании глубины цвета, выборки цветности и типа профиля. Что касается разрядности, максимальная скорость передачи данных увеличивается в 1,5 раза для 12-битных профилей и в 2 раза для 16-битных профилей. Для выборки цветности максимальная скорость передачи данных увеличивается в 1,5 раза для профилей 4:2:2 и в 2 раза для профилей 4:4:4. Для профилей Intra максимальная скорость передачи данных увеличивается в 2 раза.

^Б Максимальная частота кадров, поддерживаемая HEVC, составляет 300 кадров в секунду.

^С MaxDpbSize — это максимальное количество изображений в буфере декодированных изображений.

Буфер декодированного изображения

Ранее декодированные изображения сохраняются в буфере декодированных изображений (DPB) и используются кодировщиками HEVC для формирования прогнозов для последующих изображений. Максимальное количество изображений, которые можно сохранить в DPB, называемое емкостью DPB, равно 6 (включая текущее изображение) для всех уровней HEVC при работе с максимальным размером изображения, поддерживаемым этим уровнем. Емкость DPB (в единицах изображений) увеличивается с 6 до 8, 12 или 16 по мере уменьшения размера изображения по сравнению с максимальным размером изображения, поддерживаемым уровнем. Кодер выбирает, какие конкретные изображения сохраняются в DPB, по каждому изображению, поэтому кодер имеет возможность определять для себя лучший способ использования емкости DPB при кодировании видеоконтента.

Контейнеры

MPEG опубликовал поправку, которая добавила поддержку HEVC к транспортному потоку MPEG, используемому ATSC , DVB и Blu-ray Disc ; MPEG решил не обновлять программный поток MPEG, используемый DVD-Video . MPEG также добавил поддержку HEVC к базовому формату медиафайлов ISO . HEVC также поддерживается стандартом транспортировки мультимедиа MPEG . Поддержка HEVC была добавлена ​​в Matroska начиная с выпуска MKVToolNix v6.8.0 после слияния патча от DivX. был представлен проект документа В Инженерную рабочую группу Интернета , в котором описан метод добавления поддержки HEVC в транспортный протокол реального времени .

формат кодирования неподвижных изображений под названием Better Portable Graphics предложил Используя внутрикадровое кодирование HEVC, программист Фабрис Беллард (BPG) . По сути, это оболочка для изображений, закодированных с использованием профиля HEVC Main 4:4:4 16 Still Picture с длиной до 14 бит на выборку, хотя он использует сокращенный синтаксис заголовка и добавляет явную поддержку профилей Exif , ICC и метаданных XMP .

Условия патентной лицензии

Условия лицензии и сборы за патенты HEVC по сравнению с основными конкурентами:

Видео формат	Лицензиар	Кодек гонорары	Кодек освобождение от роялти	Кодек годовой лимит роялти	Содержание плата за распространение
HEVC	MPEG Лос-Анджелес	▪ 0,20 доллара США за единицу	▪ Первые 100 тысяч единиц каждый год	▪ 25 миллионов долларов США	▪ 0 долларов США
	HEVC Продвинутый	Регион 1 : ▪ 0,40 доллара США (мобильный) ▪ US$1.20 (4K TV) ▪ 0,20-0,80 долларов США (прочие) Регион 2 : ▪ 0,20 доллара США (мобильный) ▪ US$0.60 (4K TV) ▪ 0,20–0,40 долларов США (прочие)	▪ 25 000 долларов США каждый год ▪ Большая часть реализации программного обеспечения HEVC распространяется на потребительские устройства после первой продажи.	▪ 40 миллионов долларов США	Физическое распространение : ▪ 0,0225 доллара США за диск/название (Регион 1) ▪ 0,01125 доллара США за диск/название (Регион 2) Нефизическое распространение : ▪ 0 долларов США
	Техниколор	индивидуальные соглашения			▪ 0 долларов США
	Половина вуали	?			▪ Предполагается взимание роялти
	другие (AT&T, Microsoft, Motorola, Nokia, Cisco, ...)	?
АВК	MPEG Лос-Анджелес	Кодеки для конечных пользователей и OEM для ПК, но не входящие в состав ОС ПК : ▪ 0,20 доллара США: более 100 тыс. единиц в год. ▪ 0,10 доллара США: более 5 миллионов единиц в год. Фирменные OEM-кодеки для ОС ПК : ▪ 0,20 доллара США: более 100 тыс. единиц в год. ▪ 0,10 доллара США: более 5 миллионов единиц в год.	Кодеки для конечных пользователей и OEM для ПК, но не входящие в состав ОС ПК : ▪ Первые 100 тысяч единиц каждый год Фирменные OEM-кодеки для ОС ПК : ▪ Первые 100 тысяч единиц каждый год	Кодеки для конечных пользователей и OEM для ПК, но не входящие в состав ОС ПК : ▪ 9,75 млн долларов США (на период 2017-20 гг.) Фирменные OEM-кодеки для ОС ПК : ▪ 9,75 млн долларов США (на период 2017-20 гг.)	Бесплатное телевидение : ▪ единовременно 2500 долларов США за каждый кодер передачи, или ▪ Ежегодная плата в размере 2500–10 000 долларов США. Интернет-трансляция : ▪ 0 долларов США Модель платной подписки : ▪ 0 0 0 0 0 $0/год: 0 0 0 тыс....100 тыс. подписчиков ▪ 0 $25 000/год: 100...250 тыс. подписчиков ▪ 0 $50 000/год: 250...500 тыс. подписчиков ▪ 0 $75 000/год: 500 тыс....1 млн подписчиков ▪ 100 000 долларов США в год: более 1 миллиона подписчиков. Оплачивается по названию модели : ▪ 0...12 минут: без роялти ▪ 12+ мин: ниже 2% или 0,02 доллара США за заголовок. Максимальный годовой гонорар за контент : ▪ 8,125 млн долларов США
	другие (Nokia, Qualcomm, Broadcomm, Blackberry, Texas Instruments, MIT)	?
АВ1	Альянс за открытые СМИ	▪ 0 долларов США	—		▪ 0 долларов США
Daala	Мозилла и Xiph.org	▪ 0 долларов США	—		▪ 0 долларов США
ВП9	Google	▪ 0 долларов США	—		▪ 0 долларов США

Ассигнования на бесплатное программное обеспечение

Основная статья: Разумное и недискриминационное лицензирование § Исключение схем бесплатного распределения

Как и в случае с его предшественником AVC, дистрибьюторы программного обеспечения, реализующие HEVC в своих продуктах, должны платить за каждую распространяемую копию. ^[я] Хотя эта модель лицензирования приемлема для платного программного обеспечения, она является препятствием для большинства бесплатных программ с открытым исходным кодом , которые должны распространяться свободно. По мнению компании MulticoreWare , разработчика x265 , предоставление бесплатных программных кодеров и декодеров отвечает интересам ускорения внедрения HEVC. HEVC Advance сделал исключение, которое специально отказывается от лицензионных отчислений за программные реализации (как декодеры, так и кодеры), если они не связаны с аппаратным обеспечением. Однако освобожденное программное обеспечение не освобождается от лицензионных обязательств других держателей патентов (например, членов пула MPEG LA).

Хотя препятствия на пути к свободному программному обеспечению не вызывают беспокойства, например, в сетях телевизионного вещания, эта проблема в сочетании с перспективой будущей коллективной привязанности к этому формату заставляет некоторые организации, такие как Mozilla (см. OpenH264 ) и Европейский фонд свободного программного обеспечения, с осторожностью относятся к платным форматам для использования в Интернете. Конкурирующие форматы, предназначенные для использования в Интернете (VP9 и AV1), призваны избежать этих проблем, поскольку они не требуют лицензионных отчислений (при условии, что третьи стороны не предъявляют претензий на патентные права).

^i : Независимо от того, как программное обеспечение лицензируется авторами программного обеспечения (см. Лицензирование программного обеспечения ), если то, что оно делает, запатентовано, его использование остается связанным правами держателей патентов, если только использование патентов не было разрешено лицензией.

видео

Основная статья: Универсальное кодирование видео

В октябре 2015 года MPEG и VCEG сформировали Объединенную группу по исследованию видео (JVET). оценить доступные технологии сжатия и изучить требования к стандарту сжатия видео следующего поколения. Новый алгоритм должен иметь на 30–50% лучшую степень сжатия при том же качестве восприятия, с поддержкой сжатия без потерь и субъективно без потерь. Он также должен поддерживать YCbCr 4:4:4, 4:2:2 и 4:2:0 с 10–16 битами на компонент, широкую цветовую гамму BT.2100 и высокий динамический диапазон (HDR) более 16 ступеней (с пиковая яркость 1000, 4000 и 10000 нит), вспомогательные каналы (для глубины, прозрачности и т. д.), переменная и дробная частота кадров от 0 до 120 Гц, масштабируемое видеокодирование для временного (частота кадров), пространственного (разрешение), SNR , различия в цветовой гамме и динамическом диапазоне, кодирование стерео/мультивида, панорамные форматы и кодирование неподвижных изображений. Ожидается, что сложность кодирования будет в 10 раз выше, чем у HEVC. JVET опубликовал окончательный «Призыв к подаче предложений» в октябре 2017 года, а первый рабочий проект стандарта универсального кодирования видео (VVC) был выпущен в апреле 2018 года. Стандарт VVC был окончательно утвержден 6 июля 2020 года.

См. также

• UHDTV – форматы цифрового телевидения с разрешением 4K/2160p (3840x2160) и 8K/4320p (7680x4320).
  • Рек. 2020 – Рекомендация ITU-R для UHDTV со стандартным динамическим диапазоном
  • Рек. 2100 – Рекомендации ITU-R для телевидения высокой и сверхвысокой четкости с высоким динамическим диапазоном.
• Форматы файлов изображений на основе HEVC
  • Better Portable Graphics — формат файлов изображений на основе HEVC.
  • Высокоэффективный формат файла изображения — формат файла для изображений и последовательностей изображений на основе HEVC.
• Сравнение видеокодеков
• Список кодеков с открытым исходным кодом
  • x265 — программная реализация HEVC с открытым исходным кодом.
• Список мультимедийных (аудио/видео) кодеков
  • H.264/MPEG-4 AVC – видеостандарт, предшественник HEVC.
  • AV1 — открытый формат, разработанный Альянсом открытых медиа в качестве преемника VP9 и конкурента HEVC.
  • VP9 — открытый формат, разработанный Google как конкурент HEVC.
  • Daala — открытый формат, разрабатываемый Mozilla Foundation и Xiph.Org Foundation как конкурент HEVC.
  • Dirac (формат сжатия видео) — открытый формат, разрабатываемый BBC Research & Development в качестве конкурента HEVC.
  • Thor (видеокодек) – открытый формат, разрабатываемый Cisco как конкурент HEVC.
• LCEVC – дифференциальные наложения, которые могут улучшить производительность

Ссылки

Библиография

• Дж. Дж. Салливан ; Ж.-Р. Ом; В.-Ж. Хан; Т. Виганд (декабрь 2012 г.). «Обзор стандарта высокоэффективного кодирования видео (HEVC)» . Транзакции IEEE по схемам и системам видеотехнологий . 22 (12). IEEE : 1649–1668. дои : 10.1109/TCSVT.2012.2221191 .
• «H.265: Высокоэффективное кодирование видео» . МСЭ. 9 июля 2015 года . Проверено 2 августа 2015 г.
• Ж.-Р. Ом; Дж. Дж. Салливан; Х. Шварц; Т.К. Тан; Т. Виганд (декабрь 2012 г.). «Сравнение эффективности кодирования стандартов видеокодирования, включая высокоэффективное кодирование видео (HEVC)» (PDF) . Транзакции IEEE по схемам и системам видеотехнологий . 22 (12). ИИЭЭ . Проверено 22 сентября 2012 г.
• Филипп Ханхарт; Мартин Рерабек; Франческа Де Симоне; Турадж Эбрахими (13 августа 2012 г.). «Субъективная оценка качества будущего стандарта сжатия видео HEVC» (PDF) . Федеральная политехническая школа Лозанны (EPFL) . Проверено 8 ноября 2012 г.

Похожие слайды: Филипп Ханхарт; Мартин Рерабек; Франческа Де Симоне; Турадж Эбрахими (15 августа 2012 г.). «Субъективная оценка качества будущего стандарта сжатия видео HEVC» . SlideShare.com . Проверено 8 ноября 2012 г.

• Вивьен Се ; Мадукар Будагави; Дж. Дж. Салливан (2014). «Высокоэффективное кодирование видео (HEVC): алгоритмы и архитектуры» . Интегральные схемы и системы . Интегральные схемы и системы. Спрингер . дои : 10.1007/978-3-319-06895-4 . ISBN  978-3-319-06894-7 .

Похожие слайды: Вивьен Се ; Мадукар Будагави (1 июня 2014 г.). «Проектирование и реализация систем кодирования видео следующего поколения (учебное пособие по H.265/HEVC)» (PDF) . Международный симпозиум IEEE по схемам и системам (ISCAS).

• Герхард Тек; Ин Чен; Карстен Мюллер; Йенс-Райнер Ом; Энтони Ветро; Е-Куй Ван (январь 2016 г.). «Обзор многовидовых и 3D-расширений высокоэффективного видеокодирования» (PDF) . Транзакции IEEE по схемам и системам видеотехнологий . 26 (1). IEEE : 35–49. дои : 10.1109/TCSVT.2015.2477935 . S2CID   750942 .

Внешние ссылки

• Веб-сайт HEVC Института Фраунгофера Генриха Герца
• Веб-страница МСЭ для Объединенной группы сотрудничества по кодированию видео (JCT-VC)
• Публикации Группы экспертов по движущимся изображениям (MPEG) о HEVC
• Рекомендация ITU-T H.265: Высокоэффективное кодирование видео