Декодировано — подкаст о видеоинженерии
3
1
32
Описание
«Декодировано» — подкаст компании Фора Софт о видеоинженерии: кодировании и передаче видео, обработке аудио и применении искусственного интеллекта в видеопродуктах.Каждый выпуск основан на одной главе из серии книг «Справочник по видеоинженерии». Сложные технические темы превращаются в последовательный и понятный разговор: как устроены технологии, какие задачи они решают, где находятся их ограничения и что необходимо учитывать при разработке реальных медиасистем.Подкаст состоит из четырёх тематических сезонов.Первый сезон, «Видеокодирование», посвящён принципам сжатия видео, устройству современных кодеков, битрейту, качеству изображения, форматам, стандартам и производительности кодирования.Второй сезон, «Видеостриминг», рассказывает о протоколах передачи видео, задержке, адаптивном битрейте, медиасерверах, CDN, масштабировании и доставке видеопотоков зрителям.Третий сезон, «Аудио для видео», разбирает кодирование и обработку звука, аудиокодеки, громкость, синхронизацию аудио и видео, пространственный звук и особенности передачи аудио в видеосистемах.Четвёртый сезон, «Искусственный интеллект для видео», посвящён компьютерному зрению, распознаванию и синтезу речи, мультимодальным моделям, анализу медиаконтента, генеративному видео и применению ИИ в реальном времени.«Декодировано» предназначен для разработчиков, архитекторов, технических руководителей, создателей видеосервисов и всех, кто хочет глубже понимать современные технологии видео и аудио.Подкаст создан на основе материалов Фора Софт с применением искусственного интеллекта. Голоса ведущих синтезированы.
Прежде чем разбираться, как кодек сжимает видео, нужно понять, что именно он сжимает. С этого вопроса начинается любой видеопродукт — от видеозвонка до стриминга на десятки тысяч зрителей. Первый выпу...
Реальная сцена непрерывна, а файл хранит лишь конечный набор чисел. Где-то между камерой и экраном непрерывное превращается в дискретное — и если сделать это неаккуратно, потерянная деталь не исчезает...
Сожмёте видео идеально — а цвет на экране окажется не тот: лица отдают синевой, кадр то тусклый, то кричаще яркий. Это не дефект кодека, а рассогласование цветовых пространств — одна из самых частых и...
Плавное вечернее небо вдруг распадается на полосы, а обещанный HDR на одном телевизоре сияет, на другом выглядит блёкло. Причина не в кодеке, а в динамическом диапазоне: сколько градаций яркости вы хр...
Один и тот же фильм на телефоне идёт гладко, а на большом телевизоре вдруг дёргается на панорамах; спортивный эфир в 60 кадрах кажется «живым», а старое кино, «сглаженное» телевизором, выглядит дешёвы...
Netflix отдаёт 4K примерно на 15 Мбит/с, а несжатый мастер того же 4K — это около 12 Гбит/с: разница почти в тысячу раз. Именно этот разрыв решает, будет ли видео вообще воспроизводиться, во сколько о...
Студия, которая хранит мастер в H.264, экономит терабайты сегодня — и теряет качество на каждой правке завтра. Стартап, который раздаёт зрителям ProRes, не выигрывает в качестве, но переплачивает за т...
«Наш кодек сжимает на 70% лучше» — фраза из каждого пресс-релиза. Но лучше какого кодека, на каком материале и по какой метрике? В 1948 году инженер Bell Labs Клод Шеннон доказал: у любого потока данн...
Любой кодек — от H.264 в вашем браузере до AV1 на YouTube — делает по сути одно: находит в видео то, что можно не передавать. За всем зоопарком форматов, пресетов и аббревиатур стоит одна карта из чет...
«Переходим на AV1». «CDN берёт дороже за HEVC». «Этот браузер не декодирует VVC». За каждой такой фразой на реальном проекте стоит сорокалетняя история — и почти никогда выбор кодека не сводится к том...
Настроить энкодер, прочитать его документацию, понять, почему CBR и CRF ведут себя по-разному и почему один поток лучше держит движение, — всё это опирается на одну и ту же схему. Она называется гибри...
Одна настройка кодера способна одновременно сломать перемотку, переключение качества в адаптивном стриминге и задержку прямого эфира — это длина GOP. Именно её инженер по доставке трогает чаще всех ос...
Размер блока — самый частый параметр, который инженер по доставке трогает в кодере: именно здесь решается компромисс «скорость против сжатия», от которого напрямую зависят счёт за облачное кодирование...
Каждый видеопоток начинается с ключевого кадра, и к нему же плеер возвращается при перемотке и переключении качества — а значит, именно ключевые кадры задают пики битрейта и вес всей раскадровки-превь...
Почти всё сжатие видео держится на одной идее: соседние кадры почти одинаковы, поэтому передавать каждый заново незачем. Межкадровое предсказание описывает блок не пикселями, а короткой инструкцией —...
Каждое новое поколение кодеков роняет битрейт примерно вдвое — и большая часть этой экономии рождается на одной незаметной стадии. Преобразование само по себе не сжимает данные и ничего не теряет: оно...
Когда стриминговый сервис вдвое снижает битрейт, экономия почти целиком берётся не от нового кодека и не от хитрого алгоритма, а от одной невидимой операции — более грубого квантования. Это единственн...
Между квантованием и энтропийным кодером прячется стадия, о которой почти не говорят, — но без неё биты, сэкономленные на квантовании, так и не превратятся в маленький файл. После квантования от блока...
Все предыдущие стадии кодера — предсказание, преобразование, квантование, переупорядочивание — выдают лишь поток символов: маленькие числа, флаги и метки. Энтропийное кодирование — та самая заключител...
Квантование — единственная стадия кодека с потерями, и именно она оставляет видимые следы: сетку квадратов на ровной стене, бледные ореолы у резких контуров, полосы на закатном небе. Внутрипетлевая фи...
Пресет энкодера — единственная ручка, которую большинство инженеров трогает не глядя: medium, slow, veryslow. Но за ней стоит вполне конкретный механизм — принятие решений о режиме. Для каждого блока...
Битрейт кажется простой настройкой — «сколько мегабит в секунду». Но за ней стоит целая петля управления, от которой зависят сразу три вещи: увидит ли зритель плавное видео без подвисаний, совпадёт ли...
Два кодека, без которых не обходится ни один видеопродукт: с камеры кадр приходит в H.264, эфир прилетает в обёртке MPEG-2, а видеозвонок в браузере откатывается на H.264, когда не удаётся согласовать...
Кодек, который вдвое сжал H.264 — и всё равно проиграл рынок. HEVC, он же H.265, технически сделал ровно то, ради чего создавался: та же картинка примерно вдвое компактнее, около пятидесяти процентов...
Три кодека, за которые никто не платит роялти, — и один из них уже стоит в вашем браузере. Открытая линия VP8, VP9 и AV1 — это прямой ответ индустрии на патентный хаос вокруг H.264 и HEVC: тот же гибр...
AV1 стал кодеком по умолчанию для нового стриминга — и тут же встал вопрос: а что дальше? Однозначного ответа нет. Этот выпуск — карта нового поколения кодеков и того, как выбрать под задачу, не переп...
«Какой кодек лучше?» — вопрос, на котором ломается большинство сравнений. Этот выпуск — про то, как сравнивать кодеки честно, чтобы решение опиралось на данные, а не на маркетинг вендора.В выпуске:— п...
Смотреть глазами на миллионы клипов невозможно — качество нужно измерять числом. Этот выпуск — про объективные метрики, на которых держится контроль качества стриминга: что они умеют и где системно вр...
Любая метрика лишь предсказывает мнение зрителя — а измеряют его субъективными тестами. Этот выпуск — про «золотой стандарт» оценки качества, MOS, и как поставить тест, результатам которого можно вери...
Кодек — это стандарт, а сжимает конкретная программа-энкодер, и от её выбора зависят счета за кодирование и полосу. Этот выпуск — про честный бенчмаркинг энкодеров и как не попасться на подтасованные...