Motion JPEG - Motion JPEG

В мультимедиа, Motion JPEG (M-JPEG или MJPEG) это формат сжатия видео в котором каждый кадр видео или переплетенный поле цифровое видео последовательность сжатый отдельно как JPEG образ. Первоначально разработанный для мультимедийных приложений на ПК, M-JPEG теперь используется устройствами видеозахвата, такими как цифровые фотоаппараты, IP камеры, и веб-камеры, а также нелинейное редактирование видео системы. Он изначально поддерживается QuickTime Игрок, Игровая приставка консоль и веб-браузеры такие как Сафари, Гугл Хром, Mozilla Firefox и Microsoft Edge.

История

MJPEG был впервые использован QuickTime Player в середине 1990-х гг.[нужна цитата ]

Приложения

Программное обеспечение и устройства, использующие стандарт M-JPEG, включают веб-браузеры, медиаплееры, игровые консоли, цифровые камеры, IP-камеры, веб-камеры, серверы потоковой передачи, видеокамеры и нелинейные видеоредакторы.

Запись и редактирование видео

M-JPEG часто используется в системы нелинейного монтажа видео. Современные настольные процессоры достаточно мощны для работы с видео высокой четкости, поэтому не требуется специального оборудования, а они, в свою очередь, предлагают собственный произвольный доступ к любому кадру. Поддержка M-JPEG также широко распространена в оборудовании для видеозахвата и монтажа.

Игровые приставки

В Игровая приставка в игровую консоль интегрировано оборудование для декомпрессии M-JPEG для использования в игре FMV последовательности, а PlayStation портативный портативная игровая консоль может воспроизводить M-JPEG с Карта памяти Memory Stick Pro Duo под расширением .avi с разрешением 480 × 272. Оба могут записывать клипы в M-JPEG с его Go! Cam камера.

Nintendo с Wii игровая консоль, а также InnoTAB от V-Tech могут воспроизводить видео в формате M-JPEG на SD Card используя его Фото канал. В SanDisk Sansa e200 и Дзен V цифровые аудиоплееры воспроизводят короткие видеоролики в формате M-JPEG. Последние обновления прошивки Nintendo 3DS теперь может записывать и воспроизводить файлы в кодировке M-JPEG "3D-AVI", формат которых используется в Fujifilm FinePix Real 3D серия, с SD-карты с разрешением 320 × 240, если продолжительность видео составляет 10 минут или меньше.

Цифровые фотоаппараты

До недавнего роста MPEG-4 кодирование в потребительских устройствах, прогрессивная развертка Форма M-JPEG получила широкое распространение в режимах «кино» цифровых фотоаппаратов, позволяя кодировать и воспроизводить видео с помощью встроенного аппаратного обеспечения сжатия JPEG только с модификацией программного обеспечения. Результирующее качество все еще хуже по сравнению с MPEG аналогичного размера, особенно потому, что звук (если он есть) был несжатым. PCM и записаны с низкой частотой дискретизации или низким уровнем сжатия, не требующим большого количества ресурсов процессора ADPCM.

Чтобы держать размер файлов и скорость передачи под контролем, размеры и частота кадров, а также частота дискретизации звука поддерживаются относительно низкими с очень высокими уровнями сжатия для каждого отдельного кадра. Разрешения 160 × 120 или 320 × 240 являются общими размерами, обычно при 10, 12 или 15 кадрах в секунду, с качеством изображения, эквивалентным настройке JPEG, равной «50», с монофоническим звуком ADPCM, дискретизированным с частотой ~ 8 кГц. Это приводит к очень простому, но исправному видеовыходу при такой же стоимости хранения, что и MPEG (скорость видео ~ 120 кБ / с, ~ 8 кБ / с аудио - или примерно 1 Мбит / с при разрешении 320 × 240), но с минимальными затратами. накладные расходы на обработку. Это видео обычно хранится в популярных файлах-контейнерах Windows AVI или Apple QuickTime MOV, которые обычно доступны для просмотра в исходном виде (или после установки простого кодек ) в большинстве версий соответствующей операционной системы.

В Формат видео AMV, распространенный на дешевых проигрывателях MP4, представляет собой модифицированную версию M-JPEG.

Помимо портативных плееров (которые в основном являются «потребителями» видео), многие цифровые камеры с поддержкой видео используют M-JPEG для захвата видео. Например:

  • В августе 2008 г. Nikon анонсировал D90, первая цифровая зеркальная фотокамера для записи видео. Используемый формат - M-JPEG. D90 использует три различных формата Motion JPEG: 320 × 216 пикселей, 640 × 424 пикселей и 1280 × 720 пикселей.
  • В июне 2009 года Pentax объявил, что предстоящий на тот момент К-7 камера будет использовать M-JPEG с разрешениями 640 × 416, 1280 × 720 и 1536 × 1024. Скорость передачи данных для создаваемых файлов M-JPEG может достигать 74 Мбит / с.
  • В августе 2016 года Canon объявила, что 5D Марк IV камера будет записывать 4K видео в M-JPEG,[1] со скоростью передачи данных около 500 Мбит / с.[2]

Медиаплееры HDTV

1 сентября 2010 года Apple объявила, что их новейшая версия Apple TV будет поддерживать Motion JPEG (M-JPEG) до 35 Мбит / с, 1280 на 720 пикселей, 30 кадров в секунду, звук в μlaw, стереозвук PCM в формате. avi формат файла.

Некоторые медиаплееры, например Netgear NeoTV 550, не поддерживают воспроизведение M-JPEG.

IP камеры

Многие сетевые камеры предоставляют потоки M-JPEG, к которым могут подключаться сетевые клиенты. Mozilla и Webkit -браузеры имеют встроенную поддержку для просмотра этих потоков M-JPEG.

Некоторые сетевые камеры предоставляют собственные интерфейсы M-JPEG как часть обычного набора функций. Для камер, которые изначально не поддерживают эту функцию, можно использовать сервер для перекодирования изображений с камеры в поток M-JPEG, а затем предоставить этот поток другим сетевым клиентам.

M-JPEG через HTTP

Потоковая передача HTTP разделяет каждое изображение на отдельные ответы HTTP по указанному маркеру. Потоковая передача HTTP создает пакеты из последовательности изображений JPEG, которые могут быть получены такими клиентами, как QuickTime или VLC.

В ответ на GET запрос для файла или потока MJPEG сервер передает последовательность кадров JPEG через HTTP. Особая пантомима Тип содержимого multipart / x-mixed-replace; граница = <имя-границы> информирует клиента о том, что он должен ожидать несколько частей (фреймов) в качестве ответа, разделенных . Это граничное имя явно раскрывается в самом объявлении MIME-типа. TCP-соединение не закрывается, пока клиент хочет получать новые кадры, а сервер хочет предоставить новые кадры. Две основные реализации потокового сервера M-JPEG: камбозола и MJPG-Streamer. Более надежный ffmpeg-сервер также обеспечивает поддержку потоковой передачи M-JPEG.

Клиентское программное обеспечение

Встроенная поддержка веб-браузера включает: Сафари, Гугл Хром, Microsoft Edge[3] и Fire Fox.[4] Другие браузеры, например Internet Explorer может отображать потоки M-JPEG с помощью внешних плагинов. Cambozola - это апплет, который может отображать потоки M-JPEG в браузерах с поддержкой Java. M-JPEG также изначально поддерживается PlayStation и QuickTime.

Цифровое видео

Цифровое видео (DV ) использует аналогичный метод, индивидуально сжимая видеокадры.

Кодирование

M-JPEG - это схема сжатия только внутри кадра (по сравнению с более интенсивной вычислительной техникой межкадровое предсказание ). В то время как современные форматы межкадрового видео, такие как MPEG1, MPEG2 и H.264 / MPEG-4 AVC, достигают реальных коэффициентов сжатия 1:50 или лучше, отсутствие межкадрового прогнозирования в M-JPEG ограничивает его эффективность до 1:20 или ниже, в зависимости от допуска к пространственным артефактам в сжатом выходе. Поскольку кадры сжимаются независимо друг от друга, M-JPEG предъявляет более низкие требования к обработке и памяти для аппаратных устройств.

Поскольку это чисто внутрикадровая схема сжатия, качество изображения M-JPEG напрямую зависит от статической (пространственной) сложности каждого видеокадра. Рамки с большими плавными переходами или монотонными поверхностями хорошо сжимаются и с большей вероятностью сохранят свои исходные детали с небольшими видимыми артефактами сжатия. Рамки со сложной текстурой, тонкими кривыми и линиями (например, надписи на газете) склонны к выставлению дискретное косинусное преобразование (DCT) артефакты, такие как звон, размазывание и макроблокирование. Видео, сжатое M-JPEG, также нечувствительно к сложности движения, то есть к изменению во времени. Этому не мешает ни сильно случайное движение (например, турбулентность водной поверхности в большом водопаде), ни отсутствие движения (например, статический пейзаж, снятый штативом), которые являются двумя противоположными крайностями, обычно используемыми для тестирования межкадрового видео. форматы.

За QuickTime форматов, Apple определила два типа кодирования: MJPEG-A и MJPEG-B. MJPEG-B больше не сохраняет в себе действительные файлы обмена файлами JPEG, поэтому невозможно перенести кадр в файл JPEG без небольшого изменения заголовков.

Преимущества

  • Его просто реализовать, потому что он использует зрелый стандарт сжатия (JPEG) с хорошо развитыми библиотеками и представляет собой внутрикадровый метод сжатия.
  • Он допускает быстрое изменение движения в видеопотоке, тогда как схемы сжатия, использующие межкадровое сжатие, часто могут испытывать неприемлемую потерю качества, когда видеоконтент значительно изменяется между каждым кадром.
  • Он пользуется широкой поддержкой клиентов - большинство основных веб-браузеров и плееров предоставляют встроенную поддержку, а для остальных доступны плагины.
  • Требуется минимальное оборудование, поскольку оно не требует больших вычислений.

Недостатки

  • В отличие от видеоформатов, указанных в международные стандарты такие как MPEG-2 и формата, указанного в стандарте кодирования неподвижных изображений JPEG, не существует документа, определяющего единственный точный формат, который повсеместно признается как полная спецификация «Motion JPEG» для использования во всех контекстах. Это вызывает опасения относительно совместимости выходных файлов от разных производителей. Однако каждый конкретный формат файла обычно имеет некоторый стандарт кодирования M-JPEG. Например, Microsoft документирует свой стандартный формат для хранения M-JPEG в файлах AVI,[5] Apple документирует, как M-JPEG хранится в файлах QuickTime, RFC 2435 описывает, как M-JPEG реализуется в RTP поток, а идентификатор кодека M-JPEG планируется для Матроска формат файла.[6]
  • JPEG неэффективен, поскольку использует большее количество бит для обеспечения аналогичного качества по сравнению с более современными форматами (такими как JPEG 2000 и H.264 / MPEG-4 AVC ). С момента разработки исходного стандарта JPEG в начале 1990-х годов технологические усовершенствования были внесены не только в формат JPEG, но и в межкадровый также возможны схемы сжатия.
  • Технологические усовершенствования можно найти в конструкциях H.263v2 Приложение I и MPEG-4, часть 2, которые используют прогнозирование значений коэффициентов преобразования в частотной области, а в H.264 / MPEG-4 AVC, которые используют методы пространственного предсказания и размера блока адаптивного преобразования. Также существует более сложное энтропийное кодирование, чем то, что было практично, когда был разработан первый дизайн JPEG. Все эти новые разработки делают M-JPEG неэффективным механизмом записи.

Смотрите также

использованная литература

  1. ^ «Подробности пресс-релиза». www.usa.canon.com. Получено 2016-11-06.
  2. ^ «Технические характеристики и функции - Canon EOS 5D Mark IV - Canon UK». www.canon.co.uk. 2016-09-19. Получено 2016-11-06.
  3. ^ «Руководство разработчика: видео - разработка Microsoft Edge». developer.microsoft.com. Получено 2016-08-25.
  4. ^ Потоки M-JPEG, отправляемые в Mozilla Firefox, должны быть заключены в документ HTTP, чтобы избежать мерцания. Увидеть Ошибка 625012.
  5. ^ "BMPDIB.TXT". www.fileformat.info.
  6. ^ http://www.matroska.org/technical/specs/codecid/index.html

внешняя ссылка