Запись замедленного видео с использованием MediaCodec на Android

Question

Я реализую видеозапись с камерой Android. Я использую MediaCodec для кодирования кадров из обратного вызова onPreviewFrame().

Теперь я хочу записать замедленное видео. Как установить частоту захвата камеры или частоту кадров? Где я могу установить эти параметры, например, если я хочу записывать со скоростью 120 кадров в секунду и играть со скоростью 30 кадров в секунду?

Ниже то, что я исследовал:

Я записал видео замедленного с MOTO X (имеющее встроенной функцией записи видео замедленной) и используется FFmpeg проверить его кадры в секунду. Я обнаружил, что он записывается со скоростью 110 кадров в секунду (около 120 кадров в секунду) и воспроизведения со скоростью 30 кадров в секунду. Это доказывает, что он обеспечивает аппаратную поддержку для записи при высоких кадрах в секунду.

Однако, когда я использую getSupportedPreviewFpsRange, чтобы проверить его поддерживаемый диапазон кадров в секунду, есть только четыре набора поддерживаемых кадров в секунду в диапазоне без одного больше, чем 30 кадров в секунду:

min_fps: 15,0, max_fps15.0

min_fps : 15,0, max_fps20.0

min_fps: 15,0, max_fps30.0

min_fps: 24,0, max_fps30.0

Я использовал setPreviewFpsRange, чтобы установить fps выше, но он остается не более 30 кадров в секунду. Я также попытался установить KEY_FRAME_RATE и KEY_CAPTURE_RATE MediaFormat. Но это все еще не работает.

Я также искал solution, установив CamcorderProfile или setVideoFrameRate с MediaRecorder. Но я работаю с MediaCodec.

Может ли кто-нибудь помочь мне с этой проблемой?

Answer 1

для медленной записи.

mMediaRecorder.setVideoFrameRate (QUALITY_HIGH_SPEED_LOW);

для высокой скорости запись.

mMediaRecorder.setVideoFrameRate(QUALITY_HIGH_SPEED_HIGH); 

Answer 2

Захват видеокадров с более высокой скоростью не решает проблему. Если вы снимаете со скоростью 120 кадров в секунду и проигрываете со скоростью 120 кадров в секунду, вы получаете высокоскоростное воспроизведение видео с обычной скоростью.

Что вы хотите сделать, это изменить временные метки. MediaCodec поддерживает видео VFR (переменная частота кадров). Вместо того, чтобы тратить 1 секунду на 60 кадров, которые будут воспроизводиться со скоростью 30 кадров в секунду, вы записываете 30 кадров в секунду, которые будут воспроизводиться со скоростью 15 кадров в секунду.

Поток H.264, созданный с помощью AVC-кодировщика MediaCodec, не содержит временных меток. Вы указываете метку времени для каждого фрейма при подаче вывода в MediaMuxer, генерируя файл .mp4. Большинство примеров кода просто берут метку времени, полученную от камеры, и передают ее через MediaCodec в MediaMuxer без изменений, но вы можете настроить ее. Единственное, что вы не можете сделать, это позволить временной метке вернуться назад.

Если вы посмотрите на то, как фильм «восемь прямоугольников» равен generated in Grafika, вы можете видеть, что он воспроизводит выходную метку времени, чтобы сделать воспроизведение фильма медленнее или быстрее.

Еще один простой способ выполнить одно и то же без изменения частоты кадров - это удвоить рамки. Для части замедленного воспроизведения просто передайте один и тот же кадр в кодировщик несколько раз. Опять же, вам нужно настроить временные метки представления для каждого кадра, но ваше видео будет иметь постоянный 30 кадров в секунду. (Было бы лучше, если бы вы интерполировали фреймы, но это намного сложнее.)