Android 使用MediaCodec和MediaMuxer录制视频，但比特率和帧率不正确

我编写了一个使用MediaCodec和MediaMuxer录制视频的演示

我用我的演示录制了一段视频，并使用ffprobe检查视频， 结果如下：

  Duration: 00:00:06.86, start: 0.000000, bitrate: 723 kb/s
Stream #0:0(eng): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 320x240, 619 kb/s, SAR 1:1 DAR 4:3, 30.02 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : VideoHandle
Stream #0:1(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 96 kb/s (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : SoundHandle

        MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, mWidth, mHeight);
    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 384000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 19);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
    if (VERBOSE) Log.d(TAG, "format: " + format);
    mVideoEncoder = MediaCodec.createEncoderByType(MIME_TYPE);
    mVideoEncoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mInputSurface = mVideoEncoder.createInputSurface();
    mVideoEncoder.start();

它包含视频和音频信息，我发现音频属性与我在源代码中设置的相同，但视频属性不正确。 我的视频设置源代码如下：

  Duration: 00:00:06.86, start: 0.000000, bitrate: 723 kb/s
Stream #0:0(eng): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 320x240, 619 kb/s, SAR 1:1 DAR 4:3, 30.02 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : VideoHandle
Stream #0:1(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 96 kb/s (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : SoundHandle

        MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, mWidth, mHeight);
    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 384000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 19);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
    if (VERBOSE) Log.d(TAG, "format: " + format);
    mVideoEncoder = MediaCodec.createEncoderByType(MIME_TYPE);
    mVideoEncoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mInputSurface = mVideoEncoder.createInputSurface();
    mVideoEncoder.start();

视频的宽度和高度是正确的，但比特率和帧率高于我在源代码中设置的。这导致视频文件的大小远远大于 我预料到了。 然后，我修改了源代码，删除了音频录制线程，只录制视频。但是没有任何区别，比特率和帧率也更高。 谁能告诉我原因并给我一些建议

还有一个问题。我偶尔会录制一段中断的视频，该视频可以由系统播放器播放，但视频的开头是黑色的，在1秒或2秒后显示正常图像。我不知道如何在stackoverflow中上传文件，我可以将损坏的视频文件发送给任何需要它的人。 有人带着这个问题来了吗

加： 我发现了另一件奇怪的事： 我的视频编码配置：

private int mWidth = 480;
private int mHeight = 848;
private int mVideoBitrate = 1200 * 1000;

    MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, 480, 848);

    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 1200000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 1);

但实际的视频信息是：

  Duration: 00:00:06.01, start: 0.000000, bitrate: 6491 kb/s
Stream #0:0(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 15 kb/s (default)
Metadata:
  creation_time   : 2015-09-30 15:44:18
  handler_name    : SoundHandle
Stream #0:1(eng): Video: h264 (Baseline) (avc1 / 0x31637661), yuv420p, 480x848, 6484 kb/s, SAR 1:1 DAR 30:53, 16 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-09-30 15:44:18
  handler_name    : VideoHandle

---

看起来您的预期帧速率（19fps）与实际帧速率（30fps）不匹配。编码器正试图满足以19fps提交的帧的比特率要求，但它们进入的速度更快，因此它未命中，实际比特率更高。我假设30fps值是根据视频文件中的实际演示时间戳确定的，该时间戳由传递到MediaMuxer的演示时间戳设置。如果想要19fps的视频，则需要生成间隔（1000/19）毫秒的时间戳

如果输入视频为30fps，则需要在编码过程中删除帧以达到19fps。MediaCodec不会为您丢弃帧——它会对您传入的所有内容进行编码

---

我不知道为什么在视频开始时会出现断开的部分。

如果MediaCodec对每个输入到它的帧进行编码，则目标视频的帧速率将由输入源（如摄像头）的速率决定。换句话说，MediaCodec无法确定帧速率，但为什么MediaCodec允许应用程序通过MediaFormat.KEY\u frame\u rate设置帧速率？这是一个错误还是我做出了错误的假设？您需要提供帧速率的估计值，以便编解码器可以配置适当的压缩级别以达到目标比特率。关键帧速率是一种让你的应用告诉编解码器将要发生什么的方法，而不是告诉编解码器要产生什么。它也被分解到关键帧频率中——如果你每秒请求30帧关键帧，你将每30帧得到一个关键帧。请记住，H.264视频流没有时间戳——这些时间戳在MediaMuxer添加的.mp4文件中——因此一些编解码器可能只是通过未经检查的方式传递PTS值。谢谢，在您的帮助下，我成功录制了一段19 fps的视频。首先，我在drainEncoder的过程中跳过了帧，结果，视频图像非常模糊，就像马赛克一样。然后我改变方式，跳过SurfaceTexture.OnFrameAvailableListener上的一些帧，录制的视频变得正常。嗨，法登。由于你的好意，我终于完成了我的工作。但我仍然担心一件事。我在上创建了一个问题，你能给我一些建议吗？@Sunshinetpu：编码器会对你给出的每一帧进行编码。如果要将60fps视频转换为30fps视频，则不需要将一半帧传递给编码器。调用解码器的

releaseOutputBuffer（）

，并将render标志设置为

false

，应该可以做到这一点——该帧不会在编码器的输入表面上渲染。如果你不控制解码器，事情就更难了。您可以使用SurfaceTexture接收帧，然后使用GLES将每隔一帧渲染到编码器的曲面。（bigflake和Grafika有一些有用的代码，但你需要把它们组合在一起。）嗨@dragonfly你成功地完成了音频和视频录制吗？是的。我终于做到了。我诚恳地请求你们能和我分享这个演示@dragonfly@Ali你可以从这个项目中得到你想要的：兄弟，我使用这个grafika（

continueEscaptureActivity

）并创建演示，但问题是这个演示没有音频，所以我如何添加？？请看这个问题