有朋友搞过 ffmpeg qsv 硬件编码吗？ 最近有一个任务，需要将音视频经过 ffmpeg 库编码成 h264/h265 之后送到海康的硬盘录像机 目前遇到问题是 使用 libx264 软编码的数据通过 rtsp 送到海康录像机能正常显示 通过 intel 的 qsv 硬件编码的 h264/h265 等送到海康录像机只能显示出关键帧，其他 P 帧无法显示（没有 B 帧），通过英伟达显卡硬件编码的 h264/h265 送到海康能正常显示。 以上所有编码后的数据都是通过 rtsp 服务推送的，所有的在 vlc 等播放器上都能正常显示。 目前大部分都是核显，所以想解决 qsv 硬件编码问题 下面是部分初始化代码，有偿协助
// 查找编码器（支持硬件编码）
video_codec_ = FindBestEncoder(config_.use_hardware_encoding);
// 检查是否使用了硬件编码器
video_using_hardware_ = (strcmp(video_codec_->name, "libx264") != 0 && strcmp(video_codec_->name, "libx265") != 0);
// 创建编码器上下文
video_codec_ctx_ = avcodec_alloc_context3(video_codec_);
// 设置编码参数
video_codec_ctx_->width = config_.width;
video_codec_ctx_->height = config_.height;
video_codec_ctx_->time_base.num = 1;
video_codec_ctx_->time_base.den = config_.fps;
video_codec_ctx_->framerate.num = config_.fps;
video_codec_ctx_->framerate.den = 1;
video_codec_ctx_->bit_rate = config_.bitrate;
video_codec_ctx_->gop_size = config_.fps * 3; // 每 3 秒一个关键帧
video_codec_ctx_->has_b_frames = 0;
video_codec_ctx_->max_b_frames = 0;
video_codec_ctx_->refs = 1;
// 根据编码器类型设置像素格式
if (video_using_hardware_)
{
// 硬件编码器使用 NV12 格式（ QSV 、NVENC 、AMF 都支持）
video_codec_ctx_->pix_fmt = AV_PIX_FMT_NV12;
}
else
{
// 软件编码器使用 YUV420P
video_codec_ctx_->pix_fmt = AV_PIX_FMT_YUV420P;
}
video_codec_ctx_->flags = AV_CODEC_FLAG_LOW_DELAY | AV_CODEC_FLAG_GLOBAL_HEADER;
video_codec_ctx_->rc_buffer_size = config_.bitrate; // 缓冲区大小等于码率
video_codec_ctx_->rc_max_rate = config_.bitrate; // 最大码率
video_codec_ctx_->rc_min_rate = config_.bitrate/5; // 最小码率
if (!video_using_hardware_)
{
// 软件编码器特定参数
video_codec_ctx_->thread_count = 4;
if (strcmp(video_codec_->name, "libx264") == 0)
{
// libx264 特定选项
if (!config_.preset.isEmpty())
{
av_opt_set(video_codec_ctx_->priv_data, "preset", config_.preset.toStdString().c_str(), 0);
}
if (!config_.tune.isEmpty())
{
av_opt_set(video_codec_ctx_->priv_data, "tune", config_.tune.toStdString().c_str(), 0);
}
if (!config_.profile.isEmpty())
{
av_opt_set(video_codec_ctx_->priv_data, "profile", config_.profile.toStdString().c_str(), 0);
}
av_opt_set(video_codec_ctx_->priv_data, "x264opts", "bframes=0:rc-lookahead=0:scenecut=0", 0);
}
else if (strcmp(video_codec_->name, "libx265") == 0)
{
// libx265 特定选项
if (!config_.preset.isEmpty())
{
av_opt_set(video_codec_ctx_->priv_data, "preset", config_.preset.toStdString().c_str(), 0);
}
if (!config_.tune.isEmpty())
{
av_opt_set(video_codec_ctx_->priv_data, "tune", config_.tune.toStdString().c_str(), 0);
}
// H.265 的 profile: main, main10, main-intra 等
if (!config_.profile.isEmpty())
{
QString profile_to_use = config_.profile;
// 检查 profile 是否与 H.265 兼容
// H.264 的 profile (baseline, high) 不能用于 H.265
if (profile_to_use == "baseline" || profile_to_use == "high")
{
profile_to_use = "main"; // H.265 的默认 profile
LOG(WARNING) << "H.265 不支持 profile \"" << config_.profile.toStdString()
<< "\", 已自动调整为 \"main\"";
}
av_opt_set(video_codec_ctx_->priv_data, "profile", profile_to_use.toStdString().c_str(), 0);
}
// H.265 低延迟参数
av_opt_set(video_codec_ctx_->priv_data, "x265-params",
"bframes=0:rc-lookahead=0:scenecut=0:aq-mode=0", 0);
}
}
else
{
// 硬件编码器特定参数
const char* codec_name = video_codec_->name;
if (strcmp(codec_name, "h264_qsv") == 0 || strcmp(codec_name, "hevc_qsv") == 0)
{
// Intel QSV 编码器参数
// QSV 的 preset 值: veryfast, faster, fast, medium, slow, slower, veryslow
av_opt_set(video_codec_ctx_->priv_data, "preset", "veryfast", 0);
av_opt_set(video_codec_ctx_->priv_data, "async_depth", "1", 0); // 低延迟
av_opt_set(video_codec_ctx_->priv_data, "look_ahead", "0", 0); // 关闭前瞻
// H.264 专用：添加严格的兼容性参数以解决海康录像机播放问题
if (strcmp(codec_name, "h264_qsv") == 0)
{
// 强制使用 baseline profile （如果配置中指定了）
if (!config_.profile.isEmpty())
{
av_opt_set(video_codec_ctx_->priv_data, "profile", config_.profile.toStdString().c_str(), 0);
}
// 强制 CAVLC 熵编码（ baseline profile 必需，H.264 标准）
// QSV 默认可能使用 CABAC ，这会导致不兼容 baseline profile
av_opt_set(video_codec_ctx_->priv_data, "cavlc", "1", 0);
// 设置 H.264 level （ 40 = level 4.0 ，支持 1080p@30fps ）
// 与 NVENC 保持一致，提高兼容性
av_opt_set(video_codec_ctx_->priv_data, "level", "40", 0);
// 禁用 B 帧策略（确保真正不使用 B 帧）
av_opt_set(video_codec_ctx_->priv_data, "b_strategy", "0", 0);
// 禁用自适应 I 帧和 B 帧（提高 GOP 结构的一致性）
av_opt_set(video_codec_ctx_->priv_data, "adaptive_i", "0", 0);
av_opt_set(video_codec_ctx_->priv_data, "adaptive_b", "0", 0);
// 严格的 GOP 结构（不允许动态调整关键帧位置）
av_opt_set(video_codec_ctx_->priv_data, "strict_gop", "1", 0);
// 低延迟模式（类似 NVENC 的 zerolatency ）
av_opt_set(video_codec_ctx_->priv_data, "low_delay_brc", "1", 0);
LOG(INFO) << "Intel QSV H.264 编码器：已启用海康录像机兼容模式（ baseline+CAVLC+level4.0 ）";
}
}
else if (strcmp(codec_name, "h264_nvenc") == 0 || strcmp(codec_name, "hevc_nvenc") == 0)
{
// NVIDIA NVENC 编码器参数
// NVENC 的 preset: default, slow, medium, fast, hp, hq, bd, ll, llhq, llhp, lossless, losslesshp
av_opt_set(video_codec_ctx_->priv_data, "preset", "llhp", 0); // 低延迟高性能
av_opt_set(video_codec_ctx_->priv_data, "zerolatency", "1", 0);
av_opt_set(video_codec_ctx_->priv_data, "delay", "0", 0);
}
else if (strcmp(codec_name, "h264_amf") == 0 || strcmp(codec_name, "hevc_amf") == 0)
{
// AMD AMF 编码器参数
av_opt_set(video_codec_ctx_->priv_data, "usage", "lowlatency", 0);
av_opt_set(video_codec_ctx_->priv_data, "quality", "speed", 0);
}
else if (strcmp(codec_name, "h264_mf") == 0)
{
// Windows Media Foundation 编码器参数
av_opt_set(video_codec_ctx_->priv_data, "rate_control", "cbr", 0);
}
// NVENC 的 profile 设置（ QSV 已在上面单独设置）
if (!config_.profile.isEmpty() && strcmp(codec_name, "h264_nvenc") == 0)
{
// NVENC 支持标准 H.264 profiles: baseline, main, high
av_opt_set(video_codec_ctx_->priv_data, "profile", config_.profile.toStdString().c_str(), 0);
}
}
// 初始化硬件加速上下文（如果使用硬件编码）
if (!InitializeHardwareContext())
{
LOG(ERROR) << "硬件加速上下文初始化失败";
return false;
}
// 打开编码器
int ret = avcodec_open2(video_codec_ctx_, video_codec_, nullptr);
if (ret < 0)
{
char errbuf[AV_ERROR_MAX_STRING_SIZE];
av_strerror(ret, errbuf, sizeof(errbuf));
LOG(ERROR) << "无法打开编码器: " << errbuf;
return false;
}
 |
1
okkk 3 小时 26 分钟前
|
Select Language