Нужно организовать стрим в браузер с веб-камеры с межкадровым сжатием. Поскольку h264 не поддерживается в Chromium браузерах, кодирую в vp8. Так как веб-камера не может выдавать стабильный FPS из-за различных условий съёмки и количества поступающего на матрицу света, возникает вопрос - как задать vpx кодеку время показа индивидуально для каждого кадра?
Инициализация кодека походит так:
bool Codec::Open(unsigned int width, unsigned int height){
if(!vpx_img_alloc(&frame, VPX_IMG_FMT_I420, width, height, 1)){
cout << "Img alloc error\n";
return false;
}
if( vpx_codec_enc_config_default(vpx_codec_vp8_cx(), &cfg, 0) != VPX_CODEC_OK){
vpx_img_free(&frame);
cout << "Def conf set error\n";
return false;
}
cfg.g_timebase.den = 20;
cfg.g_timebase.num = 1;
cfg.rc_min_quantizer = 20;
cfg.rc_max_quantizer = 50;
cfg.g_w = width;
cfg.g_h = height;
cfg.rc_target_bitrate = cfg.g_w * cfg.g_h * cfg.rc_target_bitrate;
if( vpx_codec_enc_init(&ctx, vpx_codec_vp8_cx(), &cfg, 0) != VPX_CODEC_OK){
vpx_img_free(&frame);
cout << "Codec init error\n";
return false;
}
frames = 0;
return true;
}
Процесс кодирования кадра:
std::string Codec::Encode(unsigned char *source){
std::string result("");
vpx_codec_iter_t iter = NULL;
const vpx_codec_cx_pkt_t *pkt;
colorspaces::BGRtoI420(cfg.g_w, cfg.g_h, source, &frame.planes[0], &frame.planes[1], &frame.planes[2]);
if( vpx_codec_encode(&ctx, &frame, frames, 1, 0, VPX_DL_REALTIME) != VPX_CODEC_OK){return result;}
while(pkt = vpx_codec_get_cx_data(&ctx, &iter)){
if( pkt->kind == VPX_CODEC_CX_FRAME_PKT){
result+= write_ivf_frame_header(pkt);
result.append((char*)(pkt->data.frame.buf), pkt->data.frame.sz);
}
}
frames++;
return result;
}
Есть идея снимать серию кадров с расчётом среднего значения FPS и потом отправлять пакет кадров на кодирование в параллельном потоке, но тогда придётся каждый раз заново инициализировать кодировщик и устанавливать другие параметры FPS (cfg.g_timebase.den
). Может у кого есть идеи получше?