当前位置:   article > 正文

ffmpeg avcodec_send_packet avcodec_receive_frame解码接口使用讲解

avcodec_receive_frame

解码demo

通常来说,一个packet会被解码出一个frame,不过也存在一个packet被解码出多个frame或者多个packet才能解码出一个frame的情况,甚至也有些解码器在输入以及输出端上可能会有延迟。因此原来的API在某种程度上存在对调用者误导的可能,使得调用者认为输入的一个或者多个Packet就对应着解码器所输出的一个frame,但实际上可能并非如此。

新的API完全隐藏了“解码”这一概念,只提供一个输入packet的接口以及输出frame的接口,如此一来调用者可以不必了解解码器的具体细节,只需要了解这两个接口的调用规则就能写出适用于所有解码器的代码。

本文福利, 免费领取C++音视频学习资料包、技术视频,内容包括(音视频开发,面试题,FFmpeg webRTC rtmp hls rtsp ffplay srs↓↓↓↓↓↓见下面↓↓文章底部点击免费领取↓↓

上demo

  1. void decodeThread(void *arg)
  2. {
  3. AVPacket *pkt;
  4. AVPacket pending_pkt;
  5. bool eof = false;
  6. bool packet_eof = false;
  7. int ret;
  8. bool pkt_pending = false;
  9. Input *input = (Input *)arg;
  10. av_init_packet(&pending_pkt);
  11. while (!input->is_req_exit() && !eof) {
  12. int got_picture = 0;
  13. AVFrame *frame;
  14. //线程内自动回收解码后的帧(帧链表大小为kMaxFrameCacheNum)超过则释放
  15. if (input->vfrm_list.size() >= Input::kMaxFrameCacheNum) {
  16. if (input->realtime) {
  17. AVFrame *first_frame = input->PopFrame();
  18. // printf("drop frame pts: %ld\n", first_frame->pts);
  19. av_frame_free(&first_frame);
  20. } else {
  21. msleep(5);
  22. }
  23. continue;
  24. }
  25. if (!pkt_pending) {
  26. pkt = input->PopPacket();
  27. if (!pkt) {
  28. if (packet_eof)
  29. goto get_frame;
  30. msleep(1);
  31. continue;
  32. }
  33. if (pkt->size == 0 && !input->realtime)
  34. {
  35. printf("packet_eof = true \n");
  36. packet_eof = true;
  37. }
  38. } else {
  39. pkt = &pending_pkt;//发上次没发成功的包
  40. pkt_pending = false;
  41. }
  42. ret = avcodec_send_packet(input->acc, pkt);
  43. if (ret == AVERROR(EAGAIN)) {
  44. //if(input->slice_idx == 1)
  45. // av_log(NULL, AV_LOG_ERROR, "pkt pending\n");
  46. pkt_pending = true;
  47. if (pkt != &pending_pkt)
  48. av_packet_move_ref(&pending_pkt, pkt);
  49. } else {
  50. if (pkt == &pending_pkt)
  51. {
  52. av_packet_unref(pkt);
  53. }
  54. }
  55. if (pkt != &pending_pkt)
  56. {
  57. av_packet_free(&pkt);
  58. }
  59. get_frame:
  60. frame = av_frame_alloc();
  61. av_assert0(frame);
  62. do {
  63. if (input->is_req_exit())
  64. break;
  65. ret = avcodec_receive_frame(input->acc, frame);
  66. if (ret == AVERROR_EOF) {//取完数据帧复位解码器
  67. avcodec_flush_buffers(input->acc);
  68. av_log(NULL, AV_LOG_ERROR, "avcodec_receive_frame eof\n");
  69. eof = true;
  70. break;
  71. }
  72. if (ret >= 0) {
  73. got_picture = 1;
  74. break;
  75. }
  76. //if (ret == AVERROR(EAGAIN))
  77. // msleep(5);
  78. } while (ret != AVERROR(EAGAIN));
  79. if (got_picture) {
  80. input->PushFrame(frame);
  81. } else {
  82. av_frame_free(&frame);
  83. }
  84. }
  85. }

1、获取源数据pkt

pkt = input->PopPacket();

2、将包发送到解码器

avcodec_send_packet(input->acc, pkt);

3、接收解码帧

avcodec_receive_frame(input->acc, frame);

关于接口返回值:
avcodec_send_packet返回AVERROR(EAGAIN)表示当前还无法接受新的packet,还有frame没有取出来,所以有了:

  1. if (ret == AVERROR(EAGAIN)) {
  2. pkt_pending = true;
  3. if (pkt != &pending_pkt)
  4. av_packet_move_ref(&pending_pkt, pkt);
  5. }

无法接收的pkt放到pending_pkt,接着取解码后的帧。取新的pkt时判断是否pkt_pending 是则使用之前保存的pending_pkt。

可能是存在B帧的时候会这样,因为B帧需要依赖后面的帧,所以不会解码出来,等到后面的帧传入后,就会有多个帧需要读取。这时解码器应该就不接受新的packet。

另,av_packet_move_ref这个函数就是完全的只复制,source的值完全的搬到destination,并且把source重置掉。其实就是搬了个位置,buf的引用数不改变。

新一代API是一个状态机。调用API是一种动作,API的返回值就是一种状态,通过动作可以进行状态的转换。正常情况下,状态机有6种状态:

send 0 :send_packet返回值为0,正常状态,意味着输入的packet被解码器正常接收。

send EAGAIN :send_packet返回值为EAGAIN,输入的packet未被接收,需要输出一个或多个的frame后才能重新输入当前packet。

send EOF :send_packet返回值为EOF,当send_packet输入为NULL时才会触发该状态,用于通知解码器输入packet已结束。

receive 0 :receive_frame返回值为0,正常状态,意味着已经输出一帧。

receive EAGAIN:receive_frame返回值为EAGAIN,未能输出frame,需要输入更多的packet才能输出当前frame。

receive EOF :receive_frame返回值为EOF,当处于send EOF状态后,调用一次或者多次receive_frame后就能得到该状态,表示所有的帧已经被输出。

解码帧全部接收完成会返回EOF这时需要调用
avcodec_flush_buffers(input->acc);
来复位重置解码器。

本文福利, 免费领取C++音视频学习资料包、技术视频,内容包括(音视频开发,面试题,FFmpeg webRTC rtmp hls rtsp ffplay srs↓↓↓↓↓↓见下面↓↓文章底部点击免费领取↓↓ 

声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:【wpsshop博客】
推荐阅读
  

闽ICP备14008679号