当前位置:   article > 正文

[C++]使用yolov10的onnx模型结合onnxruntime和bytetrack实现目标追踪

[C++]使用yolov10的onnx模型结合onnxruntime和bytetrack实现目标追踪

【官方框架地址】 

yolov10yolov10框架:https://github.com/THU-MIG/yolov10

bytetrack框架:https://github.com/ifzhang/ByteTrack

【算法介绍】

Yolov10与ByTetrack:目标追踪的强大组合

Yolov10和ByTetrack是两种在目标追踪领域具有显著影响力的技术。当它们结合使用时,可以显著提高目标追踪的准确性和实时性。

Yolov10是Yolov系列算法的最新版本,它在目标检测方面具有出色的性能。相较于之前的版本,Yolov10在精度和速度上都进行了优化,使其成为实时目标检测的理想选择。通过结合ByTetrack,Yolov10可以更有效地应用于目标追踪任务。

ByTetrack是一种基于轨迹匹配的目标追踪方法。它利用目标的运动信息和外观特征进行追踪,能够在复杂场景下实现稳定的目标追踪。ByTetrack的优势在于其强大的鲁棒性和适应性,即使在目标被遮挡或出现运动模糊的情况下,它仍能保持较高的追踪精度。

当Yolov10与ByTetrack结合使用时,Yolov5首先检测视频中的目标,并生成目标的初始位置和运动轨迹。然后,ByTetrack利用这些信息对目标进行精确追踪。这种结合方式既发挥了Yolov10的高检测精度,又利用了ByTetrack的高追踪精度,使得整体目标追踪效果显著提升。

综上所述,Yolov10与ByTetrack的结合为解决复杂场景下的目标追踪问题提供了新的解决方案。随着人工智能技术的不断进步,这种结合方式有望成为目标追踪领域的研究热点和发展趋势。通过进一步的研究和优化,我们可以期待这种组合在未来的目标追踪任务中发挥更大的潜力。

【效果展示】

【实现部分代码】

  1. #include "YOlov10Manager.h"
  2. #include <iostream>
  3. #include <opencv2/opencv.hpp>
  4. #include "BYTETracker.h"
  5. #include <fstream>
  6. #include <iomanip>
  7. #include <time.h>
  8. #include <chrono>
  9. #include "util.h"
  10. #include <map>
  11. #include<vector>
  12. #include<algorithm>
  13. using namespace std;
  14. using namespace cv;
  15. void bytetrack_update(const std::vector<Detection>& res, std::vector<Object>& obj, const int& class_id ){
  16. for (size_t i = 0; i < res.size(); i++){
  17. try
  18. {
  19. if (res[i].class_id != class_id){ continue; }
  20. obj[i].label = res[i].class_id;
  21. obj[i].rect.x = res[i].bbox.x;
  22. obj[i].rect.y = res[i].bbox.y;
  23. obj[i].rect.height = res[i].bbox.height;
  24. obj[i].rect.width = res[i].bbox.width;
  25. obj[i].prob = res[i].confidence;
  26. }
  27. catch(const std::exception& e)
  28. {
  29. std::cerr << e.what() << '\n';
  30. }
  31. }
  32. };
  33. int main(int argc, char const *argv[])
  34. {
  35. std::map<int, std::vector<int>> object_id_list;
  36. const std::vector<std::string> classNames = util::loadNames("labels.txt");
  37. const int class_id = 2;//只想追踪的目标
  38. std::string model_path="yolov10n.onnx";
  39. Yolov10Manager detector(model_path);
  40. cv::Mat frame;
  41. std::vector <double> avg;
  42. cv::VideoCapture cap("car.mp4");
  43. std::chrono::time_point<std::chrono::high_resolution_clock>prev_frame_time(std::chrono::high_resolution_clock::now());
  44. std::chrono::time_point<std::chrono::high_resolution_clock>new_frame_time;
  45. int frame_width = cap.get(cv::CAP_PROP_FRAME_WIDTH);
  46. int frame_height = cap.get(cv::CAP_PROP_FRAME_HEIGHT);
  47. int fpsvideo = cap.get(cv::CAP_PROP_FPS);
  48. cv::namedWindow("Camera", cv::WINDOW_NORMAL);
  49. BYTETracker tracker(fpsvideo, 30);
  50. while (cap.isOpened()) {
  51. cap >> frame;
  52. if (frame.empty())
  53. {
  54. break;
  55. }
  56. std::vector<Object> obj;
  57. auto results = detector.Inference(frame);
  58. const int num = results.size();
  59. obj.resize(num);
  60. bytetrack_update(results, obj, class_id);
  61. std::vector<STrack> output_stracks = tracker.update(obj);
  62. for (size_t i = 0; i < output_stracks.size(); i++){
  63. std::vector<float> tlwh = output_stracks[i].tlwh;
  64. cv::Scalar __color = tracker.get_color(output_stracks[i].track_id);
  65. cv::putText(frame, std::to_string(output_stracks[i].track_id), cv::Point(tlwh[0], tlwh[1] - 10), cv::FONT_ITALIC, 0.75, __color, 2);
  66. cv::rectangle(frame, cv::Rect(tlwh[0], tlwh[1], tlwh[2], tlwh[3]), __color, 2);
  67. }
  68. //cv::imwrite("demo.jpg", frame);
  69. new_frame_time = std::chrono::high_resolution_clock::now();
  70. std::chrono::duration<double> duration1(new_frame_time - prev_frame_time);
  71. double fps = 1/duration1.count();
  72. avg.push_back(fps);
  73. std::cout <<"FPS: " << fps << std::endl;
  74. prev_frame_time = new_frame_time;
  75. cv::imshow("Camera", frame);
  76. if (cv::waitKey(1) == 27) {
  77. break;
  78. }
  79. }
  80. cap.release();
  81. cv::destroyAllWindows();
  82. return 0;
  83. }

【视频演示】
基于opencv和onnxruntime的C++版本yolov10-onnx和bytetrack追踪算法实现目标追踪_哔哩哔哩_bilibili测试环境:vs2019cmake==3.24.3opencv==4.7.0onnxruntime==1.12.0更多信息参考博文:, 视频播放量 2、弹幕量 0、点赞数 0、投硬币枚数 0、收藏人数 0、转发人数 0, 视频作者 未来自主研究中心, 作者简介 未来自主研究中心,相关视频:AI换脸真变态,绅士必备的一键启动包!,使用纯opencv部署yolov8目标检测模型onnx,基于yolov8+bytetrack实现目标追踪视频演示,易语言部署yolox的onnx模型,C语言、C++和C#的区别竟是这样,看完我瞬间懂了!,基于yolov8官方目标追踪botsort和bytetrack源码开发视频演示,基于C++版本yolov5-onnx和bytetrack追踪算法实现目标追踪,使用C++部署yolov8的onnx和bytetrack实现目标追踪,将yolov8封装成一个类几行代码完成语义分割任务,使用C#的winform部署yolov8的onnx实例分割模型icon-default.png?t=N7T8https://www.bilibili.com/video/BV1rZ421M77T/
【测试环境】
 opencv==4.7.0 onnxruntime==1.12.0 vs2019 cmake==3.24.3 

 【源码下载地址】

https://download.csdn.net/download/FL1623863129/89442051

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/正经夜光杯/article/detail/737716
推荐阅读
相关标签
  

闽ICP备14008679号