赞
踩
本文的训练教程使用的是2023-07-20从github仓库拉取的代码以及模型,tag是0.1版本,其他版本的训练可能会有所改动
本文主要是教工作室同学使用yolov7,欢迎大佬指出错误
直接在终端执行,拉取的项目文件会存放在当前的目录里面,拉取之前注意需要先进入自己存放项目的目录
使用这种方法需要提前安装好git
git clone https://github.com/WongKinYiu/yolov7.git
下载之后解压到自己的目录即可
使用zip的方式下载和使用git clone的方式下载得到的文件夹里面的内容是一样的,如下
在下载下来的文件夹里面创建一个weights的文件夹,用于存放下载下来的模型文件,也可以直接存放在项目根目录下面,看个人喜好
在github仓库里面向下拉找到Performance,如下
两个位置下载的模型都是一样的,一般使用的是第一个模型,直接下载到刚才创建的文件夹即可
已经有python环境的可以直接跳过
下载之后直接安装即可,选择仅为个人用户安装,然后后面需要勾选的全部勾选上,如果没勾可能需要单独配置环境变量
单独配置环境变量
使用windows搜索env,进入编辑账户环境变量,如下
添加如下环境变量
在系统环境变量path里面添加
添加到用户path也可以
安装完成之后打开命令提示符
使用conda info
查看conda的环境变量是否配置完成,如下
下载地址 Miniconda — conda documentation
这个的安装和anaconda一样,对照使用
目前只有Nvidia显卡支持使用GPU训练,需要安装cuda和cudnn,使用AMD和intel的显卡的电脑目前只能用CPU训练(可能有大佬能使用这两家的显卡进行训练,我只是小白,大佬勿喷)
下载地址:
CUDA Toolkit 12.2 Downloads | NVIDIA Developer
下载地址进去默认是最新版,可以拉大最后选择自己需要的版本
版本选择界面是下面这样的
下载下来的cuda安装包是一个.exe文件,直接双击运行,安装过程中可以选择一下安装的位置,其他有需要勾选的地方全部勾选上
默认安装位置是(我使用的是11.3的版本)
C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.3
配置环境变量
使用windows搜索env,进入编辑账户环境变量,如下
添加如下环境变量
在系统环境变量path里面添加
注意将这两个路径换成自己的安装路径
然后打开cmd命令框,使用nvcc -V
和nvidia-smi
分别查看,得到类似下图的即可
cudnn
下载地址
cudnn下载下来之后解压到cuda的安装路径即可
解压到这个目录下面即可,如果提示有重复文件选择覆盖
创建一个conda环境
直接在终端运行conda create -n yolo python=3.10
在创建环境的同时安装python3.10,如下
创建完成会有如下输出
使用conda activate yolo
进入创建好的环境
切换到yolov7文件存放的位置
注意里面的文件必须有 requirements.txt
然后配置yolo需要的python环境包,运行pip install -i https://pypi.mirrors.ustc.edu.cn/simple/ -r requirements.txt
等待所有包安装完成即可
检测torch能不能调用cuda
在终端进入python环境然后运行
import torch
torch.cuda.is_available()
返回true即可,如果返回的是其他值则需要重新安装torch
需要先卸载之后再安装
卸载指令:pip uninstall torch
进入pytorch官网,链接:PyTorch
按照自己的环境配置选择,并复制下方指令,在其后面加入清华源链接安装
安装完成之后再次测试,结果如下即可
到此,环境配置完成
使用cpu训练不需要配置cuda和cudnn,只需配置python环境即可
创建一个conda环境
直接在终端运行conda create -n yolo python=3.10
在创建环境的同时安装python3.10,如下
创建完成会有如下输出
使用conda activate yolo
进入创建好的环境
切换到yolov7文件存放的位置
注意里面的文件必须有 requirements.txt
然后配置yolo需要的python环境包,运行pip install -i https://pypi.mirrors.ustc.edu.cn/simple/ -r requirements.txt
等待所有包安装完成即可
使用labelimg
,这个组件可以使用pip
安装,安装指令
pip install -i https://pypi.mirrors.ustc.edu.cn/simple/ labelimg
安装之后直接使用labelimg
运行即可
标记完成之后会生成对应文件的.txt文件,这个保存的是标签数据
还有一个classes.txt
,这里保存的是每个标签的顺序,这个顺序在多人标注的时候不能乱,在训练的时候需要用到这个顺序
标注完成之后将图片和标注数据分别存放在两个文件夹里面,如下
将这个数据集存放于yolov7文件夹里面的data里面,类似于
将数据集划分为train、test、val三部分,分别用于训练、测试和验证三部分,在数据集较小的时候可以不用测试部分
使用下面代码进行划分,这个代码只划分了训练和验证,没有测试,注意修改35和36行代码,还有21、26行(生成txt文件的路径)
# 划分数据集 import os import random def split_files(folder_path, ratio): # 获取文件夹中的文件列表 file_list = os.listdir(folder_path) # 计算划分的文件数量 total_files = len(file_list) num_files_part1 = int(total_files * ratio) num_files_part2 = total_files - num_files_part1 # 随机划分文件 random.shuffle(file_list) part1_files = file_list[:num_files_part1] part2_files = file_list[num_files_part1:] # 将划分结果写入 txt 文件 with open("./data/coffee/train_list.txt", "w") as f: for filename in part1_files: abs_path = os.path.join(folder_path, filename) f.write(abs_path + "\n") with open("./data/coffee/val_list.txt", "w") as f: for filename in part2_files: abs_path = os.path.join(folder_path, filename) f.write(abs_path + "\n") print("Splitting files completed.") if __name__ == "__main__": folder_path = r"D:\study_documents\test_file\yolov7\data\coffee\images" # 替换为实际的文件夹路径 ratio = 0.9 # 指定训练部分的文件数量比例 split_files(folder_path, ratio)
这个代码划分之后会生成两个txt文件,里面的内容如下
将data里面的coco.yaml文件修改为如下格式
# train and val data as 1) directory: path/images/, 2) file: path/images.txt, or 3) list: [path1/images/, path2/images/]
train: D:\study_documents\test_file\yolov7\data\coffee\train_list.txt
val: D:\study_documents\test_file\yolov7\data\coffee\val_list.txt
# number of classes
nc: 1
# class names
names: ['impurity']
其中nc是标注数据集时候的种类
names是标注时候的类别名字,这个需要和上面提到的classes.txt顺序一样
第二行和第三行按照自己的路径修改即可
修改train.py文件
找到配置参数,我拉取的版本在527行开始,我将需要注意的参数标注出来,可以参考一下
这些参数修改之后直接运行即可,显存小的或者使用cpu训练的注意将**–batch-size**改小一点
--weights
(类型:字符串,默认值:‘yolov7.pt’):
--cfg
(类型:字符串,默认值:‘cfg/training/yolov7.yaml’):
--data
(类型:字符串,默认值:‘data/coco.yaml’):
--hyp
(类型:字符串,默认值:‘data/hyp.scratch.p5.yaml’):
--epochs
(类型:整数,默认值:300):
--batch-size
(类型:整数,默认值:8):
--img-size
(nargs=‘+’, 类型:整数列表,默认值:[640, 640]):
--rect
(action=‘store_true’):
--resume
(nargs=‘?’, const=True, 默认值:False):
--resume checkpoints/last.pt
。--nosave
(action=‘store_true’):
--notest
(action=‘store_true’):
--noautoanchor
(action=‘store_true’):
--evolve
(action=‘store_true’):
--bucket
(类型:字符串,默认值:‘’):
--cache-images
(action=‘store_true’):
--image-weights
(action=‘store_true’):
--device
(默认值=‘0’):
--multi-scale
(action=‘store_true’):
--single-cls
(action=‘store_true’):
--adam
(action=‘store_true’):
--sync-bn
(action=‘store_true’):
--local_rank
(类型:整数,默认值:-1):
--workers
(类型:整数,默认值:1):
--project
(默认值=‘runs/train’):
训练得到的模型保存在runs/train/exp/weights里面,使用best.pt模型,其余模型可以删除,
修改detect.py,修改以下参数
只需修改对应的参数即可
--weights
:该参数用于指定模型权重(model.pt)文件的路径。可以接受多个路径,用于使用集成模型。修改成自己的模型路径。
--source
:该参数用于指定推理的输入数据来源。可以是文件/文件夹路径,也可以是0,表示使用摄像头作为输入源。
--img-size
:该参数设置推理时输入图像的尺寸,以像素为单位。默认值为640。
--conf-thres
:该参数设置对象置信度阈值,低于该阈值的任何检测到的对象将被丢弃。默认值为0.25。
--iou-thres
:该参数设置非最大抑制(NMS)的交并比(IOU)阈值。用于抑制重复的检测结果。默认值为0.45。
--device
:该参数用于指定推理所使用的设备,可以选择’cuda’加上GPU设备编号(例如,‘0’或’0,1,2,3’)或’cpu’。
--view-img
:这是一个标志参数。如果出现,则会显示推理结果,允许可视化检测到的对象,添加一个default=Ture/Faulse来指定这个参数是否生效。
--save-txt
:这是一个标志参数。如果出现,则会将推理结果保存为.txt文件,添加一个default=Ture/Faulse来指定这个参数是否生效。
--save-conf
:这是一个标志参数。如果出现,则会将检测到的对象的置信度与.txt结果一起保存,添加一个default=Ture/Faulse来指定这个参数是否生效。
--nosave
:这是一个标志参数。如果出现,则会禁止保存带有绘制边界框的图像或视频,用于检测到的对象,添加一个default=Ture/Faulse来指定这个参数是否生效。
--classes
:该参数允许您基于特定类别过滤检测到的对象。您可以指定类别ID,只在检测结果中包括这些类别。
--agnostic-nms
:这是一个标志参数。如果出现,则会启用无类别非最大抑制,意味着在NMS过程中不考虑类别信息。
--augment
:这是一个标志参数。如果出现,则会启用增强推理,即在推理过程中应用数据增强,以提高检测准确性。
--update
:这是一个标志参数。如果出现,则会更新--weights
参数指定的所有模型。
--project
:该参数用于指定保存结果的项目目录。默认值为’runs/detect’。
--name
:该参数用于指定实验的名称。默认值为’exp’。
--exist-ok
:这是一个标志参数。如果出现,则允许在不递增的情况下使用具有相同名称的现有项目。
--no-trace
:这是一个标志参数。如果出现,则会阻止在推理过程中对模型进行追踪。追踪是一种用于优化模型以实现更快推理的技术。
下载路径
NVIDIA TensorRT 8.x Download | NVIDIA Developer
注意版本
下载之后先解压
tar -zxvf TensorRT-8.6.1.6.Linux.x86_64-gnu.cuda-11.8.tar.gz
配置环境变量
# 修改单个用户的环境变量文件
vim ~/.bashrc
# 添加下面两条变量,注意修改成自己的路径
export LD_LIBRARY_PATH=/home/bigdata/mmd/file/TensorRT-8.6.1.6/lib:$LD_LIBRARY_PATH
export LIBRARY_PATH=/home/bigdata/mmd/file/TensorRT-8.6.1.6/lib::$LIBRARY_PATH
# 重新加载环境变量
source ~/.bashrc
然后安装对应的python包
需要安装的python包分别在python、uuf、onnx_graphsurgeon里面,python里面需要安装的有三个,选择对应的python版本安装就行
安装指令
pip install *.whl
与linux一样的下载之后先解压
将解压目录添加到环境变量的path里面,如下
只需在系统变量和用户变量选一个添加即可。
接下来复制文件
将 TensorRT-8.6.1.6\include中头文件复制到C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.3\include
将TensorRT-8.6.1.6\lib 中所有lib文件复制 到C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.3\lib\x64
将TensorRT-8.6.1.6\lib 中所有dll文件复制到C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.3\bin
注意将上面的路径改成自己的安装路径
然后安装相应的python包
这一步与Linux版本的一样,需要安装的python包分别在python、uuf、onnx_graphsurgeon里面,python里面需要安装的有三个,选择对应的python版本安装就行
安装指令
pip install *.whl
至此TensotRT已经配置完成。
修改export.py,如下
修改自己需要转的模型路径之后直接运行即可,会在对应的位置生成**.mlmodel**、.onnx、.torchscript.pt、torcscript.ptl结尾的四个类型的文件,我们只需要注意**.onnx**结尾的这个文件即可
将**.onnx结尾的文件复制到下载解压的TensorRT-8.6.1.6\bin**里面,如下
在这个目录进入终端然后进入运行yolo的环境,如下
使用TensorRT自带的trtexec.exe将**.onnx转成.engine**,转换指令如下
trtexec --onnx=./best.onnx --saveEngine=./best_fp16.engine --fp16 --workspace=200
#Linux同样可以使用这种方法转换,下面是命令
./trtexec --onnx=./best.onnx --saveEngine=./best_fp16.engine --fp16 --workspace=200
转换完成之后会在刚才的目录下面生成一个**.engine**结尾的文件,如下
这个就是我们最终需要的模型,将这个模型复制到yolov7里面和export.py同级的目录下
在yolov7目录下创建一个infer.py的文件,文件内容如下
import cv2 import tensorrt as trt import torch import numpy as np from collections import OrderedDict, namedtuple class TRT_engine(): def __init__(self, weight) -> None: self.imgsz = [640, 640] self.weight = weight self.device = torch.device('cuda:0') self.init_engine() def init_engine(self): # Infer TensorRT Engine self.Binding = namedtuple('Binding', ('name', 'dtype', 'shape', 'data', 'ptr')) self.logger = trt.Logger(trt.Logger.INFO) trt.init_libnvinfer_plugins(self.logger, namespace="") with open(self.weight, 'rb') as self.f, trt.Runtime(self.logger) as self.runtime: self.model = self.runtime.deserialize_cuda_engine(self.f.read()) self.bindings = OrderedDict() self.fp16 = False for index in range(self.model.num_bindings): self.name = self.model.get_binding_name(index) self.dtype = trt.nptype(self.model.get_binding_dtype(index)) self.shape = tuple(self.model.get_binding_shape(index)) self.data = torch.from_numpy(np.empty(self.shape, dtype=np.dtype(self.dtype))).to(self.device) self.bindings[self.name] = self.Binding(self.name, self.dtype, self.shape, self.data, int(self.data.data_ptr())) if self.model.binding_is_input(index) and self.dtype == np.float16: self.fp16 = True self.binding_addrs = OrderedDict((n, d.ptr) for n, d in self.bindings.items()) self.context = self.model.create_execution_context() def letterbox(self, im, color=(114, 114, 114), auto=False, scaleup=True, stride=32): # Resize and pad image while meeting stride-multiple constraints shape = im.shape[:2] # current shape [height, width] new_shape = self.imgsz if isinstance(new_shape, int): new_shape = (new_shape, new_shape) # Scale ratio (new / old) self.r = min(new_shape[0] / shape[0], new_shape[1] / shape[1]) if not scaleup: # only scale down, do not scale up (for better val mAP) self.r = min(self.r, 1.0) # Compute padding new_unpad = int(round(shape[1] * self.r)), int(round(shape[0] * self.r)) self.dw, self.dh = new_shape[1] - new_unpad[0], new_shape[0] - new_unpad[1] # wh padding if auto: # minimum rectangle self.dw, self.dh = np.mod(self.dw, stride), np.mod(self.dh, stride) # wh padding self.dw /= 2 # divide padding into 2 sides self.dh /= 2 if shape[::-1] != new_unpad: # resize im = cv2.resize(im, new_unpad, interpolation=cv2.INTER_LINEAR) top, bottom = int(round(self.dh - 0.1)), int(round(self.dh + 0.1)) left, right = int(round(self.dw - 0.1)), int(round(self.dw + 0.1)) self.img = cv2.copyMakeBorder(im, top, bottom, left, right, cv2.BORDER_CONSTANT, value=color) # add border return self.img, self.r, self.dw, self.dh def preprocess(self, image): self.img, self.r, self.dw, self.dh = self.letterbox(image) self.img = self.img.transpose((2, 0, 1)) self.img = np.expand_dims(self.img, 0) self.img = np.ascontiguousarray(self.img) self.img = torch.from_numpy(self.img).to(self.device) self.img = self.img.float() return self.img def predict(self, img, threshold): img = self.preprocess(img) self.binding_addrs['images'] = int(img.data_ptr()) self.context.execute_v2(list(self.binding_addrs.values())) nums = self.bindings['num_dets'].data[0].tolist() boxes = self.bindings['det_boxes'].data[0].tolist() scores = self.bindings['det_scores'].data[0].tolist() classes = self.bindings['det_classes'].data[0].tolist() num = int(nums[0]) new_bboxes = [] for i in range(num): if (scores[i] < threshold): continue xmin = (boxes[i][0] - self.dw) / self.r ymin = (boxes[i][1] - self.dh) / self.r xmax = (boxes[i][2] - self.dw) / self.r ymax = (boxes[i][3] - self.dh) / self.r new_bboxes.append([classes[i], scores[i], xmin, ymin, xmax, ymax]) return new_bboxes def visualize(img, bbox_array): for temp in bbox_array: xmin = int(temp[2]) ymin = int(temp[3]) xmax = int(temp[4]) ymax = int(temp[5]) clas = int(temp[0]) score = temp[1] cv2.rectangle(img, (xmin, ymin), (xmax, ymax), (105, 237, 249), 2) img = cv2.putText(img, "class:" + str(clas) + " " + str(round(score, 2)), (xmin, int(ymin) - 5), cv2.FONT_HERSHEY_SIMPLEX, 0.5, (105, 237, 249), 1) return img trt_engine = TRT_engine("./best_fp16.engine") # 使用摄像头进行实时预测 cap = cv2.VideoCapture(0) # 0表示默认摄像头,如果有多个摄像头可以选择其他索引号 while True: ret, frame = cap.read() # 读取一帧图像 if not ret: break results = trt_engine.predict(frame, threshold=0.5) frame = visualize(frame, results) cv2.imshow("Camera", frame) if cv2.waitKey(1) & 0xFF == ord('q'): # 按下 'q' 键退出循环 break cap.release() # 释放摄像头 cv2.destroyAllWindows() # 预测单张图片 # img = cv2.imread("./data/coffee/images/1.jpg") # results = trt_engine.predict(img, threshold=0.5) # img = visualize(img, results) # cv2.imshow("img", img) # cv2.waitKey(0)
修改**.engine**路径之后直接运行即可,使用摄像头预测和单张图片预测只能开一个,另一个在运行的时候需要注释掉
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。