当前位置:   article > 正文

yolov8环境配置加训练自己的数据集保姆级教程(2024)_yolov8数据集

yolov8数据集

目录

1.环境配置

1.1 前期准备

1.2创建虚拟环境

1.2.1安装cuda以及cudnn(gpu使用)

1.2.2安装pytorch框架

 1.2.3 安装各种需要的基本包

 训练自己的数据集(v8使用)

1.1数据集准备(jpg加xml)

1.1.2新建文件夹

1.1.2运行代码(划分数据集以及转txt格式)(关于代码路径都改自己的路径!!!)

1.2运行训练代码


1.环境配置

1.1 前期准备

确保电脑里面安装了anaconda ,pycharm,win10/11(可用)

anaconda下载地址https://www.anaconda.com/download/

下载慢可用清华镜像站下载https://repo.anaconda.com/archive/

pycharm下载地址https://www.jetbrains.com.cn/en-us/pycharm/download/?section=windows

1.2创建虚拟环境

打开Anaconda Prompt

  1. conda create -n YOLOv8 python=3.8 #创建YOLOv8的环境
  2. conda activate YOLOv8 #激活环境
1.2.1安装cuda以及cudnn(gpu使用)

1.win+r打开cmd输入 nvidia-smi 查询自己电脑支持的cuda 

笔者笔记本支持就是12.4(安装是只能向下兼容)笔者这里选择的是cuda11.6

cuda安装地址

CUDA Toolkit Archive | NVIDIA Developer(建议不要使用校园网访问或许会出现问题)

cudnn安装地址

cuDNN 9.2.0 Downloads | NVIDIA Developer(会让你注册账号下载,)

cudnn下载完会获得一些文件把这些文件去替换cuda安装根目录的文件即可

 打开系统高级设置-环境变量-系统变量中path中添加这些变量即可(顶上的两个)

  1. C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.6\bin
  2. C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.6\libnvvp

1.2.2安装pytorch框架

在Anaconda Prompt激活你的环境并且配置源

  1. # 添加清华源
  2. conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
  3. conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/conda-forge/
  4. conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/
  5. # 添加阿里云镜像源
  6. conda config --add channels https://mirrors.aliyun.com/anaconda/pkgs/free/
  7. conda config --add channels https://mirrors.aliyun.com/anaconda/pkgs/main/
  8. # 添加中科大源
  9. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/pkgs/free/
  10. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/pkgs/main/
  11. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/conda-forge/
  12. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/msys2/
  13. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/bioconda/
  14. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/menpo/
  15. # (可选)设置搜索时显示通道地址
  16. conda config --set show_channel_urls yes

方法一用指令直接安装

pip3 install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu116

方法二 在阿里官方镜像站安装pytorch-wheels安装包下载_开源镜像站-阿里云 (aliyun.com)

找到自己对应的版本下载(cu意思是gpu版本,cp代表python版本,win代表是系统)

我的版本为torch==1.12.0+cu116,torchaudio0.12.0+cu116,torchvision0.13.0+cu116

下载完成之后在你的环境中输入pip install 加上你下载的文件地址

比如笔者的是 pip install C:\Users\hxw76\Downloads\torchvision-0.13.0+cu116-cp38-cp38-win_amd64.whl

 1.2.3 安装各种需要的基本包
  1. pip install ultralytics
  2. pip install yolo

 可以下载我的源码(要保证requiremen.txt运行目录里否则找不到报错) 

如果还有什么缺少什么库,那么报错就直接pip install安装就好了,有些库的版本不能太高否则不兼容

yolo predict model=yolov8n.pt source='ultralytics/assets/bus.jpg'#检验yolov8是否能运行

 训练自己的数据集(v8使用)

1.1数据集准备(jpg加xml)

1.1.2新建文件夹

在data文件夹里面新建一个datasets再在里面新建四个文件夹分别是Annotations(存放xml的文件夹),images(存放你的数据集的图片),ImageSets,labels。(笔者已经建好了,里面也是有存放的东西的,但新建的话只要按我前面说的放图片就行,如果你打算训练你自己的就把文件夹里面的内容删成我提到的一样即可)

1.1.2运行代码(划分数据集以及转txt格式)(关于代码路径都改自己的路径!!!)

运行splitDataset.py按一定比例划分数据集

  1. import os
  2. import random
  3. #按比例划分数据集
  4. #涉及路径的一定要改成自己的
  5. trainval_percent = 0.9
  6. train_percent = 0.9
  7. xmlfilepath = 'D:/yolov8/ultralytics-main/ultralytics/data/datasets/Annotations'
  8. txtsavepath = 'D:/yolov8/ultralytics-main/ultralytics/data/datasets/ImageSets'
  9. total_xml = os.listdir(xmlfilepath)
  10. num = len(total_xml)
  11. list = range(num)
  12. tv = int(num * trainval_percent)
  13. tr = int(tv * train_percent)
  14. trainval = random.sample(list, tv)
  15. train = random.sample(trainval, tr)
  16. ftrainval = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/ImageSets/trainval.txt', 'w')
  17. ftest = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/ImageSets/test.txt', 'w')
  18. ftrain = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/ImageSets/train.txt', 'w')
  19. fval = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/ImageSets/val.txt', 'w')
  20. for i in list:
  21. name = total_xml[i][:-4] + '\n'
  22. if i in trainval:
  23. ftrainval.write(name)
  24. if i in train:
  25. ftrain.write(name)
  26. else:
  27. fval.write(name)
  28. else:
  29. ftest.write(name)
  30. ftrainval.close()
  31. ftrain.close()
  32. fval.close()
  33. ftest.close()

再运行转格式xml转txt

XMLtoTXT.py 

  1. # -*- coding: utf-8 -*-
  2. # xml解析包
  3. import xml.etree.ElementTree as ET
  4. import pickle
  5. import os
  6. from os import listdir, getcwd
  7. from os.path import join
  8. #将xml文件转换成YOLO系列标准读取的txt文件
  9. sets = ['train', 'test', 'val']
  10. classes = ['airplane']
  11. # 进行归一化操作
  12. def convert(size, box): # size:(原图w,原图h) , box:(xmin,xmax,ymin,ymax)
  13. dw = 1./size[0] # 1/w
  14. dh = 1./size[1] # 1/h
  15. x = (box[0] + box[1])/2.0 # 物体在图中的中心点x坐标
  16. y = (box[2] + box[3])/2.0 # 物体在图中的中心点y坐标
  17. w = box[1] - box[0] # 物体实际像素宽度
  18. h = box[3] - box[2] # 物体实际像素高度
  19. x = x*dw # 物体中心点x的坐标比(相当于 x/原图w)
  20. w = w*dw # 物体宽度的宽度比(相当于 w/原图w)
  21. y = y*dh # 物体中心点y的坐标比(相当于 y/原图h)
  22. h = h*dh # 物体宽度的宽度比(相当于 h/原图h)
  23. return (x, y, w, h) # 返回 相对于原图的物体中心点的x坐标比,y坐标比,宽度比,高度比,取值范围[0-1]
  24. # year ='2012', 对应图片的id(文件名)
  25. def convert_annotation(image_id):
  26. '''
  27. 将对应文件名的xml文件转化为label文件,xml文件包含了对应的bunding框以及图片长款大小等信息,
  28. 通过对其解析,然后进行归一化最终读到label文件中去,也就是说
  29. 一张图片文件对应一个xml文件,然后通过解析和归一化,能够将对应的信息保存到唯一一个label文件中去
  30. labal文件中的格式:calss x y w h  同时,一张图片对应的类别有多个,所以对应的bunding的信息也有多个
  31. '''
  32. # 对应的通过year 找到相应的文件夹,并且打开相应image_id的xml文件,其对应bund文件
  33. in_file = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/Annotations/%s.xml' % (image_id), encoding='utf-8')
  34. # 准备在对应的image_id 中写入对应的label,分别为
  35. # <object-class> <x> <y> <width> <height>
  36. out_file = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/labels/%s.txt' % (image_id), 'w', encoding='utf-8')
  37. # 解析xml文件
  38. tree = ET.parse(in_file)
  39. # 获得对应的键值对
  40. root = tree.getroot()
  41. # 获得图片的尺寸大小
  42. size = root.find('size')
  43. # 如果xml内的标记为空,增加判断条件
  44. if size != None:
  45. # 获得宽
  46. w = int(size.find('width').text)
  47. # 获得高
  48. h = int(size.find('height').text)
  49. # 遍历目标obj
  50. for obj in root.iter('object'):
  51. # 获得difficult ??
  52. difficult = obj.find('difficult').text
  53. # 获得类别 =string 类型
  54. cls = obj.find('name').text
  55. # 如果类别不是对应在我们预定好的class文件中,或difficult==1则跳过
  56. if cls not in classes or int(difficult) == 1:
  57. continue
  58. # 通过类别名称找到id
  59. cls_id = classes.index(cls)
  60. # 找到bndbox 对象
  61. xmlbox = obj.find('bndbox')
  62. # 获取对应的bndbox的数组 = ['xmin','xmax','ymin','ymax']
  63. b = (float(xmlbox.find('xmin').text), float(xmlbox.find('xmax').text), float(xmlbox.find('ymin').text),
  64. float(xmlbox.find('ymax').text))
  65. print(image_id, cls, b)
  66. # 带入进行归一化操作
  67. # w = 宽, h = 高, b= bndbox的数组 = ['xmin','xmax','ymin','ymax']
  68. bb = convert((w, h), b)
  69. # bb 对应的是归一化后的(x,y,w,h)
  70. # 生成 calss x y w h 在label文件中
  71. out_file.write(str(cls_id) + " " + " ".join([str(a) for a in bb]) + '\n')
  72. # 返回当前工作目录
  73. wd = getcwd()
  74. print(wd)
  75. for image_set in sets:
  76. '''
  77. 对所有的文件数据集进行遍历
  78. 做了两个工作:
  79.     1.将所有图片文件都遍历一遍,并且将其所有的全路径都写在对应的txt文件中去,方便定位
  80.     2.同时对所有的图片文件进行解析和转化,将其对应的bundingbox 以及类别的信息全部解析写到label 文件中去
  81.      最后再通过直接读取文件,就能找到对应的label 信息
  82. '''
  83. # 先找labels文件夹如果不存在则创建
  84. if not os.path.exists('D:/yolov8/ultralytics-main/ultralytics/data/datasets/labels/'):
  85. os.makedirs('D:/yolov8/ultralytics-main/ultralytics/data/datasets/labels/')
  86. # 读取在ImageSets/Main 中的train、test..等文件的内容
  87. # 包含对应的文件名称
  88. image_ids = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/ImageSets/%s.txt' % (image_set)).read().strip().split()
  89. # 打开对应的2012_train.txt 文件对其进行写入准备
  90. list_file = open('D:/yolov8/ultralytics-main/ultralytics/data/datasets/%s.txt' % (image_set), 'w')
  91. # 将对应的文件_id以及全路径写进去并换行
  92. for image_id in image_ids:
  93. list_file.write('D:/yolov8/ultralytics-main/ultralytics/data/datasets/images/%s.jpg\n' % (image_id))
  94. # 调用 year = 年份 image_id = 对应的文件名_id
  95. convert_annotation(image_id)
  96. # 关闭文件
  97. list_file.close()

*查看自己的标签名字(运行不运行不影响结果)

ViewCategory.py

  1. import os
  2. from unicodedata import name
  3. import xml.etree.ElementTree as ET
  4. import glob
  5. #查看自定义数据集标签类别及数量
  6. def count_num(indir):
  7. label_list = []
  8. # 提取xml文件列表
  9. os.chdir(indir)
  10. annotations = os.listdir('.')
  11. annotations = glob.glob(str(annotations) + '*.xml')
  12. dict = {} # 新建字典,用于存放各类标签名及其对应的数目
  13. for i, file in enumerate(annotations): # 遍历xml文件
  14. # actual parsing
  15. in_file = open(file, encoding='utf-8')
  16. tree = ET.parse(in_file)
  17. root = tree.getroot()
  18. # 遍历文件的所有标签
  19. for obj in root.iter('object'):
  20. name = obj.find('name').text
  21. if (name in dict.keys()):
  22. dict[name] += 1 # 如果标签不是第一次出现,则+1
  23. else:
  24. dict[name] = 1 # 如果标签是第一次出现,则将该标签名对应的value初始化为1
  25. # 打印结果
  26. print("各类标签的数量分别为:")
  27. for key in dict.keys():
  28. print(key + ': ' + str(dict[key]))
  29. label_list.append(key)
  30. print("标签类别如下:")
  31. print(label_list)
  32. if __name__ == '__main__':
  33. # xml文件所在的目录,修改此处
  34. indir = 'D:/yolov8/ultralytics-main/ultralytics/data/datasets/Annotations'
  35. count_num(indir) # 调用函数统计各类标签数目

1.2运行训练代码

pychrm打开ultralytics-main选择环境(右下角设置-解释器设置-ananconda配好的yolov8环境)

打开终端输入训练代码 
 

  1. yolo detect train data=D:/yolov8/ultralytics-main/ultralytics/data/datasets/1.yaml model=yolov8n.yaml pretrained=ultralytics/yolov8n.pt epochs=100 batch=4  workers=2 resume=True#训练代码
  2. yolo predict model=runs/detect/train/weights/best.pt source=insert.jpg#预测代码
  3. yolo train resume model=D:/yolov8/ultralytics-main/runs/detect/train4/weights/last.pt  epochs=100 save_period=50#继续训练

 相关参数解释

训练结果如图会产生很多图如f1置信度曲线等 

官方文档:主页 -Ultralytics YOLO 文档

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/代码探险家/article/detail/1020161
推荐阅读
相关标签
  

闽ICP备14008679号