当前位置:   article > 正文

目标检测:如何将VOC标注的xml数据转为YOLO标注的txt格式,且生成classes的txt文件_xml格式转yolo格式

xml格式转yolo格式

1. 前言

目标检测数据的标注分为两种格式:

  • xml 解释性标签,左上角+右下角的坐标
  • txt 记事本文件,类别+x,y中心坐标+w,h的相对值

如下:

xml 文件格式

txt 文件格式:

本文要实现的目标是将目标检测xml标注格式转为txt相对坐标的标注方式

值得一提的是,xml标注包含了类别名称,往往在<name>下。所以,xml标注的数据有时候没有包含类别的json文件,因为根据xml可以直接绘制边界框。如果想要生成xml对应的类别json字典文件,可以参考:目标检测篇:如何根据xml标注文件生成类别classes的json文件

而对于yolo 标注的txt文件来说,类别仅仅用索引0 1 2表示,这也就是说我们是不知道0 1 2代表什么含义,所以yolo 的数据集往往包含类别的txt文件,方便可视化需要。没有的话,可以参考这个自己生成:关于目标检测任务中,YOLO(txt格式)标注文件的可视化 看文章的Tips

所以本文,将根据VOC标注的xml文件生成YOLO格式的txt文件,且生成yolo需要的类别txt文件

2. 代码实现

简单介绍代码逻辑

2.1 目录

目录结构:

这里是根据voc的训练集和验证集转换,且需要xml对应的json字典文件

class_indices.json 如下:

没有的话,看这个自己生成:目标检测篇:如何根据xml标注文件生成类别classes的json文件

2.2 图像的生成

关于图片,可以直接拷贝过去就行

这里生成好的目录根据本人习惯命名

代码运行到这,可以看到图像已经拷贝过去

2.3 目标类别的txt文件生成

yolo格式的classes文件,这里默认根据voc的json字典文件生成,代码如下

代码很简单,就是读取xml的json文件,获取字典的value值,然后保存在txt文件中

2.4 标签xml to yolo标签txt

这里通过labels_xml2yolo 自定义函数操作,传入训练集和验证集的xml目录即可,因为yolo的txt文件需要类别索引,这里将字典文件也传进去

 

这里需要保存原始图像的w、h,因为yolo标注是相对值,后面运算需要。因为voc标注的xml文件中包含了图像的size,直接读取即可

下面是将bbox坐标转为yolo相对坐标的代码,最终的数据就是info的存放的内容

将info 保存即可

生成好的数据:

2.5 可视化

为了验证是否转化成功,利用 这篇代码 可视化一下

3. 完整代码

如下:

  1. import os
  2. from tqdm import tqdm
  3. from lxml import etree
  4. import shutil
  5. import json
  6. # 读取 xml 文件信息,并返回字典形式
  7. def parse_xml_to_dict(xml):
  8. if len(xml) == 0: # 遍历到底层,直接返回 tag对应的信息
  9. return {xml.tag: xml.text}
  10. result = {}
  11. for child in xml:
  12. child_result = parse_xml_to_dict(child) # 递归遍历标签信息
  13. if child.tag != 'object':
  14. result[child.tag] = child_result[child.tag]
  15. else:
  16. if child.tag not in result: # 因为object可能有多个,所以需要放入列表里
  17. result[child.tag] = []
  18. result[child.tag].append(child_result[child.tag])
  19. return {xml.tag: result}
  20. # 将xml文件转换为yolo的 txt文件
  21. def labels_xml2yolo(src, class_dict):
  22. xml_path = [os.path.join(src, i) for i in os.listdir(src)]
  23. for xml_file in tqdm(xml_path):
  24. # read xml
  25. with open(xml_file,mode='r') as fid:
  26. xml_str = fid.read()
  27. xml = etree.fromstring(xml_str)
  28. data = parse_xml_to_dict(xml)["annotation"] # 读取xml文件信息
  29. img_height = int(data["size"]["height"]) # 读入图像的 h
  30. img_width = int(data["size"]["width"]) # 读入图像的 w
  31. # 新建 xml对应的 yolo txt标注文件,并写入
  32. yolo_file = xml_file.replace('my_xml_dataset', 'my_yolo_dataset')
  33. yolo_file = yolo_file.replace('.xml', '.txt')
  34. with open(yolo_file,mode="w") as f:
  35. for index, obj in enumerate(data["object"]): # index是0开始的索引,obj 是object的字典文件
  36. # 获取每个object的box信息
  37. xmin = float(obj["bndbox"]["xmin"])
  38. xmax = float(obj["bndbox"]["xmax"])
  39. ymin = float(obj["bndbox"]["ymin"])
  40. ymax = float(obj["bndbox"]["ymax"])
  41. class_name = obj["name"] # 获取边界框的分类
  42. class_index = class_dict[class_name]
  43. # 将box信息转换到 yolo格式
  44. xcenter = xmin + (xmax - xmin) / 2 # 中心点坐标
  45. ycenter = ymin + (ymax - ymin) / 2
  46. w = xmax - xmin # 边界框的 w 和 h
  47. h = ymax - ymin
  48. # 绝对坐标转相对坐标,保存6位小数
  49. xcenter = round(xcenter / img_width, 6)
  50. ycenter = round(ycenter / img_height, 6)
  51. w = round(w / img_width, 6)
  52. h = round(h / img_height, 6)
  53. info = [str(i) for i in [class_index, xcenter, ycenter, w, h]]
  54. # print(info) ['0', '0.403646', '0.485491', '0.103423', '0.110863']
  55. if index == 0:
  56. f.write(" ".join(info))
  57. else: # 自动换行
  58. f.write("\n" + " ".join(info))
  59. if __name__ == "__main__":
  60. # 删除原先的 my_yolo_dataset 文件
  61. if os.path.exists("my_yolo_dataset"):
  62. shutil.rmtree("my_yolo_dataset")
  63. # 新建目录
  64. os.mkdir("my_yolo_dataset")
  65. os.mkdir("my_yolo_dataset/train")
  66. os.mkdir("my_yolo_dataset/val")
  67. os.mkdir("my_yolo_dataset/train/labels")
  68. os.mkdir("my_yolo_dataset/val/labels")
  69. # 拷贝图片和 txt 文件
  70. shutil.copytree('my_xml_dataset/train/images', 'my_yolo_dataset/train/images')
  71. shutil.copytree('my_xml_dataset/val/images', 'my_yolo_dataset/val/images')
  72. # 生成txt类别文件
  73. json_file = open('my_xml_dataset/class_indices.json', 'r')
  74. class_dict = json.load(json_file)
  75. # print(class_dict) {'0': 'Leconte', '1': 'Boerner', '2': 'linnaeus', '3': 'armandi', '4': 'coleoptera', '5': 'acuminatus', '6': 'Linnaeus'}
  76. classes = {}
  77. for i in range(len(class_dict)):
  78. classes[i] = class_dict[str(i)]
  79. classes = {str(v): str(k) for k, v in classes.items()}
  80. # print(classes) {'Leconte': '0', 'Boerner': '1', 'linnaeus': '2', 'armandi': '3', 'coleoptera': '4', 'acuminatus': '5', 'Linnaeus': '6'}
  81. txt = classes.keys() # yolo 的txt
  82. # print(txt) dict_keys(['Leconte', 'Boerner', 'linnaeus', 'armandi', 'coleoptera', 'acuminatus', 'Linnaeus'])
  83. with open('./my_yolo_dataset/classes.txt','w') as f:
  84. for i in txt:
  85. f.write(i)
  86. f.write('\n')
  87. # 将xml 标注信息更改为 yolo 格式
  88. labels_xml2yolo(src='my_xml_dataset/train/labels', class_dict=classes)
  89. labels_xml2yolo(src='my_xml_dataset/val/labels', class_dict=classes)

4. 附加代码

如果xml文件没有图片的size信息,用这个代码,会自动读取图片高度和宽度。并且会剔除xml文件种没有目标的部分

  1. import os
  2. from tqdm import tqdm
  3. from lxml import etree
  4. import shutil
  5. import json
  6. import cv2
  7. # 读取 xml 文件信息,并返回字典形式
  8. def parse_xml_to_dict(xml):
  9. if len(xml) == 0: # 遍历到底层,直接返回 tag对应的信息
  10. return {xml.tag: xml.text}
  11. result = {}
  12. for child in xml:
  13. child_result = parse_xml_to_dict(child) # 递归遍历标签信息
  14. if child.tag != 'object':
  15. result[child.tag] = child_result[child.tag]
  16. else:
  17. if child.tag not in result: # 因为object可能有多个,所以需要放入列表里
  18. result[child.tag] = []
  19. result[child.tag].append(child_result[child.tag])
  20. return {xml.tag: result}
  21. # 将xml文件转换为yolo的 txt文件
  22. def labels_xml2yolo(src, class_dict):
  23. xml_path = [os.path.join(src, i) for i in os.listdir(src)]
  24. for xml_file in tqdm(xml_path):
  25. # read xml
  26. with open(xml_file, mode='r') as fid:
  27. xml_str = fid.read()
  28. xml = etree.fromstring(xml_str)
  29. data = parse_xml_to_dict(xml)["annotation"] # 读取xml文件信息
  30. if 'object' not in data.keys(): # 移除不存在边界框的数据
  31. continue
  32. # 读取图片
  33. img_path = xml_file.replace('labels','images')
  34. img_path = img_path.replace('.xml','.jpg') # 根据后缀更换
  35. img = cv2.imread(img_path)
  36. img_height,img_width = img.shape[:2]
  37. # 新建 xml对应的 yolo txt标注文件,并写入
  38. yolo_file = xml_file.replace('data', 'my_yolo_dataset')
  39. yolo_file = yolo_file.replace('.xml', '.txt')
  40. with open(yolo_file, mode="w") as f:
  41. for index, obj in enumerate(data["object"]): # index是0开始的索引,obj 是object的字典文件
  42. # 拷贝图片
  43. shutil.copy(img_path, src.replace('data','my_yolo_dataset').replace('labels','images'))
  44. # 获取每个object的box信息
  45. xmin = float(obj["bndbox"]["xmin"])
  46. xmax = float(obj["bndbox"]["xmax"])
  47. ymin = float(obj["bndbox"]["ymin"])
  48. ymax = float(obj["bndbox"]["ymax"])
  49. class_name = obj["label"] # 获取边界框的分类
  50. class_index = class_dict[class_name]
  51. # 将box信息转换到 yolo格式
  52. xcenter = xmin + (xmax - xmin) / 2 # 中心点坐标
  53. ycenter = ymin + (ymax - ymin) / 2
  54. w = xmax - xmin # 边界框的 w 和 h
  55. h = ymax - ymin
  56. # 绝对坐标转相对坐标,保存6位小数
  57. xcenter = round(xcenter / img_width, 6)
  58. ycenter = round(ycenter / img_height, 6)
  59. w = round(w / img_width, 6)
  60. h = round(h / img_height, 6)
  61. info = [str(i) for i in [class_index, xcenter, ycenter, w, h]]
  62. # print(info) ['0', '0.403646', '0.485491', '0.103423', '0.110863']
  63. if index == 0:
  64. f.write(" ".join(info))
  65. else: # 自动换行
  66. f.write("\n" + " ".join(info))
  67. if __name__ == "__main__":
  68. # 删除原先的 my_yolo_dataset 文件
  69. if os.path.exists("my_yolo_dataset"):
  70. shutil.rmtree("my_yolo_dataset")
  71. # 新建目录
  72. os.mkdir("my_yolo_dataset")
  73. os.mkdir("my_yolo_dataset/train")
  74. os.mkdir("my_yolo_dataset/test")
  75. os.mkdir("my_yolo_dataset/train/labels")
  76. os.mkdir("my_yolo_dataset/train/images")
  77. os.mkdir("my_yolo_dataset/test/labels")
  78. os.mkdir("my_yolo_dataset/test/images")
  79. # 生成txt类别文件
  80. json_file = open('class_indices.json', 'r')
  81. class_dict = json.load(json_file)
  82. # print(class_dict) {'0': 'Leconte', '1': 'Boerner', '2': 'linnaeus', '3': 'armandi', '4': 'coleoptera', '5': 'acuminatus', '6': 'Linnaeus'}
  83. classes = {}
  84. for i in range(len(class_dict)):
  85. classes[i] = class_dict[str(i)]
  86. classes = {str(v): str(k) for k, v in classes.items()}
  87. # print(classes) {'Leconte': '0', 'Boerner': '1', 'linnaeus': '2', 'armandi': '3', 'coleoptera': '4', 'acuminatus': '5', 'Linnaeus': '6'}
  88. txt = classes.keys() # yolo 的txt
  89. # print(txt) dict_keys(['Leconte', 'Boerner', 'linnaeus', 'armandi', 'coleoptera', 'acuminatus', 'Linnaeus'])
  90. with open('./my_yolo_dataset/classes.txt', 'w') as f:
  91. for i in txt:
  92. f.write(i)
  93. f.write('\n')
  94. # 将xml 标注信息更改为 yolo 格式
  95. labels_xml2yolo(src='data/train/labels', class_dict=classes)
  96. labels_xml2yolo(src='data/test/labels', class_dict=classes)

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/我家小花儿/article/detail/189628
推荐阅读
  

闽ICP备14008679号