不能再详细!!!手把手教你用Faster-RCNN训练自己的数据集

本文详细介绍如何基于Faster RCNN框架,针对特定物体“transform”进行模型定制的过程,包括环境搭建、数据集准备、代码修改及训练测试全流程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

接前篇:http://blog.youkuaiyun.com/zcy0xy/article/details/79614690

一、环境安装准备

python2.7以及相关的包cython, python-opencv, easydict

Faster-RCNN用的是https://github.com/smallcorgi/Faster-RCNN_TF tensorflow版本

本文假设你已经按照上面的教程完成了安装,并可以运行demo.py


并且可以训练


二、准备自己的数据集

在实际的应用中,这个数据集肯定是自己项目里面拍摄的。

首先,拍摄的图片可能分辨率太大,不利于训练,通过一顿操作把他们差不多缩小到跟voc数据集里的图片差不多大小。

#coding=utf-8
import os  #打开文件时需要
from PIL import Image
import re

Start_path='C:\\Users\\zcy\\Desktop\\transform\\' #你的图片目录
iphone5_width=333 #图片最大宽度
iphone5_depth=500 #图片最大高度

list=os.listdir(Start_path)
#print list
count=0
for pic in list:
    path=Start_path+pic
    print path
    im=Image.open(path)
    w,h=im.size
    #print w,h
    #iphone 5的分辨率为1136*640,如果图片分辨率超过这个值,进行图片的等比例压缩

    if w>iphone5_width:
        print pic
        print "图片名称为"+pic+"图片被修改"
        h_new=iphone5_width*h/w
        w_new=iphone5_width
        count=count+1
        out = im.resize((w_new,h_new),Image.ANTIALIAS)
        new_pic=re.sub(pic[:-4],pic[:-4]+'_new',pic)
        #print new_pic
        new_path=Start_path+new_pic
        out.save(new_path)

    if h>iphone5_depth:
        print pic
        print "图片名称为"+pic+"图片被修改"
        w=iphone5_depth*w/h
        h=iphone5_depth
        count=count+1
        out = im.resize((w_new,h_new),Image.ANTIALIAS)
        new_pic=re.sub(pic[:-4],pic[:-4]+'_new',pic)
        #print new_pic
        new_path=Start_path+new_pic
        out.save(new_path)

print 'END'
count=str(count)
print "共有"+count+"张图片尺寸被修改"

然后命名图片,按照一定的规律——

#coding=utf-8
import os  #打开文件时需要
from PIL import Image
import re

class BatchRename():
    def __init__(self):
        #我的图片文件夹路径
        self.path = 'C:\\Users\\zcy\\Desktop\\transform'

    def rename(self):
        filelist = os.listdir(self.path)
        total_num = len(filelist)
        i = 10000 #图片编号从多少开始,不要跟VOC原本的编号重复了
        n = 6
        for item in filelist:
            if item.endswith('.jpg'):
                n = 6 - len(str(i))
                src = os.path.join(os.path.abspath(self.path), item)
                dst = os.path.join(os.path.abspath(self.path), str(0)*n + str(i) + '.jpg')
                try:
                    os.rename(src, dst)
                    print 'converting %s to %s ...' % (src, dst)
                    i = i + 1
                except:
                    continue
        print 'total %d to rename & converted %d jpgs' % (total_num, i)
if __name__ == '__main__':
    demo = BatchRename()
    demo.rename()
然后需要进行手动的标注,生成符合pascal VOC格式的xml文件,替换进去才能训练

这里我尝试了各种办法——修改数据接口,自己编辑json分割文件然后转换等等,最后找到了一条最简单的路,用labelImg工具制作。

下载地址  https://github.com/tzutalin/labelImg

使用方法特别简单,设定xml文件保存的位置,打开你的图片的目录,然后一幅一幅图的标注,就可以了。


比如这个物体命名为“transform”类。


把所有的图片全部标注完毕,生成了一堆的xml文件。

接下来,来到voc2007的目录这里,把原来的图片和xml删掉,位置分别是:

/home/Faster-RCNN_TF-master/data/VOCdevkit/VOC2007/JPEGImages
/home/Faster-RCNN_TF-master/data/VOCdevkit/VOC2007/Annotations
删掉是因为我们不需要训练别的数据集,只想训练自己的数据集,这样能快一点。

然后把我们的图片放到“/home/Faster-RCNN_TF-master/data/VOCdevkit/VOC2007/JPEGImages”里面来


接下来生成训练和测试需要的txt文件索引,程序是根据这个索引来获取图像的。

# !/usr/bin/python
# -*- coding: utf-8 -*-
import os
import random  
  
trainval_percent = 0.8  #trainval占比例多少
train_percent = 0.7  #test数据集占比例多少
xmlfilepath = 'Annotations'  
txtsavepath = 'ImageSets\Main'  
total_xml = os.listdir(xmlfilepath)  
  
num=len(total_xml)  
list=range(num)  
tv=int(num*trainval_percent)  
tr=int(tv*train_percent)  
trainval= random.sample(list,tv)  
train=random.sample(trainval,tr)  
  
ftrainval = open('ImageSets/Main/trainval.txt', 'w')  
ftest = open('ImageSets/Main/test.txt', 'w')  
ftrain = open('ImageSets/Main/train.txt', 'w')  
fval = open('ImageSets/Main/val.txt', 'w')  
  
for i  in list:  
    name=total_xml[i][:-4]+'\n'  
    if i in trainval:  
        ftrainval.write(name)  
        if i in train:  
            ftrain.write(name)  
        else:  
            fval.write(name)  
    else:  
        ftest.write(name)  
  
ftrainval.close()  
ftrain.close()  
fval.close()  
ftest .close()  
生成的索引文件在这里


四个文件,看名字想必就知道意思了。

三、修改源代码

好了,我们终于来最后一步了!

1. lib\datasets\pascal_voc.py中更改self._classes中的类别,添加自己的类名字“transform”



2. lib\networks中VGGnet_train.py和VGG_test.py中更改n_classes为自己的类的个数+1,这里我的是21+1=22



3. tools/demo.py中CLASSES的类别改为自己的类




四、开始训练

跟原来的训练方法一样,这里我们就输入

./experiments/scripts/faster_rcnn_end2end.sh gpu 0 VGG16 pascal_voc

我这里是使用GPU的,gpuid为0。

它会训练70000遍,每5000次保存一次在这里“/home/Faster-RCNN_TF-master/output/faster_rcnn_end2end/voc_2007_trainval”



我们可以在1万次时就停止训练,然后把10000那个model后缀名改成“.ckpt”,就可以使用了

五、测试

把几张测试图片放到这里来


修改demo里的测试图片名字


最后,运行demo就可以啦!

python ./tools/demo.py --model /home/Faster-RCNN_TF-master/output/faster_rcnn_end2end/voc_2007_trainval/VGGnet_fast_rcnn_iter_10000.ckpt

记得模型改成你刚才训练出来的文件名字

结果看起来还不错


恭喜,大功告成!!!




### 使用 Faster R-CNN 训练自定义数据集 为了成功使用 Faster R-CNN 模型训练自定义的数据集,需遵循一系列特定的操作流程。这不仅涉及环境配置、数据准备,还包括模型调整和实际的训练过程。 #### 准备工作 确保安装了必要的依赖库并设置了开发环境。如果采用 TensorFlow 版本,则可以从 GitHub 上获取对应的源码[^1]: ```bash git clone https://github.com/dBeker/Faster-RCNN-TensorFlow-Python3.5.git cd Faster-RCNN-TensorFlow-Python3.5 pip install -r requirements.txt ``` 对于 PyTorch 实现版本,可参照另一个开源项目来设置环境[^2]: ```bash git clone <指定仓库地址> cd faster_rcnn_pytorch pip install -r requirements.txt ``` #### 数据预处理 创建适合 Faster R-CNN 的标注文件格式非常重要。通常情况下,需要转换成 Pascal VOC 或 COCO 格式的 XML 文件或 JSON 文件。此外,还需准备好图像路径列表以及类别标签映射表。 针对不同框架的具体实现细节可能有所差异,在此提供基于 Python 脚本的一个简单例子用于说明如何读取图片目录下的所有 JPEG 图像及其对应标签信息,并保存至 CSV 文件中以便后续加载: ```python import os from pathlib import Path def prepare_dataset(image_dir, label_file='labels.csv'): with open(label_file, 'w') as f: lines = ['filename,label\n'] for img_path in Path(image_dir).glob('*.jpg'): filename = str(img_path.relative_to(image_dir)) class_name = ... # 获取每张图的真实类别名 line = ','.join([filename, class_name]) + '\n' lines.append(line) f.writelines(lines) prepare_dataset('/path/to/images') ``` 注意:以上代码片段仅为示意用途,具体逻辑应根据实际情况编写。 #### 修改配置参数 依据所选框架的不同,修改相应的配置文件以适应新的数据集特性。比如当选用 VGG16 或 ResNet 作为基础网络时,应该更新 `trainval_net.py` 中关于输入尺寸、锚框比例等超参设定[^3]。 #### 开始训练 一切就绪之后即可启动训练脚本。下面给出了一条典型的命令行指令示例,它指定了 GPU 设备编号、使用的数据集名称、骨干网结构以及其他一些选项: ```bash CUDA_VISIBLE_DEVICES=1 python trainval_net.py \ --dataset custom_data \ --net vgg16 \ --bs 1 \ --nw 4 \ --cuda \ --epochs 5 ``` 这条命令假设已经有一个名为 "custom_data" 的新数据集被正确导入到程序当中去了;同时选择了 VGG16 架构来进行特征提取操作,并且开启了多线程加速功能(`--nw`) 和启用了 CUDA 加速支持 (`--cuda`) 来加快计算速度。 ---
评论 65
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值