主頁 > 後端開發 > Windows10+YOLOv5訓練自己的資料集

Windows10+YOLOv5訓練自己的資料集

2021-04-18 10:23:15 後端開發

Windows10+YOLOv5訓練自己的資料集

  • 一、環境和配置
    • 1.1 安裝anaconda
    • 1.2 在anaconda中安裝pytorch虛擬環境
    • 1.3 安裝CUDA和cudnn
    • 1.4 安裝pytorch GPU版
  • 二 原始碼測驗
    • 2.1 下載原始碼
    • 2.2 安裝依賴項
    • 2.3 測驗
      • 2.3.1 下載權重檔案
      • 2.3.2 測驗
  • 三、訓練自己的資料集
    • 3.1 資料集制作
    • 3.2 修改組態檔
      • 3.2.1 修改資料集方面的yaml檔案
      • 3.2.2 修改網路引數方面的yaml檔案
      • 3.2.3 修改train.py中的一些引數
    • 3.3 訓練
      • 3.3.1 在預訓練模型的基礎上訓練
      • 3.3.2 從頭開始訓練
      • 3.3.3 訓練結果

一、環境和配置

系統:window10
CUDA:10.1
CUDNN:7.4
python:3.7
opencv-python>=4.1.2
pytorch>=1.7.0
本文介紹使用anaconda搭建環境,

1.1 安裝anaconda

anaconda的安裝教程之前已經寫過一篇文章,還沒安裝的請自行參考安裝,這里不再贅述,參考鏈接:anaconda安裝教程

1.2 在anaconda中安裝pytorch虛擬環境

這一步不是必須的,但是建議建立虛擬環境安裝pytorch,免得中途出錯把別的環境也破壞了,到時候就得不償失了,
在anaconda中安裝虛擬環境的教程之前也已經寫過了,這里就不寫了,自行參考鏈接:anaconda中創建虛擬環境

1.3 安裝CUDA和cudnn

若要使用GPU訓練,則需要安裝CUDA和cudnn,具體的安裝方法可以參考我的另一篇文章:CUDA和cudnn的安裝

1.4 安裝pytorch GPU版

yolov5最新版本需要pytorch1.7(以前要求是1.6)版本以上,因此我們安裝pytorch1.7版本,
第一步:打開命令提示符:
在這里插入圖片描述
第二步:激活torch環境(我裝的虛擬環境取名為torch),輸入命令:

activate torch

在這里插入圖片描述
第三步:安裝pytorch,由于先安裝好了CUDA10.1,因此在環境中輸入:

pip install torch==1.7.0+cu101 torchvision==0.8.1+cu101 torchaudio===0.7.0 -f https://download.pytorch.org/whl/torch_stable.html

然后就是等待pytorch的安裝完成,可能需要一定的時間,

如果你想裝其他版本,可以先進入pytorch官網,然后選擇相應的版本,下面有相應的安裝命令,復制下來,在torch環境下輸入該命令即可,
在這里插入圖片描述
第四步:安裝好之后,可能需要將numpy進行升級,輸入命令:

pip install --upgrade numpy

第五步:測驗torch是否安裝成功
先打開python編譯環境,輸入:

python

然后輸入下面的命令查看torch的版本:

import torch as t
t.__version__

若輸出為下面的結果,則說明pytorch安裝成功:
在這里插入圖片描述
另外也可以輸入另一個命令:

import torch as t
t.cuda.is_available

若輸出的結果為“True”,則說明安裝成功
在這里插入圖片描述
補充:匯入pytorch使用的命令是“torch”,而非“pytorch”,若在匯入torch的時候出現錯誤:“OSError:[WinError 126]找不到指定的模塊,”這里根據提示在路徑中去找這個模塊,會發現這個“asmjit.dll”是存在于該路徑下的,并沒有丟失,
解決辦法:根據出錯的提示,上面有一個網址,把它復制下來,用任意一個瀏覽器打開,下載這個應用程式,然后雙擊安裝,安裝完畢后重啟一下電腦,就會發現可以正確的匯入torch模塊了 ,
在這里插入圖片描述

二 原始碼測驗

2.1 下載原始碼

在GitHub上下載原始碼:YOLOv5原始碼下載地址

2.2 安裝依賴項

下載原始碼并解壓后,原始碼根目錄下有一個requirements.txt,這里面就是需要安裝的各種依賴項了,安裝方法是,從根目錄打開命令提示符:在檔案夾上方的框里輸入“cmd”,然后按回車:
在這里插入圖片描述
之后就會跳出來一個命令提示符框,并且是在該根目錄下:
在這里插入圖片描述
輸入命令:

pip install -r requirements.txt

然后等待安裝完成就行了,

2.3 測驗

2.3.1 下載權重檔案

作者在GitHub中給出了他們訓練出來的權重檔案:權重檔案下載地址
并給出了各種權重檔案的檢測效果,我們可以隨意下載,
在這里插入圖片描述
將下載的權重檔案放在./weight檔案夾下,

2.3.2 測驗

還是在原始碼的根目錄下打開命令提示符,然后激活torch環境
在這里插入圖片描述
圖片測驗:
輸入命令:

python detect.py --source ./data/images/ --weights ./weights/yolov5s.pt --conf 0.4

運行之后輸出:
在這里插入圖片描述
這時候根目錄檔案夾中,多了一個runs檔案夾,這里面就是測驗的結果:
在這里插入圖片描述
打開runs檔案夾,一路打開里面所有的檔案夾,里面有兩張檢測后的圖片:
在這里插入圖片描述
打開其中一個看一下:
在這里插入圖片描述
視頻測驗
輸入命令:

python detect.py --source 0 --weights ./weights/yolov5s.pt --conf 0.4

三、訓練自己的資料集

3.1 資料集制作

資料集制作的前半部分可以參考我的另一篇文章VOC資料集制作
這里我就接著VOC資料集制作這篇文章來講接下來對資料集的操作,

第一步:將制作好的資料集放到yolov5-master根目錄下,我的資料集檔案夾結構為:
在這里插入圖片描述
第二步:將資料集轉換到yolo資料集格式,在VOCdata中新建一個voc_label.py檔案,輸入如下代碼:

import xml.etree.ElementTree as ET
import pickle
import os
from os import listdir, getcwd
from os.path import join

sets=[('TrainVal', 'train'), ('TrainVal', 'val'), ('Test', 'test')]   # 根據自己檔案夾的路徑結構進行修改

classes = ['類別1', '類別2', '類別3', '類別4']  #修改為自己的類別
def convert(size, box):
    dw = 1./size[0]
    dh = 1./size[1]
    x = (box[0] + box[1])/2.0
    y = (box[2] + box[3])/2.0
    w = box[1] - box[0]
    h = box[3] - box[2]
    x = x*dw
    w = w*dw
    y = y*dh
    h = h*dh
    return (x,y,w,h)

def convert_annotation(year, image_id):
    in_file = open('VOC%s/Annotations/%s.xml'%(year, image_id))
    out_file = open('VOC%s/labels/%s.txt'%(year, image_id), 'w')
    tree=ET.parse(in_file)
    root = tree.getroot()
    size = root.find('size')
    w = int(size.find('width').text)
    h = int(size.find('height').text)

    for obj in root.iter('object'):
        difficult = obj.find('difficult').text
        cls = obj.find('name').text
        if cls not in classes or int(difficult) == 1:
            continue
        cls_id = classes.index(cls)
        xmlbox = obj.find('bndbox')
        b = (float(xmlbox.find('xmin').text), float(xmlbox.find('xmax').text), float(xmlbox.find('ymin').text), float(xmlbox.find('ymax').text))
        bb = convert((w,h), b)
        out_file.write(str(cls_id) + " " + " ".join([str(a) for a in bb]) + '\n')

wd = getcwd()

for year, image_set in sets:
    if not os.path.exists('VOC%s/labels/'%(year)):
        os.makedirs('VOC%s/labels/'%(year))
    image_ids = open('VOC%s/ImageSets/Main/%s.txt'%(year, image_set)).read().strip().split()
    list_file = open('%s_%s.txt'%(year, image_set), 'w')
    for image_id in image_ids:
        list_file.write('%s/VOC%s/JPEGImages/%s.jpg\n'%(wd, year, image_id))
        convert_annotation(year, image_id)
    list_file.close()

轉換后可以看到VOCData/…/labels下生成了每個圖的txt檔案:
在這里插入圖片描述
另外,在VOCdata檔案夾下還生成如下三個包含資料集的txt檔案,訓練代碼就是通過txt中的路徑去讀取圖片
在這里插入圖片描述

3.2 修改組態檔

3.2.1 修改資料集方面的yaml檔案

在準備完資料后,v5創新性的省略了.data和.names檔案的配置,而是將二者合二為一到yaml中,在data檔案夾下創建myvoc.yaml檔案,輸入以下資訊

# 上面那三個檔案的位置
train: ./VOCdata/TrainVal_train.txt
val: ./VOCdata/TrainVal_val.txt
test: ./VOCdata/Test_test.txt
# number of classes
nc: 4   # 修改為自己的類別數量
# class names
names: ["類別1", "類別2", "類別3", "類別4"]   # 自己來的類別名稱

3.2.2 修改網路引數方面的yaml檔案

這個相當于以前版本的.cfg檔案,在models/yolov5s.yaml【當然,你想用哪個模型就去修改對應的yaml檔案】,就修改一下類別數量:
在這里插入圖片描述

3.2.3 修改train.py中的一些引數

在train.py中修改一下訓練引數,也可以直接在訓練陳述句中重寫,修改的話只是修改默認值,

parser.add_argument('--epochs', type=int, default=200)  # 根據需要自行調節訓練的epoch
parser.add_argument('--batch-size', type=int, default=16)  # 根據自己的顯卡調節,顯卡不好的話,就調小點
parser.add_argument('--cfg', type=str, default='models/yolov5s.yaml', help='*.cfg path') # 根據需要,自行選擇模型
parser.add_argument('--data', type=str, default='data/myvoc.yaml', help='*.data path')  # data設定為前兩步中我們新建的myvoc.yaml
parser.add_argument('--img-size', nargs='+', type=int, default=[640, 640], help='train,test sizes')  # 可調可不調

3.3 訓練

3.3.1 在預訓練模型的基礎上訓練

在yolov5-master目錄中打開命令提示符,再激活torch環境,然后輸入下列命令:

python train.py --img 640 --batch 4 --epoch 300 --data ./data/myvoc.yaml --cfg ./models/yolov5s.yaml --weights weights/yolov5s.pt --workers 0

引數解釋:
–img:輸入圖片尺寸
–batch:batch_size大小
–epoch:訓練周期
–data:上面修改過的資料集方面的資訊檔案
–cfg:模型的組態檔,自行選擇模型,當然這里選的是哪個模型,就要在3.2.2中修改相應的組態檔中的類別數
–weights:預訓練模型,之前下載好的,這里選擇的預訓練模型需要跟–cfg中相同
–workers:暫時還沒搞明白是什么

當然這些引數可以直接在train.py檔案中直接修改默認值,然后直接運行train.py檔案,

3.3.2 從頭開始訓練

將train.py中的第458行–weights的默認引數刪掉
在這里插入圖片描述
在上面命令的基礎上,去掉–weight,在yolov5-master目錄中打開命令提示符,再激活torch環境,然后輸入下列命令:

python train.py --img 640 --batch 4 --epoch 300 --data ./data/myvoc.yaml --cfg ./models/yolov5s.yaml --workers 0

當然如果其他引數也修改為適合自己訓練的引數了,也可以直接運行train.py檔案,

3.3.3 訓練結果

待更新!!!

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/277337.html

標籤:python

上一篇:智能垃圾分類

下一篇:Python演算法學習[1]—演算法簡介&資料結構

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Rust中的智能指標:Box<T> Rc<T> Arc<T> Cell<T> RefCell<T> Weak

    Rust中的智能指標是什么 智能指標(smart pointers)是一類資料結構,是擁有資料所有權和額外功能的指標。是指標的進一步發展 指標(pointer)是一個包含記憶體地址的變數的通用概念。這個地址參考,或 ” 指向”(points at)一些其 他資料 。參考以 & 符號為標志并借用了他們所 ......

    uj5u.com 2023-04-20 07:24:10 more
  • Java的值傳遞和參考傳遞

    值傳遞不會改變本身,參考傳遞(如果傳遞的值需要實體化到堆里)如果發生修改了會改變本身。 1.基本資料型別都是值傳遞 package com.example.basic; public class Test { public static void main(String[] args) { int ......

    uj5u.com 2023-04-20 07:24:04 more
  • [2]SpinalHDL教程——Scala簡單入門

    第一個 Scala 程式 shell里面輸入 $ scala scala> 1 + 1 res0: Int = 2 scala> println("Hello World!") Hello World! 檔案形式 object HelloWorld { /* 這是我的第一個 Scala 程式 * 以 ......

    uj5u.com 2023-04-20 07:23:58 more
  • 理解函式指標和回呼函式

    理解 函式指標 指向函式的指標。比如: 理解函式指標的偽代碼 void (*p)(int type, char *data); // 定義一個函式指標p void func(int type, char *data); // 宣告一個函式func p = func; // 將指標p指向函式func ......

    uj5u.com 2023-04-20 07:23:52 more
  • Django筆記二十五之資料庫函式之日期函式

    本文首發于公眾號:Hunter后端 原文鏈接:Django筆記二十五之資料庫函式之日期函式 日期函式主要介紹兩個大類,Extract() 和 Trunc() Extract() 函式作用是提取日期,比如我們可以提取一個日期欄位的年份,月份,日等資料 Trunc() 的作用則是截取,比如 2022-0 ......

    uj5u.com 2023-04-20 07:23:45 more
  • 一天吃透JVM面試八股文

    什么是JVM? JVM,全稱Java Virtual Machine(Java虛擬機),是通過在實際的計算機上仿真模擬各種計算機功能來實作的。由一套位元組碼指令集、一組暫存器、一個堆疊、一個垃圾回收堆和一個存盤方法域等組成。JVM屏蔽了與作業系統平臺相關的資訊,使得Java程式只需要生成在Java虛擬機 ......

    uj5u.com 2023-04-20 07:23:31 more
  • 使用Java接入小程式訂閱訊息!

    更新完微信服務號的模板訊息之后,我又趕緊把微信小程式的訂閱訊息給實作了!之前我一直以為微信小程式也是要企業才能申請,沒想到小程式個人就能申請。 訊息推送平臺🔥推送下發【郵件】【短信】【微信服務號】【微信小程式】【企業微信】【釘釘】等訊息型別。 https://gitee.com/zhongfuch ......

    uj5u.com 2023-04-20 07:22:59 more
  • java -- 緩沖流、轉換流、序列化流

    緩沖流 緩沖流, 也叫高效流, 按照資料型別分類: 位元組緩沖流:BufferedInputStream,BufferedOutputStream 字符緩沖流:BufferedReader,BufferedWriter 緩沖流的基本原理,是在創建流物件時,會創建一個內置的默認大小的緩沖區陣列,通過緩沖 ......

    uj5u.com 2023-04-20 07:22:49 more
  • Java-SpringBoot-Range請求頭設定實作視頻分段傳輸

    老實說,人太懶了,現在基本都不喜歡寫筆記了,但是網上有關Range請求頭的文章都太水了 下面是抄的一段StackOverflow的代碼...自己大修改過的,寫的注釋挺全的,應該直接看得懂,就不解釋了 寫的不好...只是希望能給視頻網站開發的新手一點點幫助吧. 業務場景:視頻分段傳輸、視頻多段傳輸(理 ......

    uj5u.com 2023-04-20 07:22:42 more
  • Windows 10開發教程_編程入門自學教程_菜鳥教程-免費教程分享

    教程簡介 Windows 10開發入門教程 - 從簡單的步驟了解Windows 10開發,從基本到高級概念,包括簡介,UWP,第一個應用程式,商店,XAML控制元件,資料系結,XAML性能,自適應設計,自適應UI,自適應代碼,檔案管理,SQLite資料庫,應用程式到應用程式通信,應用程式本地化,應用程式 ......

    uj5u.com 2023-04-20 07:22:35 more