主頁 >  其他 > 卷積神經網路(CNN)簡易教程

卷積神經網路(CNN)簡易教程

2020-09-13 06:42:46 其他

作者|Renu Khandelwal
編譯|VK
來源|Medium

讓我們先來了解一下我們的大腦是如何識別物體的,我們將學習什么是CNN, CNN如何利用大腦的啟發進行物體識別,CNN是如何作業的,

讓我們來了解一下我們的大腦是如何識別影像的

根據諾貝爾獎獲得者Hubel和Wiesel教授的說法,視覺區域V1由簡單細胞和復雜細胞組成,簡單的單元有助于特征檢測,而復雜的單元則結合了來自小空間鄰域的多個這樣的區域特征,空間池有助于實作平移不變特征,

當我們看到一個新的影像時,我們可以從左到右和從上到下掃描影像,以了解影像的不同特征,我們的下一步是結合我們掃描的不同的區域特征來對影像進行分類,CNN就是這樣作業的

平移不變特征是什么意思?

影像的不變性意味著,即使影像旋轉、大小不同或在不同照明下觀看,物件也將被識別為同一物件,

這有助于物件識別,因為影像表示對影像變換(如平移、旋轉或小變形等)保持不變,

我們使用卷積神經網路進行影像識別和分類,

讓我們了解什么是CNN,以及我們如何使用它,

CNN是什么?

CNN是Convolutional Neural Network卷積神經網路的縮寫,卷積神經網路是一種專門用來處理資料的神經網路,它的輸入形狀類似于二維的矩陣影像,

CNN通常用于影像檢測和分類,影像是二維的像素矩陣,我們在其上運行CNN來識別影像或對影像進行分類,識別一個影像是一個人,還是一輛車,或者只是一個地址上的數字,

和神經網路一樣,CNN也從大腦中獲取啟發,我們使用Hubel和Wiesel提出的物件識別模型,

卷積是什么?

卷積是一種數學運算,其中我們有一個輸入I和一個引數核K來產生一個輸出,

讓我們用影像來解釋,

我們有一個影像“x”,它是一個具有不同顏色通道(紅色、綠色和藍色RGB)的二維像素矩陣,我們有一個特征檢測器或核“w”,然后應用數學運算后得到的輸出稱為特征圖

這個數學運算有助于計算兩個信號的相似度,

我們可能有一個特征檢測器或濾波器來識別影像中的邊緣,所以卷積運算將有助于我們識別影像中的邊緣,

我們通常假設卷積函式在除存盤值的有限點集外的任何地方都為零,

I是二維陣列,K是核卷積函式

因為卷積是可交換的,我們可以把上面的方程重新寫一下,如下圖所示,我們這樣做是為了便于在機器學習中實作,因為m和n的有效值范圍變化較小,這是大多數神經網路使用的互相關函式,

以上是互相關函式

那么,我們如何在CNN中實作它呢?

我們實作它的方式是通過卷積層

卷積層是CNN的核心構件,它有助于特征檢測,

核K是一組可學習的過濾器,與影像相比,它在空間上很小,但是可以擴展到整個輸入影像的深度,

理解這一點的一個簡單方法是,如果你是一名偵探,你在黑暗中看到一幅很大的影像或一幅畫,你將如何識別影像?

你將使用你的手電筒和掃描整個影像,這正是我們在卷積層中所做的,

核K是一個特征檢測器,它相當于影像I上的手電筒,我們正在嘗試檢測特征并創建多個特征圖來幫助我們識別或分類影像,

我們有多個特征探測器,以幫助像邊緣檢測,識別不同的形狀,彎曲或不同的顏色等事情,

這一切是如何運作的?

讓我們取一幅3通道5×5矩陣的影像(RGB), 3通道3×3的特征檢測器(RGB),然后以步長為1來掃描影像上的特征檢測器,

當我在影像上應用特征檢測時,輸出矩陣或特征圖的維數是多少?

特征圖的維數與輸入影像的大小(W)、特征檢測器的大小(F)、步長(S)和影像的填充大小(P)有關

\((W?F+2p)/S + 1\)

在我們的例子中,W是輸入影像的大小,為5,

F是特征檢測器接受域大小,在我們的例子中,為3

步長(S)為1,影像上使用的填充大小(P)為0,

因此,我們的特征圖維度為(5-3+0)/1+1=3,

因此特征圖將是一個3*3的矩陣,有3個通道(RGB),

下面一步一步進行解釋

我們看到5×5的輸入影像被簡化為3×3的特征圖,通道為3(RGB)

我們使用多個特征檢測器來尋找邊緣,我們可以使用特征檢測器來銳化影像或模糊影像,

如果我們不想減少特征圖的維數,那么我們可以使用如下所示的填充0

在這種情況下應用相同的公式,我們得到

\((W?F + 2 p) / S + 1 => (5 - 3 +2)/1 + 1= 5\)

現在輸出的尺寸將是5×5,帶有3個顏色通道(RGB),

讓我們看看這一切是如何運作的

如果我們有一個3×3的特征檢測器或濾波器,一個偏置單元,那么我們首先應用如下所示的線性變換

輸出=輸入*權重+偏差

引數個數 = (3 * 3 * 3)+1 = 28

對于100個特征檢測器或過濾器,引數的數量將是2800,

在每一個線性函式的卷積運算之后,我們應用ReLU激活函式,ReLU激活函式在卷積層中引入了非線性,

它將特征圖中的所有負像素值替換為零,

下圖是應用ReLU激活函式后的特征圖變換,

現在我們已經完成了區域區域的特征檢測,我們將結合所有這些來自空間鄰域的特征檢測來構建影像,

記住你是一個在黑暗中掃描影像的偵探,你現在已經從左到右、從上到下掃描了影像,現在我們需要結合所有的特征來識別影像

池化

我們現在應用池來獲得平移不變性,

平移的不變性意味著當我們少量改變輸入時,合并的輸出不會改變,這有助于檢測輸入中常見的特征,如影像中的邊緣或影像中的顏色

我們使用最大池函式,它提供了比最小或平均池更好的性能,

當我們使用最大池時,它總結了整個鄰居的輸出,與原來的特征圖相比,我們現在有更少的單元,

在我們的例子中,我們使用一個2x2的框掃描所有的特征圖,并找到最大值,

現在我們知道卷積網路由以下構成

  • 并行的多重卷積,輸出是線性激活函式
  • 卷積層中應用非線性函式ReLU
  • 使用像最大池這樣的池函式來匯總附近位置的統計資訊,這有助于“平移不變性”
  • 我們將結果展平,然后將其輸入到全連接神經網路

下圖是完整的卷積神經網路

卷積使用了三個重要的思想

  • 稀疏的互動
  • 引數共享
  • 等變表示

稀疏互動或稀疏權值是通過使用小于輸入影像的核或特征檢測器來實作的,

如果我們有一個大小為256 * 256的輸入影像,那么就很難檢測到影像中的邊緣,因為其可能只占影像中像素的一個更小的子集,如果我們使用更小的特征檢測器,那么當我們專注于區域特征識別時,就可以很容易地識別邊緣,

另一個優點是計算輸出所需的操作更少,從而提高了統計效率,

引數共享用于控制CNN中使用的引數或權值的數量,

在傳統的神經網路中,每個權值只使用一次,但是在CNN中,我們假設如果一個特征檢測器可以用來計算一個空間位置,那么它可以用來計算一個不同的空間位置,

當我們在CNN中共享引數時,它減少了需要學習的引數的數量,也減少了計算需求,

等變表示

這意味著目標檢測對光照、位置的變化是不變的,而內部表示對這些變化是等方差的

原文鏈接:https://medium.com/datadriveninvestor/convolutional-neural-network-cnn-simplified-ecafd4ee52c5

歡迎關注磐創AI博客站:
http://panchuang.net/

sklearn機器學習中文官方檔案:
http://sklearn123.com/

歡迎關注磐創博客資源匯總站:
http://docs.panchuang.net/

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/21485.html

標籤:其他

上一篇:求大神指點,剛接觸PyQt5沒多久, 想制作不規則按鈕,總是有鋸齒

下一篇:Django開發一對多關系,為什么獲取資料只有一個

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 2023年最新微信小程式抓包教程

    01 開門見山 隔一個月發一篇文章,不過分。 首先回顧一下《微信系結手機號資料庫被脫庫事件》,我也是第一時間得知了這個訊息,然后跟蹤了整件事情的經過。下面是這起事件的相關截圖以及近日流出的一萬條資料樣本: 個人認為這件事也沒什么,還不如關注一下之前45億快遞資料查詢渠道疑似在近日復活的訊息。 訊息是 ......

    uj5u.com 2023-04-20 08:48:24 more
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:47:46 more
  • vulnhub_Earth

    前言 靶機地址->>>vulnhub_Earth 攻擊機ip:192.168.20.121 靶機ip:192.168.20.122 參考文章 https://www.cnblogs.com/Jing-X/archive/2022/04/03/16097695.html https://www.cnb ......

    uj5u.com 2023-04-20 07:46:20 more
  • 從4k到42k,軟體測驗工程師的漲薪史,給我看哭了

    清明節一過,盲猜大家已經無心上班,在數著日子準備過五一,但一想到銀行卡里的余額……瞬間心情就不美麗了。最近,2023年高校畢業生就業調查顯示,本科畢業月平均起薪為5825元。調查一出,便有很多同學表示自己又被平均了。看著這一資料,不免讓人想到前不久中國青年報的一項調查:近六成大學生認為畢業10年內會 ......

    uj5u.com 2023-04-20 07:44:00 more
  • 最新版本 Stable Diffusion 開源 AI 繪畫工具之中文自動提詞篇

    🎈 標簽生成器 由于輸入正向提示詞 prompt 和反向提示詞 negative prompt 都是使用英文,所以對學習母語的我們非常不友好 使用網址:https://tinygeeker.github.io/p/ai-prompt-generator 這個網址是為了讓大家在使用 AI 繪畫的時候 ......

    uj5u.com 2023-04-20 07:43:36 more
  • 漫談前端自動化測驗演進之路及測驗工具分析

    隨著前端技術的不斷發展和應用程式的日益復雜,前端自動化測驗也在不斷演進。隨著 Web 應用程式變得越來越復雜,自動化測驗的需求也越來越高。如今,自動化測驗已經成為 Web 應用程式開發程序中不可或缺的一部分,它們可以幫助開發人員更快地發現和修復錯誤,提高應用程式的性能和可靠性。 ......

    uj5u.com 2023-04-20 07:43:16 more
  • CANN開發實踐:4個DVPP記憶體問題的典型案例解讀

    摘要:由于DVPP媒體資料處理功能對存放輸入、輸出資料的記憶體有更高的要求(例如,記憶體首地址128位元組對齊),因此需呼叫專用的記憶體申請介面,那么本期就分享幾個關于DVPP記憶體問題的典型案例,并給出原因分析及解決方法。 本文分享自華為云社區《FAQ_DVPP記憶體問題案例》,作者:昇騰CANN。 DVPP ......

    uj5u.com 2023-04-20 07:43:03 more
  • msf學習

    msf學習 以kali自帶的msf為例 一、msf核心模塊與功能 msf模塊都放在/usr/share/metasploit-framework/modules目錄下 1、auxiliary 輔助模塊,輔助滲透(埠掃描、登錄密碼爆破、漏洞驗證等) 2、encoders 編碼器模塊,主要包含各種編碼 ......

    uj5u.com 2023-04-20 07:42:59 more
  • Halcon軟體安裝與界面簡介

    1. 下載Halcon17版本到到本地 2. 雙擊安裝包后 3. 步驟如下 1.2 Halcon軟體安裝 界面分為四大塊 1. Halcon的五個助手 1) 影像采集助手:與相機連接,設定相機引數,采集影像 2) 標定助手:九點標定或是其它的標定,生成標定檔案及內參外參,可以將像素單位轉換為長度單位 ......

    uj5u.com 2023-04-20 07:42:17 more
  • 在MacOS下使用Unity3D開發游戲

    第一次發博客,先發一下我的游戲開發環境吧。 去年2月份買了一臺MacBookPro2021 M1pro(以下簡稱mbp),這一年來一直在用mbp開發游戲。我大致分享一下我的開發工具以及使用體驗。 1、Unity 官網鏈接: https://unity.cn/releases 我一般使用的Apple ......

    uj5u.com 2023-04-20 07:40:19 more