主頁 >  其他 > 掌握動態規劃,從“什么問題適合用”及“解題思路”入手

掌握動態規劃,從“什么問題適合用”及“解題思路”入手

2023-04-25 08:15:41 其他

摘要:一般是用動態規劃來解決最優問題,

本文分享自華為云社區《深入淺出動態規劃演算法(中)》,作者:嵌入式視覺 ,

一,“一個模型三個特征”理論講解

一個模型指的是適合用動態規劃演算法解決的問題的模型,這個模型也被定義為“多階段決策最優解模型”,具體解釋如下:

一般是用動態規劃來解決最優問題,而解決問題的程序,需要經歷多個決策階段,每個決策階段都對應著一組狀態,然后我們尋找一組決策序列,經過這組決策序列,能夠產生最終期望求解的最優值,

1.最優子結構

最優子結構指的是,問題的最優解包含子問題的最優解,反過來說就是,我們可以通過子問題的最優解,推匯出問題的最優解,把最優子結構,對應到前面定義的動態規劃問題模型上,就是后面階段的狀態可以通過前面階段的狀態推匯出來,

2.無后效性

無后效性有兩層含義,第一層含義是,在推導后面階段的狀態的時候,我們只關心前面階段的狀態值,不關心這個狀態是怎么一步一步推匯出來的,第二層含義是,某階段狀態一旦確定,就不受之后階段的決策影響,無后效性是一個非常“寬松”的要求,只要滿足前面提到的動態規劃問題模型,其實基本上都會滿足無后效性,

3.重復子問題

不同的決策序列,到達某個相同的階段時,可能會產生重復的狀態,

4.“一個模型三個特征”實體剖析

結合一個具體的動態規劃問題更能詳細理解上述理論,示例問題描述如下:

假設我們有一個 n 乘以 n 的矩陣 w[n][n],矩陣存盤的都是正整數,棋子起始位置在左上角,終止位置在右下角,我們將棋子從左上角移動到右下角,每次只能向右或者向下移動一位,從左上角到右下角,會有很多不同的路徑可以走,我們把每條路徑經過的數字加起來看作路徑的長度,那從左上角移動到右下角的最短路徑長度是多少呢?

min_dist(i, j) 可以通過 min_dist(i, j-1) 和 min_dist(i-1, j) 兩個狀態推匯出來,所以這個問題符合“最優子結構”,

min_dist(i, j) = min(min_dist(i-1,j), min_dist(i, j-1))

二,兩種動態規劃解題思路總結

知道了如何鑒別一個問題是否可以用動態規劃來解決,接下來就是總結動態規劃解決問題的一般思路,解決動態規劃問題,一般有兩種思路,分別叫作:狀態轉移表法和狀態轉移方程法,

1.狀態轉移表法

一般能用動態規劃解決的問題,都可以使用回溯演算法的暴力搜索解決,所以,當我們拿到問題的時候,我們可以先用簡單的回溯演算法解決,然后定義狀態,每個狀態表示一個節點,然后對應畫出遞回樹,從遞回樹中,我們很容易可以看出來,是否存在重復子問題,以及重復子問題是如何產生的,以此來尋找規律,看是否能用動態規劃解決,

找到重復子問題之后,接下來,我們有兩種處理思路,第一種是直接用回溯加“備忘錄”的方法,來避免重復子問題,從執行效率上來講,這跟動態規劃的解決思路沒有差別,第二種是使用動態規劃的解決方法,狀態轉移表法

我們先畫出一個狀態表,狀態表一般都是二維的,所以你可以把它想象成二維陣列,其中,每個狀態包含三個變數,行、列、陣列值,我們根據決策的先后程序,從前往后,根據遞推關系,分階段填充狀態表中的每個狀態,最后,我們將這個遞推填表的程序,翻譯成代碼,就是動態規劃代碼了,

適合狀態是二維的情況,再多維的話就不適合了,畢竟人腦不適合處理高維度的問題,

起點到終點,有很多種不同的走法,回溯演算法比較適合無重復又不遺漏地窮舉出所有走法,從而對比找出一個最短走法,

(1)回溯解法的 C++ 代碼如下:

// leetcode64. 最小路徑和. 回溯法-會超出時間限制
class Solution {
private:
    int minDist = 10000;
 void minDistBT(vector<vector<int>>& grid, int i, int j, int dist, int m, int n) {
 if (i == 0 && j == 0) dist = grid[0][0];
 if (i == m-1 && j == n-1) {
 if (dist < minDist) minDist = dist;
 return;
 }
 if (i < m-1) {
 minDistBT(grid, i + 1, j, dist + grid[i+1][j], m, n); // 向右走
 }
 if (j < n-1) {
 minDistBT(grid, i, j + 1, dist + grid[i][j+1], m, n); // 向下走
 }
 }
public:
    int minPathSum(vector<vector<int>>& grid) {
        int m = grid.size();
        int n = grid[0].size();
        int dist = 0;
 minDistBT(grid, 0, 0, dist, m, n);
 return minDist;
 }
};

有了回溯代碼之后,接下來,自然要畫出遞回樹,以此來尋找重復子問題,在遞回樹中,一個狀態(也就是一個節點)包含三個變數 (i, j, dist),其中 i,j 分別表示行和列,dist 表示從起點到達 (i, j) 的路徑長度,從圖中,可以看出,盡管 (i, j, dist) 不存在重復,但是 (i, j) 重復的有很多,對于 (i, j) 重復的節點,我們只需要選擇 dist 最小的節點,繼續遞回求解,其他節點就可以舍棄了,

(2)動態規劃解法的 C++ 代碼如下:

// 對應 leetcode64. 最小路徑和
class Solution { // 動態規劃:狀態轉移表法
public:
    int minPathSum(vector<vector<int>>& grid) {
        int m = grid.size();
        int n = grid[0].size();
        vector<vector<int> > states(m, vector<int>(n, 0));
 // 第一個階段初始化
        int sum = 0;
 for(int i=0; i<n;i++){ // 初始化 states 的第一行資料
            sum += grid[0][i];
            states[0][i] = sum;
 }
        sum = 0;
 for(int j=0; j<m; j++){ // 初始化 states 的第一列資料
            sum += grid[j][0];
            states[j][0] = sum;
 }
 // 分階段求解,下層狀態的值是基于上一層狀態來的
 for(int i=1; i<m; i++){
 for(int j=1; j<n; j++){
                states[i][j] = grid[i][j] + std::min(states[i-1][j],states[i][j-1]);
 }
 }
 return states[m-1][n-1];
 }
};

2.狀態轉移方程法

根據最優子結構,寫出遞回公式,也就是所謂的狀態轉移方程,狀態轉移方程,或者說遞回公式是解決動態規劃的關鍵,遞回加“備忘錄”的方式,將狀態轉移方程翻譯成來 C++ 代碼,

// 狀態轉移方程
min_dist(i, j) = w[i][j] + min(min_dist(i, j-1), min_dist(i-1, j))
// 對應 leetcode64. 最小路徑和
class Solution { // 狀態轉移方程法
private:
    int minDist(int i, int j, vector<vector<int> >& matrix, vector<vector<int> >& mem) { // 呼叫minDist(n-1, n-1);
 if (i == 0 && j == 0) return matrix[0][0];
 if (mem[i][j] > 0) return mem[i][j];
        int minUp = 10000;
 if (i - 1 >= 0) minUp = minDist(i - 1, j, matrix, mem);
        int minLeft = 10000;
 if (j - 1 >= 0) minLeft = minDist(i, j - 1, matrix, mem);
        int currMinDist = matrix[i][j] + std::min(minUp, minLeft);
        mem[i][j] = currMinDist;
 return currMinDist;
 }
public:
    int minPathSum(vector<vector<int>>& grid) {
        int m = grid.size();
        int n = grid[0].size();
        vector<vector<int> > mem(m, vector<int>(n, -1));
 return minDist(m - 1, n - 1, grid, mem);
 }
};

三,四種演算法比較分析

如果將這四種演算法思想分一下類,那貪心、回溯、動態規劃可以歸為一類,而分治單獨可以作為一類,因為它跟其他三個都不大一樣,為什么這么說呢?因為前三個演算法解決問題的模型,都可以抽象成多階段決策最優解模型,而分治演算法解決的問題盡管大部分也是最優解問題,但是,大部分都不能抽象成多階段決策模型,

盡管動態規劃比回溯演算法高效,但是,并不是所有問題,都可以用動態規劃來解決,能用動態規劃解決的問題,需要滿足三個特征,最優子結構、無后效性和重復子問題,在重復子問題這一點上,動態規劃和分治演算法的區分非常明顯,分治演算法要求分割成的子問題,不能有重復子問題,而動態規劃正好相反,動態規劃之所以高效,就是因為回溯演算法實作中存在大量的重復子問題,

貪心演算法實際上是動態規劃演算法的一種特殊情況,它解決問題起來更加高效,代碼實作也更加簡潔,不過,它可以解決的問題也更加有限,它能解決的問題需要滿足三個條件,最優子結構、無后效性和貪心選擇性(這里我們不怎么強調重復子問題),其中,最優子結構、無后效性跟動態規劃中的無異,“貪心選擇性”的意思是,通過區域最優的選擇,能產生全域的最優選擇,每一個階段,我們都選擇當前看起來最優的決策,所有階段的決策完成之后,最終由這些區域最優解構成全域最優解,

四,內容總結

什么樣的問題適合用動態規劃解決?這些問題可以總結概括為“一個模型三個特征”,其中,“一個模型”指的是,問題可以抽象成分階段決策最優解模型,“三個特征”指的是最優子結構、無后效性和重復子問題,

哪兩種動態規劃的解題思路?它們分別是狀態轉移表法和狀態轉移方程法,其中,狀態轉移表法解題思路大致可以概括為,回溯演算法實作 - 定義狀態 - 畫遞回樹 - 找重復子問題 - 畫狀態轉移表 - 根據遞推關系填表 - 將填表程序翻譯成代碼,狀態轉移方程法的大致思路可以概括為,找最優子結構 - 寫狀態轉移方程 - 將狀態轉移方程翻譯成代碼,

練習題

假設我們有幾種不同幣值的硬幣 v1,v2,……,vn(單位是元),如果我們要支付 w 元,求最少需要多少個硬幣,比如,我們有 3 種不同的硬幣,1 元、3 元、5 元,我們要支付 9 元,最少需要 3 個硬幣(3 個 3 元的硬幣),

參考資料

動態規劃理論:一篇文章帶你徹底搞懂最優子結構、無后效性和重復子問題

 

點擊關注,第一時間了解華為云新鮮技術~

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/551083.html

標籤:其他

上一篇:AI降臨,前端啟用面壁計劃

下一篇:返回列表

標籤雲
其他(158017) Python(38099) JavaScript(25390) Java(17999) C(15217) 區塊鏈(8260) C#(7972) AI(7469) 爪哇(7425) MySQL(7140) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5328) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4559) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2430) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1960) Web開發(1951) HtmlCss(1923) python-3.x(1918) 弹簧靴(1913) C++(1911) xml(1889) PostgreSQL(1873) .NETCore(1855) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 掌握動態規劃,從“什么問題適合用”及“解題思路”入手

    摘要:一般是用動態規劃來解決最優問題。 本文分享自華為云社區《深入淺出動態規劃演算法(中)》,作者:嵌入式視覺 。 一,“一個模型三個特征”理論講解 一個模型指的是適合用動態規劃演算法解決的問題的模型,這個模型也被定義為“多階段決策最優解模型”。具體解釋如下: 一般是用動態規劃來解決最優問題。而解決問題 ......

    uj5u.com 2023-04-25 08:15:41 more
  • AI降臨,前端啟用面壁計劃

    作者:京東零售 鄭炳懿 開篇: “在我們有生之年,你覺得會看到AI兵臨城下的那一天嗎?就像電影黑客帝國里面演的一樣”,Barry從紅色的煙盒里取出一根煙發問道。 “不可能!我覺得AI再強,那也是人類發明的,電影過分魔幻化了,”Woody深吸了一口煙,吐著煙圈道。 “有生之年是夠嗆了,我們這一代估計是 ......

    uj5u.com 2023-04-25 08:15:07 more
  • 云原生周刊:2023 年 Java 開發人員可以學習的 25 大技術技能

    文章推薦 2023 年 Java 開發人員可以學習的 25 大技術技能 這篇文章為 Java 開發人員提供了 2023 年需要學習的一些重要技能,這些技能涵蓋了現代 Java 開發、大資料和人工智能、安全性、分布式系統和區塊鏈、以及其他領域。Java 開發人員應該根據自己的需求和職業規劃,選擇適合自 ......

    uj5u.com 2023-04-25 08:14:39 more
  • ES的索引結構與演算法決議

    作為搜索引擎的一部分,ES自然具有速度快、結果準確、結果豐富等特點,那么ES是如何達到“搜索引擎”級別的查詢效率呢?首先是索引,其次是壓縮演算法,接下來我們就一起了解下ES的索引結構和壓縮演算法 ......

    uj5u.com 2023-04-25 08:14:34 more
  • S3 物件重命名

    本文所述操作適用于兼容 S3 協議的所有存盤框架,包括 AWS S3、Aliyun OSS、MinIO、Ceph 等。 不知為何,截止目前,S3 協議并不包含物件重命名的介面。如果有重命名物件的需求,一般能想到的就是重新上傳改名之后的物件,然后從存盤桶中將原名物件洗掉。很明顯,這種方式好比大炮打蚊子 ......

    uj5u.com 2023-04-25 08:14:29 more
  • 【Lua】VSCode 搭建 Lua 開發環境

    前言 最近在找作業,基本所有的崗位都會問到 Lua(甚至拼 UI 的都要求會 Lua),咱能怎么辦呢,咱也只能學啊…… 工欲善其事,必先利其器。第一步,先來把環境配置好吧! 當前適用版本: LuaBinaries 版本:5.4.2 VSCode 版本:1.77.3 文章最近更新日期:2023.04. ......

    uj5u.com 2023-04-25 08:13:58 more
  • UNITY_Z_0_FAR_FROM_CLIPSPACE的作用

    在一個開了深度霧,平面和天空盒由頭攝像機渲染,而材質球由正交相機渲染的場景下,調節正交相機的近裁剪面為負時,會出現材質球突變成霧的顏色的bug。 需要把URP原始碼中的 #define _FOG_FRAGMENT 1 注釋掉 一般來說,連續調節某個數值,變化也應當是連續的,而霧出現這種情況必然有哪個地 ......

    uj5u.com 2023-04-25 08:08:32 more
  • 第14屆藍橋杯C++B組省賽題解(A-J)(更新完畢)

    A. 日期統計 題目內容 小藍現在有一個長度為 $100$ 的陣列,陣列中的每個元素的值都在 $0$ 到 $9$ 的范圍之內。 陣列中的元素從左至右如下所示: 5 6 8 6 9 1 6 1 2 4 9 1 9 8 2 3 6 4 7 7 5 9 5 0 3 8 7 5 8 1 5 8 6 1 8 ......

    uj5u.com 2023-04-25 08:08:16 more
  • 李航統計學習概述

    監督學習 感知機 概念: 感知機模型的基本形式是: $f(x) = sign(w \cdot x + b)$ 其中,$x$ 是輸入樣本的特征向量,$w$ 是權值向量,$b$ 是偏置量,$w \cdot x$ 表示向量 $w$ 和 $x$ 的點積。$sign$ 函式表示符號函式,當輸入大于 0 時輸出 ......

    uj5u.com 2023-04-25 08:08:12 more
  • [Week 18] 每日一題(C++,動態規劃,線段樹,數學)

    [Daimayuan] T1 最長公共子序列(C++,DP,二分) 給出從 $1$ 到 $n$ 的兩個排列 $P_1$ 和 $P_2$,求它們的最長公共子序列。 輸入格式 第一行是一個正整數 $n$。 接下來兩行,每行為 $n$ 個數,為自然數 $1,2,…,n$ 的一個排列。 輸出格式 一個數,即 ......

    uj5u.com 2023-04-25 08:08:08 more