主頁 > 軟體工程 > 綜合5項百度大腦AI技術,快速構建智能交通方案

綜合5項百度大腦AI技術,快速構建智能交通方案

2020-09-11 11:33:41 軟體工程

一、整體方案:
思路:整合百度AI功能,通過百度AI解決、優化在公交運行程序中遇到的運營、管理、安全等方面的問題,具體如下:

安全方面:
通過駕駛員檢測+語音合成,對駕駛員狀態進行實時檢測,跟蹤,告警, 
通過人流量統計對車內人數進行跟蹤,在人數過多的時候告警,
通過危險行為識別功能對駕駛室及車輛內部的危險行為進行識別,提出警告,并上傳后臺系統,啟動安全預案,將危險控制在萌芽狀態,

經營方面:
通過車內和車站人流量識別,判斷車內乘客數量上傳后臺系統,對車輛調度計劃進行優化,

整體方案如圖所示:

二、相關功能介紹:
人流量統計
統計影像中的人體個數和流動趨勢,以頭肩為主要識別目標統計人數,無需正臉、全身照,適應人群密集、各種出入口場景,包括:
靜態人流量統計:適用于3米以上的中遠距離俯拍,以頭部為識別目標統計圖片中的瞬時人數;無人數上限,廣泛適用于機場、車站、商場、展會、景區等人群密集場所
動態人流量統計:面向門店、通道等出入口場景,以頭肩為識別目標,進行人體檢測和追蹤,根據目標軌跡判斷進出區域方向,實作動態人數統計,回傳區域進出人數
詳細說明見:
https://ai.baidu.com/tech/body/num

駕駛行為分析:
針對車載場景,識別駕駛員使用手機、抽煙、不系安全帶、雙手離開方向盤等動作姿態,分析預警危險駕駛行為,提升行車安全性,可以針對出租車、客車、公交車、貨車等各類營運車輛,實時監控車內情況,識別駕駛員抽煙、使用手機、未系安全帶等危險行為,及時預警,降低事故發生率,保障人身財產安全
詳細說明見:
https://ai.baidu.com/tech/body/driver

危險行為識別:
針對5s內的監控視頻片段,識別行為類別,目前支持7類行為:單人-情緒性指人、單人-摔倒、單人-激烈抱怨、單人-砸東西、單人-正常、雙人-危險(包含出拳/拉扯/推搡/激烈摟抱/砸按/踢踹等)、雙人-正常,
詳細說明見:
https://ai.baidu.com/tech/body/danger
檔案:https://ai.baidu.com/docs#/Body-API/19f2f5e1
請求URL:https://aip.baidubce.com/rest/2.0/video-classify/v1/body_danger


三、關鍵呼叫代碼(Python3)

#駕駛行為識別:
import urllib
import base64
import json
import time

#client_id 為官網獲取的AK, client_secret 為官網獲取的SK
client_id = 'XXXXXXXX'
client_secret = 'XXXXXXXXX'

#獲取token
def get_token():
    host = 'https://aip.baidubce.com/oauth/2.0/token?grant_type=client_credentials&client_id=' + client_id + '&client_secret=' + client_secret
    request = urllib.request.Request(host)
    request.add_header('Content-Type', 'application/json; charset=UTF-8')
    response = urllib.request.urlopen(request)
    token_content = response.read()
    if token_content:
        token_info = json.loads(token_content)
        token_key = token_info['access_token']
    return token_key

#駕駛行為識別
def driver_behavior(filename):
    request_url = "https://aip.baidubce.com/rest/2.0/image-classify/v1/driver_behavior"
    print(filename)
    # 二進制方式打開圖片檔案
    f = open(filename, 'rb')
    img = base64.b64encode(f.read())
    
    params = dict()
    params['image'] = img
    params = urllib.parse.urlencode(params).encode("utf-8")
    
    access_token = get_token()
    begin = time.perf_counter()
    request_url = request_url + "?access_token=" + access_token
    request = urllib.request.Request(url=request_url, data=https://www.cnblogs.com/AIBOOM/p/params)
    request.add_header('Content-Type', 'application/x-www-form-urlencoded')
    response = urllib.request.urlopen(request)
    content = response.read()
    end = time.perf_counter()

    print('處理時長:'+'%.2f'%(end-begin)+'秒')
    
    if content:
        content=content.decode('utf-8')
        data = https://www.cnblogs.com/AIBOOM/p/json.loads(content)
        print('人數:',data['person_num'])
        persons=data['person_info']
        print (persons)

#人流量統計
def body_num(filename):
    request_url = "https://aip.baidubce.com/rest/2.0/image-classify/v1/body_num"
    
    # 二進制方式打開圖片檔案
    f = open(filename, 'rb')
    img = base64.b64encode(f.read())
    
    params = dict()
    params['image'] = img
    params['show'] = 'true'
    params = urllib.parse.urlencode(params).encode("utf-8")
    #params = json.dumps(params).encode('utf-8')
    
    access_token = get_token()
    request_url = request_url + "?access_token=" + access_token
    request = urllib.request.Request(url=request_url, data=https://www.cnblogs.com/AIBOOM/p/params)
    request.add_header('Content-Type', 'application/x-www-form-urlencoded')
    response = urllib.request.urlopen(request)
    content = response.read()
    person_num=0
    if content:
        #print(content)
        content=content.decode('utf-8')
        #print(content)
        data = https://www.cnblogs.com/AIBOOM/p/json.loads(content)
        #print(data)
        person_num=data['person_num']
        print ('person_num',person_num)
    return person_num
#危險行為識別
#filename:原圖片名(本地存盤包括路徑)
def body_danger(filename):
    request_url = "https://aip.baidubce.com/rest/2.0/video-classify/v1/body_danger"
    
    # 二進制方式打開圖片檔案
    f = open(filename, 'rb')
    img = base64.b64encode(f.read())
    
    params = dict()
    params['data'] = img
    params = urllib.parse.urlencode(params).encode("utf-8")
    #params = json.dumps(params).encode('utf-8')
    
    access_token = get_token()
    request_url = request_url + "?access_token=" + access_token
    request = urllib.request.Request(url=request_url, data=https://www.cnblogs.com/AIBOOM/p/params)
    request.add_header('Content-Type', 'application/x-www-form-urlencoded')
    response = urllib.request.urlopen(request)
    content = response.read()
    if content:
        #print(content)
        content=content.decode('utf-8')
        #print(content)
        data = https://www.cnblogs.com/AIBOOM/p/json.loads(content)
        print(data)
        for item in data['result']:
            print ('行為:',item['name'])
            print ('分數:',item['score'])

四、相關功能測驗:

4.1 安全管理

(一)首先是駕駛行為分析,針對駕駛員的抽煙,打手機等不規范行為:

人數: 1
使用手機: 0.10
抽煙: 0.40
未系安全帶: 0.81
雙手離開方向盤: 0.24
視角未看前方: 0.16
警告:未系安全帶

人數: 1
使用手機: 0.95
抽煙: 0.01 
未系安全帶: 0.80
雙手離開方向盤: 0.95 
視角未看前方: 0.98
警告:使用手機 未系安全帶 雙手離開方向盤 視角未看前方

 

(二)然后是針對駕駛室的危險行為,尤其是針對駕駛員的各種危險行為,這里以前一段時間的重慶萬州的公交事故的駕駛室監控視頻為例,因為社區不支持視頻,所以使用圖片示意,

大家可以通過微博地址查看視頻:http://t.cn/EwM3WqQ

識別的速度很快,識別的內容如下:

行為: 雙人-危險
分數: 0.954391598701477

可以發現,百度AI快速的識別了危險行為,而且危險分數很高,在系統的支持下,在自動報警的同時,通過語音合成技術大聲語音警告:“對公共車輛駕駛員的暴力行為是違法的,為了所有人的安全請立刻停止!!!”

 

4.2 運營管理

對車輛內部及車站人數的統計,進而對車輛調度進行優化,同時也可以防止車輛過于擁擠產生踩踏事故,例如對下圖的識別,

人數:6,未超過最大載荷,車內安全,

車站人數:8,很準確(右上角有一個穿白衣服人的背影)

結合車輛人的數量和車站人的數量就可以進行科學調度,對于這個例子來說,可以適當增加下一輛公交的發車時間了,

 

五、測驗結論及展望:
通過對百度AI功能進行測驗,發現識別的效果都很好,百度AI能快速、準確的識別各種風險,對人數的統計也非常的準確,針對現在公共出行的安全和管理的痛點進行了很好的解決,現在可以直接落地的技術包括:

安全方面:通過駕駛員檢測+語音合成,對駕駛員狀態進行實時檢測,跟蹤,告警;通過人流量統計對車內人數進行跟蹤,在人數過多的時候告警;通過危險行為識別功能對駕駛室及車輛內部的危險行為進行識別,提出警告,并上傳后臺系統,啟動安全預案,將危險控制在萌芽狀態,

經營方面:通過車內和車站人流量識別,判斷車內乘客數量上傳后臺系統,對車輛調度計劃進行優化,

再配套開發對應的管理平臺等平臺結合起來就可以形成一整套的公交安全運營解決方案,對于提高公交運營的安全性和運營效率會有非常的的幫助,結合百度云技術、AI技術與開發平臺,實作端云結合,讓應用快速落地,在結合未來的全自動AI駕駛,百度城市大腦,相信公共出行會越來越安全、便捷,

作者:worddict 

轉載請註明出處,本文鏈接:https://www.uj5u.com/gongcheng/5471.html

標籤:其他

上一篇:用百度大腦植物識別,快速搞定“萬種植物和花卉”小工具

下一篇:如何快速將百度大腦AI技術內置智能小程式中

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • Git本地庫既關聯GitHub又關聯Gitee

    創建代碼倉庫 使用gitee舉例(github和gitee差不多) 1.在gitee右上角點擊+,選擇新建倉庫 ? 2.選擇填寫倉庫資訊,然后進行創建 ? 3.服務端已經準備好了,本地開始作準備 (1)Git 全域設定 git config --global user.name "成鈺" git c ......

    uj5u.com 2020-09-10 05:04:14 more
  • CODING DevOps 代碼質量實戰系列第二課,相約周三

    隨著 ToB(企業服務)的興起和 ToC(消費互聯網)產品進入成熟期,線上故障帶來的損失越來越大,代碼質量越來越重要,而「質量內建」正是 DevOps 核心理念之一。**《DevOps 代碼質量實戰(PHP 版)》**為 CODING DevOps 代碼質量實戰系列的第二課,同時也是本系列的 PHP ......

    uj5u.com 2020-09-10 05:07:43 more
  • 推薦Scrum書籍

    推薦Scrum書籍 直接上干貨,推薦書籍清單如下(推薦有順序的哦) Scrum指南 Scrum精髓 Scrum敏捷軟體開發 Scrum捷徑 硝煙中的Scrum和XP : 我們如何實施Scrum 敏捷軟體開發:Scrum實戰指南 Scrum要素 大規模Scrum:大規模敏捷組織的設計 用戶故事地圖 用 ......

    uj5u.com 2020-09-10 05:07:45 more
  • CODING DevOps 代碼質量實戰系列最后一課,周四發車

    隨著 ToB(企業服務)的興起和 ToC(消費互聯網)產品進入成熟期,線上故障帶來的損失越來越大,代碼質量越來越重要,而「質量內建」正是 DevOps 核心理念之一。 **《DevOps 代碼質量實戰(Java 版)》**為 CODING DevOps 代碼質量實戰系列的最后一課,同時也是本系列的 ......

    uj5u.com 2020-09-10 05:07:52 more
  • 敏捷軟體工程實踐書籍

    Scrum轉型想要做好,第一步先了解并真正落實Scrum,那么我推薦的Scrum書籍是要看懂并實踐的。第二步是團隊的工程實踐要做扎實。 下面推薦工程實踐書單: 重構:改善既有代碼的設計 決議極限編程 : 擁抱變化 代碼整潔代碼 程式員的職業素養 修改代碼的藝術 撰寫可讀代碼的藝術 測驗驅動開發 : ......

    uj5u.com 2020-09-10 05:07:55 more
  • Jenkins+svn+nginx實作windows環境自動部署vue前端專案

    前面文章介紹了Jenkins+svn+tomcat實作自動化部署,現在終于有空抽時間出來寫下Jenkins+svn+nginx實作自動部署vue前端專案。 jenkins的安裝和配置已經在前面文章進行介紹,下面介紹實作vue前端專案需要進行的哪些額外的步驟。 注意:在安裝jenkins和nginx的 ......

    uj5u.com 2020-09-10 05:08:49 more
  • CODING DevOps 微服務專案實戰系列第一課,明天等你

    CODING DevOps 微服務專案實戰系列第一課**《DevOps 微服務專案實戰:DevOps 初體驗》**將由 CODING DevOps 開發工程師 王寬老師 向大家介紹 DevOps 的基本理念,并探討為什么現代開發活動需要 DevOps,同時將以 eShopOnContainers 項 ......

    uj5u.com 2020-09-10 05:09:14 more
  • CODING DevOps 微服務專案實戰系列第二課來啦!

    近年來,工程專案的結構越來越復雜,需要接入合適的持續集成流水線形式,才能滿足更多變的需求,那么如何優雅地使用 CI 能力提升生產效率呢?CODING DevOps 微服務專案實戰系列第二課 《DevOps 微服務專案實戰:CI 進階用法》 將由 CODING DevOps 全堆疊工程師 何晨哲老師 向 ......

    uj5u.com 2020-09-10 05:09:33 more
  • CODING DevOps 微服務專案實戰系列最后一課,周四開講!

    隨著軟體工程越來越復雜化,如何在 Kubernetes 集群進行灰度發布成為了生產部署的”必修課“,而如何實作安全可控、自動化的灰度發布也成為了持續部署重點關注的問題。CODING DevOps 微服務專案實戰系列最后一課:**《DevOps 微服務專案實戰:基于 Nginx-ingress 的自動 ......

    uj5u.com 2020-09-10 05:10:00 more
  • CODING 儀表盤功能正式推出,實作作業資料可視化!

    CODING 儀表盤功能現已正式推出!該功能旨在用一張張統計卡片的形式,統計并展示使用 CODING 中所產生的資料。這意味著無需額外的設定,就可以收集歸納寶貴的作業資料并予之量化分析。這些海量的資料皆會以圖表或串列的方式躍然紙上,方便團隊成員隨時查看各專案的進度、狀態和指標,云端協作迎來真正意義上 ......

    uj5u.com 2020-09-10 05:11:01 more
最新发布
  • windows系統git使用ssh方式和gitee/github進行同步

    使用git來clone專案有兩種方式:HTTPS和SSH:
    HTTPS:不管是誰,拿到url隨便clone,但是在push的時候需要驗證用戶名和密碼;
    SSH:clone的專案你必須是擁有者或者管理員,而且需要在clone前添加SSH Key。SSH 在push的時候,是不需要輸入用戶名的,如果配置... ......

    uj5u.com 2023-04-19 08:41:12 more
  • windows系統git使用ssh方式和gitee/github進行同步

    使用git來clone專案有兩種方式:HTTPS和SSH:
    HTTPS:不管是誰,拿到url隨便clone,但是在push的時候需要驗證用戶名和密碼;
    SSH:clone的專案你必須是擁有者或者管理員,而且需要在clone前添加SSH Key。SSH 在push的時候,是不需要輸入用戶名的,如果配置... ......

    uj5u.com 2023-04-19 08:35:34 more
  • 2023年農牧行業6大CRM系統、5大場景盤點

    在物聯網、大資料、云計算、人工智能、自動化技術等現代資訊技術蓬勃發展與逐步成熟的背景下,數字化正成為農牧行業供給側結構性變革與高質量發展的核心驅動因素。因此,改造和提升傳統農牧業、開拓創新現代智慧農牧業,加快推進農牧業的現代化、資訊化、數字化建設已成為農牧業發展的重要方向。 當下,企業數字化轉型已經 ......

    uj5u.com 2023-04-18 08:05:44 more
  • 2023年農牧行業6大CRM系統、5大場景盤點

    在物聯網、大資料、云計算、人工智能、自動化技術等現代資訊技術蓬勃發展與逐步成熟的背景下,數字化正成為農牧行業供給側結構性變革與高質量發展的核心驅動因素。因此,改造和提升傳統農牧業、開拓創新現代智慧農牧業,加快推進農牧業的現代化、資訊化、數字化建設已成為農牧業發展的重要方向。 當下,企業數字化轉型已經 ......

    uj5u.com 2023-04-18 08:00:18 more
  • 計算機組成原理—存盤器

    計算機組成原理—硬體結構 二、存盤器 1.概述 存盤器是計算機系統中的記憶設備,用來存放程式和資料 1.1存盤器的層次結構 快取-主存層次主要解決CPU和主存速度不匹配的問題,速度接近快取 主存-輔存層次主要解決存盤系統的容量問題,容量接近與價位接近于主存 2.主存盤器 2.1概述 主存與CPU的聯 ......

    uj5u.com 2023-04-17 08:20:31 more
  • 談一談我對協同開發的一些認識

    如今各互聯網公司普通都使用敏捷開發,采用小步快跑的形式來進行專案開發。如果是小專案或者小需求,那一個開發可能就搞定了。但對于電商等復雜的系統,其功能多,結構復雜,一個人肯定是搞不定的,所以都是很多人來共同開發維護。以我曾經待過的商城團隊為例,光是后端開發就有七十多人。 為了更好地開發這類大型系統,往 ......

    uj5u.com 2023-04-17 08:18:55 more
  • 專案管理PRINCE2核心知識點整理

    PRINCE2,即 PRoject IN Controlled Environment(受控環境中的專案)是一種結構化的專案管理方法論,由英國政府內閣商務部(OGC)推出,是英國專案管理標準。
    PRINCE2 作為一種開放的方法論,是一套結構化的專案管理流程,描述了如何以一種邏輯性的、有組織的方法,... ......

    uj5u.com 2023-04-17 08:18:51 more
  • 談一談我對協同開發的一些認識

    如今各互聯網公司普通都使用敏捷開發,采用小步快跑的形式來進行專案開發。如果是小專案或者小需求,那一個開發可能就搞定了。但對于電商等復雜的系統,其功能多,結構復雜,一個人肯定是搞不定的,所以都是很多人來共同開發維護。以我曾經待過的商城團隊為例,光是后端開發就有七十多人。 為了更好地開發這類大型系統,往 ......

    uj5u.com 2023-04-17 08:18:00 more
  • 專案管理PRINCE2核心知識點整理

    PRINCE2,即 PRoject IN Controlled Environment(受控環境中的專案)是一種結構化的專案管理方法論,由英國政府內閣商務部(OGC)推出,是英國專案管理標準。
    PRINCE2 作為一種開放的方法論,是一套結構化的專案管理流程,描述了如何以一種邏輯性的、有組織的方法,... ......

    uj5u.com 2023-04-17 08:17:55 more
  • 計算機組成原理—存盤器

    計算機組成原理—硬體結構 二、存盤器 1.概述 存盤器是計算機系統中的記憶設備,用來存放程式和資料 1.1存盤器的層次結構 快取-主存層次主要解決CPU和主存速度不匹配的問題,速度接近快取 主存-輔存層次主要解決存盤系統的容量問題,容量接近與價位接近于主存 2.主存盤器 2.1概述 主存與CPU的聯 ......

    uj5u.com 2023-04-17 08:12:06 more