主頁 >  其他 > 如虎添翼!高德地圖+Serverless 護航你的假日出行

如虎添翼!高德地圖+Serverless 護航你的假日出行

2022-03-10 18:08:14 其他

作者:劉金龍(福辰) 高德團隊

引言

“前方事故多發地段,請注意保持車距...”“您已疲勞駕駛,請注意休息...”“前方經過泰山旅游景區,中國 5A 級景區,是第一批國家級風景名勝區...." ......

這是高德出行的導航場景,像這樣暖心的語音提示,在春節期間的每天都會有上百億次,以保障您的出行安全,然而這背后,任何系統抖動或者故障,都會影響到用戶的出行安全,所以在節日期間整個團隊會嚴陣以待并去現場值班,以保障系統的穩定性,

在過去的 2021 年,高德地圖提出了新的品牌主張:在“高德地圖,哪兒都熟”的背景下,高德出行 App 增添了更多的用戶使用場景,隨之而來業務系統也變得更為復雜,為了保障系統的穩定性,每一個節日大促期間,都會有同事去現場值班,

為了解決這一困境,我們對系統架構進行了更深的思考,并一致認同 Serverless 會是未來的技術趨勢,所以在過去的一年中,我們對 Serverless 技術做了很多的探索,并實作了部分核心業務的 Serverless 化,利用 Serverless :低成本,免運維,高彈性等優勢,達成了上述提及業務,節假日無需同事再去現場值班的目標,讓團隊成員可以在家過一個安心團圓年,

本文會分享過去的一年,高德地圖在 Serverless 領域做過哪些探索?如何與業務相結合,實作了一個低成本,低代碼,免運維的現代化的 Serverless 研發平臺,

業務背景

自 2021 年 7 月,高德地圖宣布品牌履新:整體向 “出門好生活開放服務平臺”升級,同時提出了“高德地圖,哪兒都熟”的新品牌主張,高德地圖從導航工具升級為出行服務平臺、生活資訊服務入口;為了更好地服務用戶,拓展和出行相關的生活資訊服務場景:高德地圖主圖、我的頁面、行前行后場景以業務卡片的方式,透出了業務推薦資訊,下圖是高德 App 中出現的幾個典型卡片推薦場景:



樣式多變

高德地圖的業務特點之一是:高頻率的樣式變化,節日氣氛的襯托、假期旅游的引導、交通資訊的提醒等等多變不同的需求下,亟需一種能夠快速迭代的研發模式,而傳統的研發模式是:每一個變化都是在 App 客戶端上研發,然后隨著 App 版本的發布進行樣式再更新,(這種發版效率很慢,并且要考慮到穩定性;每月一個版本,如果仍使用這種研發模式,其實是很難滿足業務需求的,)

策略多變

卡片業務背后的后端代碼,會隨著業務型別的不斷增加,因此相應的業務策略越來越多,如果不及時與系統功能模塊進行抽離,就像生命力頑強的爬山虎一樣,系統代碼不斷無序增加,越來越臃腫,復雜性也越來越高,而多變的策略,會要求在系統架構上做出改變,達到策略的快速增加與洗掉,以及實時的生效,

客戶端瘦身

過多的業務邏輯糅合到客戶端,雖然可以一定程度上提高性能,但是如果客戶端過大,也會導致用戶不愿更新,其實動輒幾百兆的更新,不僅會增加我們的帶寬成本,也占用了用戶的資料流量,此外因為代碼多,相應的涉及業務也多,如果每一個業務都有快速迭代的要求,這就需要 App 客戶端擁有能夠快頻率的更新的能力,

兩者構成了惡性的回圈,不利于 App 的長期發展,所以客戶端瘦身勢在必行,

早晚峰值

上班早高峰,下班晚高峰,相信大家都有過一致的體驗:堵 !!同樣地圖導航類應用,早晚峰值時間段非常的明顯,且峰值和低谷的波谷差距非常大,如果所有的機器資源按照峰值去準備,這成本無疑是非常高的,在低峰期,會造成極大的資源浪費,所以我們需要能夠按需使用的彈性資源技術,去降低我們的機器資源成本,

技術選型

經過架構組的多輪討論,最終我們并達成達成一致目標:全面擁抱 Serverless,因為 Serverless 的優勢特點,恰好解決了我們的業務痛點需求,我們也相信未來一定是屬于 Serverless 的時代,

Serverless for frontend

不用多說,當下前端最熱的技術趨勢就是:云端一體化研發模式,它實際上是以 Serverless 技術作為技術底座去構建的現代化應用研發模式;不僅降低了“全堆疊開發工程師” 的技術門檻,還大幅提高了研發效率,阿里內部多個大型 App 都已全量使用,比如淘寶,天貓,飛豬等等,經過嚴格的資料統計,Serverless 在研發提效上能提高 38%,這也是我們選擇 Serverless 最重要的資料依據,除此以外,基于 Serverless 實作的 CSR/SSR 首屏提速技術方案,目前也已經非常的成熟,幾乎覆寫了阿里內部的 App 應用,

快速迭代

工程卓越一直是我們的追求目標,但是由于各大技術產品關注重點不同,所以對于“研發最后一公里”的相關事項并沒有做太多關注,這就導致了技術產品的功能與用戶體驗出現割裂感,很多業務方放棄使用,

Serverless 的目標就是讓你盡可能多的專注自己的業務邏輯,能夠少關注或者忽略非業務核心的運維作業;加速開發時間,降低線上資源的冗余成本,所以 Serverless 無疑是扛得起降本提效的大旗的,

完全彈性

請求毫秒級的調度是 Serverless 的核心競爭力,相比傳統的分鐘級彈性擴容,Serverless 技術存在巨大的成本優勢,擴容所耗費的時間越少,預留的機器資源就會更低,如果到了毫秒級別,就無需預留任何資源,這樣成本能夠大大的降低,資源利用率可以達到 100%,

低成本遷移利器 - Runtime/Container

做程序式員的同學都知道最痛苦的事情是“改別人的代碼”,因此,雖然 Serverless 技術十分誘人,但是對于存量的應用如何遷移到 Serverless 架構上,也一直困擾著我們,

我們應如何以低代碼的方式解決傳統架構潮汐流量對資源使用不合理的問題,于是我們跟 Serverless 團隊同和合作開發 Runtime,由于高德的服務均以 C++、Go、Rust 的語言設計,于是我們開發出 C++、Go、Rust 的 Runtime,Runtime 集成了集團內的中間件,使得 Serverless 架構可以滿足我們之前服務的整個生命周期,讓我們可以快速的切換服務到 Serverless 平臺上,

但是隨著我們使用量變大,業務場景比較復雜,一些對外的服務是無法使用內部 Runtime 的,這個嚴重的問題一直掣肘著我們,使原有的架構由簡單又變得復雜起來,直到阿里云 Serverless 團隊的同學,推出了 Custom Runimte/Container 功能,徹底解決了我們后顧之憂,我們只需改幾行啟動命令,就可以輕松遷移存量的應用,Serverless 團隊也針對鏡像的快速分發做了大量的創新優化作業,如使用四級快取,P2P 技術,按需下載等方式,提供了秒級別下載 3G 大小鏡像的能力,

得益于 Serverless 技術加持,無人值守的目標也就很容易達成,所有的運維操作,都通過 Serverless 的強大調度能力去解決,比如峰值高峰期,系統會自動毫秒級別進行擴容,低峰期同樣也會 Graceful 的進行縮容,不涉及任何人為操作運維,所以這也解決了我們在節日大促期間過多人現場值班的困境,

Serverless 技術落地

架構設計

在系統設計上,我們引入了兩層 FaaS (Function as a Serverles),端 FaaS 和業務 FaaS,其中:

  • 端 FaaS,也就是 SFF ( Serverless for frontend),基于 Node.js,實作了端云一體化開發,將原本客戶端的邏輯移到 FaaS 服務端來,這里在傳統的 Frontend 和 Backend 之間抽象出了 SFF,用來實作資料和呼叫邏輯封裝,快速開發、發布,

  • 在后端,引入業務 FaaS,基于 Java/Go 實作, 用來封裝推薦策略邏輯和資料轉換代碼,可以提高策略迭代效率,同時減少策略迭代對主工程的影響,

從整體上看,將函式計算和容器化微服務整合在一起,綜合利用函式計算的高效和傳統微服務的靈活,是一種實用高效的架構設計思路,

快速迭代

作為核心的應用,需要一套完備的 CI/CD 流程去保障應用的質量,針對函式的質量,我們基于了 Serverless Devs 工具鏈同樣實作了一套研發全流程方案,不僅具備函式多環境,函式灰度切流,函式可觀測等能力,而且通過這套 Serverless 研發體系,我們實作了 1 分鐘開始進入開發,5 分鐘完成上線的能力,同時默認具備異地多活的能力,

限流降級,異地多活

對于大流量應用的穩定性,限流保護,降級預案,異地多活是三大必備功能,特別是大促的時候,非預期的流量都可能引起系統雪崩,在我們的 Serverless 研發平臺上,集成了阿里云函式計算的并發度流控,QPS 流控的能力,做到了函式粒度的流控,

另外一個亮點是,FaaS 的容災方案與傳統應用的容災方案相比,有著巨大的優勢,在傳統應用的容災方案中,異地多活需要在備機房中準備冗余的機器資源,這些資源也就是成本,但是在 Serverless 場景下的方案中,因為是快速彈性,秒級別就能完成資源的準備,所以無需進行資源冗余準備,這就大大節省了成本,雖然是三單元,但是成本仍然是一個單元的費用,目前所有核心的函式應用,我們都默認實作了三單元容災,

6.png

冷啟動優化

如果你的業務對于冷啟動非常的敏感,比如 50 ~ 100 毫秒的延遲增加,你都無法接受的話,不要擔心,我們仍可以通過擴容策略進行彌補:預留資源來消減冷啟動對業務的影響,

  • 預留實體,根據產品流量曲線,很容易得出固定流量是多少,這部分流量用“預留模式”,適合冷啟動敏感的業務;

  • 按量擴容模式,按用戶設定的并發度或者 CPU 利用率閾值進行擴容,擴容中的實體,不會立即接收流量,而是實體 Ready 后再進行服務,所以擴容中新增的流量會仍然派發到“正在服務中”的實體,并不會觸發冷啟動,

展望

在過去的 2021 年,高德在 Serverless 領域中,做了很多方向的探索,也實作了部分核心業務的 Serverless 化,單在 Serverless 的業務 QPS 峰值就已經超過 40W QPS, 然而這不是終點,只是剛剛開始,后續我們會全面轉向 Serverless 化,比如,地圖資料的處理,圖片的栽剪,訊息的消費等等這些離線的非在線應用,它們同樣也是 Serverless 的最佳適用場景,我們期望今后有更多的場景去使用 Serverless,享受 Serverless 給我們帶來的技術紅利 !

近期熱門

# 極速上手 Serverless #

隨著 Serverless 熱度不斷升高,越來越多人期望在實際作業中能快速上手,為了讓更多 Serverless 初學者真正學會 Serverless 理論知識,在作業中根據需要靈活應用 Serverless 技術,阿里云 Serverless 團隊推出技術圖譜,本課程包含視頻課、動手實驗、電子書、直播、開源專案多種形式內容,讓各位開發者即學即用,跑步入場享受 Serverless 技術紅利,點擊??此處??即可學習!

發布云原生技術最新資訊、匯集云原生技術最全內容,定期舉辦云原生活動、直播,阿里產品及用戶最佳實踐發布,與你并肩探索云原生技術點滴,分享你需要的云原生內容,

關注【阿里巴巴云原生】公眾號,獲取更多云原生實時資訊!

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/440498.html

標籤:其他

上一篇:31 家企業入選阿里云首期云原生加速器,共建云原生行業新生態

下一篇:如虎添翼!高德地圖+Serverless 護航你的假日出行

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 2023年最新微信小程式抓包教程

    01 開門見山 隔一個月發一篇文章,不過分。 首先回顧一下《微信系結手機號資料庫被脫庫事件》,我也是第一時間得知了這個訊息,然后跟蹤了整件事情的經過。下面是這起事件的相關截圖以及近日流出的一萬條資料樣本: 個人認為這件事也沒什么,還不如關注一下之前45億快遞資料查詢渠道疑似在近日復活的訊息。 訊息是 ......

    uj5u.com 2023-04-20 08:48:24 more
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:47:46 more
  • vulnhub_Earth

    前言 靶機地址->>>vulnhub_Earth 攻擊機ip:192.168.20.121 靶機ip:192.168.20.122 參考文章 https://www.cnblogs.com/Jing-X/archive/2022/04/03/16097695.html https://www.cnb ......

    uj5u.com 2023-04-20 07:46:20 more
  • 從4k到42k,軟體測驗工程師的漲薪史,給我看哭了

    清明節一過,盲猜大家已經無心上班,在數著日子準備過五一,但一想到銀行卡里的余額……瞬間心情就不美麗了。最近,2023年高校畢業生就業調查顯示,本科畢業月平均起薪為5825元。調查一出,便有很多同學表示自己又被平均了。看著這一資料,不免讓人想到前不久中國青年報的一項調查:近六成大學生認為畢業10年內會 ......

    uj5u.com 2023-04-20 07:44:00 more
  • 最新版本 Stable Diffusion 開源 AI 繪畫工具之中文自動提詞篇

    🎈 標簽生成器 由于輸入正向提示詞 prompt 和反向提示詞 negative prompt 都是使用英文,所以對學習母語的我們非常不友好 使用網址:https://tinygeeker.github.io/p/ai-prompt-generator 這個網址是為了讓大家在使用 AI 繪畫的時候 ......

    uj5u.com 2023-04-20 07:43:36 more
  • 漫談前端自動化測驗演進之路及測驗工具分析

    隨著前端技術的不斷發展和應用程式的日益復雜,前端自動化測驗也在不斷演進。隨著 Web 應用程式變得越來越復雜,自動化測驗的需求也越來越高。如今,自動化測驗已經成為 Web 應用程式開發程序中不可或缺的一部分,它們可以幫助開發人員更快地發現和修復錯誤,提高應用程式的性能和可靠性。 ......

    uj5u.com 2023-04-20 07:43:16 more
  • CANN開發實踐:4個DVPP記憶體問題的典型案例解讀

    摘要:由于DVPP媒體資料處理功能對存放輸入、輸出資料的記憶體有更高的要求(例如,記憶體首地址128位元組對齊),因此需呼叫專用的記憶體申請介面,那么本期就分享幾個關于DVPP記憶體問題的典型案例,并給出原因分析及解決方法。 本文分享自華為云社區《FAQ_DVPP記憶體問題案例》,作者:昇騰CANN。 DVPP ......

    uj5u.com 2023-04-20 07:43:03 more
  • msf學習

    msf學習 以kali自帶的msf為例 一、msf核心模塊與功能 msf模塊都放在/usr/share/metasploit-framework/modules目錄下 1、auxiliary 輔助模塊,輔助滲透(埠掃描、登錄密碼爆破、漏洞驗證等) 2、encoders 編碼器模塊,主要包含各種編碼 ......

    uj5u.com 2023-04-20 07:42:59 more
  • Halcon軟體安裝與界面簡介

    1. 下載Halcon17版本到到本地 2. 雙擊安裝包后 3. 步驟如下 1.2 Halcon軟體安裝 界面分為四大塊 1. Halcon的五個助手 1) 影像采集助手:與相機連接,設定相機引數,采集影像 2) 標定助手:九點標定或是其它的標定,生成標定檔案及內參外參,可以將像素單位轉換為長度單位 ......

    uj5u.com 2023-04-20 07:42:17 more
  • 在MacOS下使用Unity3D開發游戲

    第一次發博客,先發一下我的游戲開發環境吧。 去年2月份買了一臺MacBookPro2021 M1pro(以下簡稱mbp),這一年來一直在用mbp開發游戲。我大致分享一下我的開發工具以及使用體驗。 1、Unity 官網鏈接: https://unity.cn/releases 我一般使用的Apple ......

    uj5u.com 2023-04-20 07:40:19 more