全球最大的開源軟體基金會 Apache 軟體基金會(以下簡稱 Apache)于北京時間 2021 年 4 月 9 日在官方渠道宣布 Apache DolphinScheduler 畢業成為 Apache 頂級專案,這是首個由國人主導并貢獻到 Apache 的大資料作業流調度領域的頂級專案,
DolphinScheduler? 已經是聯通、IDG、IBM、京東物流、聯想、新東方、諾基亞、360、順豐和騰訊等 400+ 公司在使用的分布式可視化大資料作業流調度系統,
DolphinScheduler 于 2019 年 8 月 29 日由易觀捐贈給 Apache 并啟動范訓,之后在導師的指導下,由范訓器管理委員會成員進行輔導和范訓,在 2021 年 2 月 19 日在 Apache 范訓器以 8 票支持一次性通過畢業提案投票,3 月 18 日,Apache 董事會通過 DolphinScheduler 畢業決議,結束了為期 18 個月的范訓,正式確定 DolphinScheduler 成為 Apache 頂級專案,
2021 年 4 月 9 日由 Apache 市場副總裁 Sally Khudairi 在 Apache 軟體基金會各渠道官號上發布官方通告,
關于 Apache DolphinScheduler
Apache DolphinScheduler 是一個分布式易擴展的帶有強大可視化 DAG 界面的新一代作業流調度平臺,自 17 年在立項之初就確定了使命 - “解決大資料任務之間錯綜復雜的依賴關系,使整個資料處理程序直觀可見”,從此配置作業流程再也不需要寫代碼啦!

作為強大的帶有有向無環圖(DAG)可視化界面的分布式大資料作業流調度平臺,Dolphin Scheduler 解決了復雜的任務依賴關系和簡化了資料任務編排的作業,它以開箱即用的、易于擴展的方式將眾多大資料生態組件連接到可處理 100,000 級別的資料任務調度系統中來,
Apache DolphinScheduler是全球頂尖架構師與社區認可的資料調度平臺,把復雜性留給自己,易用性留給用戶,整體有如下特征:
- 云原生設計:支持多云、多資料中心的跨端調度,同時也支持K8s Docker部署與擴展,性能上可以線性增長,在用戶測驗情況下最高已經支持10萬的并行任務控制;
- 高可用:去中心化的多Master/Worker的架構,可以自動任務平衡,自動高可用,確保任務在任何節點死機的情況下可以具有完整性完成整體調度;
- 用戶友好的界面:可視化的DAG圖,包括子任務,條件調度、腳本管理、多租戶等方便功能,并具有讓運行任務實體與任務模板分開,讓你的平臺維護人員和資料科學家都有一個方便易用的開發和管理平臺;
- 支持多種資料場景:支持流資料處理,批資料處理,暫停、回復、多租戶等,對于spark,hive,MR,flink,clickhouse等等平臺都可以方便直接呼叫,
DolphinScheduler 在短短 1 年半范訓時間里就能識訓如此多用戶和其一直倡導的 Slogan 是分不開的:

最終Apache Dolphin Scheduler獲得大量用戶,例如中國聯通、IBM中國,京東物流,聯想,新東方,順豐快遞等等,400多個用戶都在線上使用:

是的,呼叫用的對,半夜真能安心睡!
Apache DolphinScheduler開始了新的起點!
DolphinScheduler 在設計之初就秉承著大道至簡、產品易用易維護的核心理念,以高可用、易擴展作為架構底座,經過諸多打磨,獲得了用戶群體的肯定,然后才在 2019年 3 月正式對外開源,8 月 29 日成功進入到 Apache 范訓器,成為國內首個 Apache 大資料調度專案,多次登陸 github 月度趨勢榜并引起 Hacker News 上的熱烈討論,在 2020 年, DolphinScheduler 也獲得了諸多贊譽,InfoQ 中國技術力量年度榜單評其為 “十大開源新銳專案” 和 “最具人氣開源新銳專案”,榮獲開源中國年度 “最佳技術團隊” 等稱號,DolphinScheduler社區已經有龐大的 4000+ 人的用戶群,據不完全統計,截止 2020 年 10 月,已經有 400+ 家公司將 DolphinScheduler 用在生產環境,DolphinScheduler 在各個領域上持續發光發熱!

在 Apache 范訓程序中,學習并實踐 Apache Way, 真正體會到了 Apache 文化的精髓 “Comuunity Over Code”,社區基于代碼,卻又大于代碼,需要在代碼之上去思考如何協作、如何溝通,如何讓 Community 健康持續的向前發展,正是這不斷的思考,使得 DolphinScheduler 在結束范訓投票上沒有遇到任何 challenge,可以說是出乎意料的順利,
畢業成為頂級專案見證了過去一年半以來來自 Apache DolphinScheduler 社區眾多貢獻者和用戶的日日夜夜的努力,自從進入 Apache 范訓器以來,DolphinScheduler 社區共加入了 14 位 Commiter、2 位 PMC,也在社區的共同努力下發布了 8 個 Apache Releases,感謝給予辛勤支持和無數幫助的各位導師、貢獻者、用戶和及 Apache 范訓器的支持,
成為頂級專案,只是 Apache DolphinScheduler 新的起點,還有更多的挑戰等待著各位社區的小伙伴和用戶多多的支持,我們希望未來可以讓中國優秀的開源專案走向世界,讓世界都了解國內也有頂尖的開源專案,最后也感謝各位大咖對于 Apache DolphinScheduler 專案的幫助和祝福,我們也在此拜謝各位,也希望各位一如既往的支持 Apache DolphinScheduler 專案走向全球!
值成為頂級專案佳機,DolphinScheduler 社區先后獲得各路大神和各開源社區的賀詞與祝福:
Sheng Wu. DolphinScheduler Incubator Champion. Apache board director:
我很榮幸能從范訓的第一天起就開始指導DolphinScheduler社區, 在過去的 1.5 年中,社區非常快速而健康地生長,
他們很快學會了Apache文化,并具有出色的執行能力,
很高興看到該專案從范訓器中畢業,并擁有一個多元化而活躍的社區,
成為頂級專案來說是一個新的起點,期待成為一個全球性且強大的專案,
史少鋒,Apache Kylin & Incubator PMC:
很榮幸見證了 DolphinScheduler 從開源到進入 Apache 范訓器,再到畢業成為獨立 Apache頂級專案的整個程序;在這一年多的時間里, DolphinScheduler社區的同學們,秉承開源精神,不斷創新、不斷進取;社區開發者貢獻者源源不斷的加入,使得 DolphinScheduler 這個國人創造的大資料調度工具日趨完善,用戶也越來越多,專案走向了良性回圈發展之路,期待她從范訓器畢業以后,在其 PMC的管理下繼續前進,通過開源軟體為社會、為公眾創造更多價值,
Apache CarbonData VP 陳亮:
祝賀DolphinScheduler開源專案從Apache范訓器中畢業成為ASF頂級開源專案,DolphinScheduler一直按照ApacheWay來發展社區,吸引了眾多開源開發者加入,在社區成員共同努力下,專案越來越成熟,祝愿DolphinScheduler社區越來越好
Apache Pulsar 社區:
在 DolphinScheduler 從 Apache 基金會范訓成功、畢業成為頂級專案之際,謹代 Apache Pulsar 社區送上祝福,祝 DolphinScheduler 專案和社區發展越來越好!也希望 Pulsar 和 DolphinScheduler 社區多多合作,共同推進國內開源發展,
Apache ECharts VP 羨轍:
恭喜 Apache DolphinScheduler 從 Apache 基金會畢業,非常高興看到又一來自中國的開源專案成為 Apache 基金會頂級專案,恭祝 DolphinScheduler 社區發展壯大,服務更多開發者,
Apache APISIX VP 溫銘:
恭喜 DolphinScheduler 順利畢業成為 Apache 軟體基金會的頂級專案!DolphinScheduler 在進入 Apache 范訓器后,按照 Apache Way 快速發展,已經擁有了很多的外部貢獻者,也有非常多的公司在使用,構建了健康的社區生態,期待 Apache DolphinScheduler 成為頂級專案后,能夠吸引更多的開發者參與進來,
Apache pegasus ppmc 吳濤:
DolphinScheduler 是非常靠譜的國產開源專案,祝越來越好!
Apache Dubbo PMC - YuHang Xiu:
恭喜 Apache DolphinScheduler 畢業,DolphinScheduler是一款非常優秀的開源專案,社區一直遵從Apache Way,范訓期間,已經吸引了大量的用戶、貢獻者,
我在此謹代表 Apache Dubbo 社區送上祝福,衷心祝愿DolphinScheduler社區越來越好!
LiangZhang, Apache member & Apache ShardingSphere PMC Chair:
我非常高興看到 DolphinScheduler 畢業成為 Apache 頂級專案,DolphinScheduler 社區在范訓器中以 Apache way 的方式發展的非常快,
我對我們2個社區共同舉辦的co-meetup上參與者的熱情印象非常深刻,希望將來能有更多的合作,我為你感到驕傲,Congratulations!
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/274898.html
標籤:其他
上一篇:28. 三角旗
下一篇:關于手寫數字識別的疑惑
