好消息! 在經過許久籌備,Datavane[1] 開源社區(組織) 終於正式成立了。 Datavane 是一個專注於大數據領域的開源社區(組織),由一群大數據領域優秀的開源項目作者共同創建,旨在真正的去幫助開源項目作者更好的建設項目、為大眾提供高質量的開源軟件,我們的宗旨是:只為做一個好軟件。
在Datavane 社區中,所有的項目都是開源開放的,代碼質量和架構設計優質的潛力項目。我們相信開源、相互信任,鼓勵所有的開發者、用戶和貢獻者積極參與我們的社區、共同合作,創新創造,建設一個更加強大的開源社區。
我們準備了一批優質的項目,等待和社區一同發布和大家見面,下面讓我看看都有哪些精彩的項目吧!
#1. TIS – 人人都會用的數據集成產品
TIS[2] 是採用Java 語言開發的,一款面向大數據領域端到端的數據集成產品,致力於提供一站式的數據集成能力,目標是打造成人人都會用的數據集成產品。
TIS 同時支持離線和實時數據同步,可以將作業部署到YARN/K8S 上,充分利用大數據的並行能力,遷移數據性能優異。 TIS 非常的簡單易用:它內置了一個強大的表單和DSL 自動渲染引擎,將構建複雜表單系統的複雜度大大降低,在與用戶交互過程中大量使用了自動生成、流程引導的方式,大部分流程環節用戶只需要做選擇,無需使用鍵盤,只需輕點鼠標一路下一步,就能順利構建作業。
TIS 提供一個強大的基於插件SPI 的熱插拔系統,提供了像安卓AppStore 一樣的插件商店,需要什麼插件可以直接在插件列表中勾選、啟用。避免了傳統數據集成產品中需要用戶本地編譯、安裝、配置、重啟系統的繁瑣流程。
TIS 已經過四年的打磨,支持了MySQL,Doris,ES,Hive,Hudi… 等十多種常見數據庫,累積40 餘萬行代碼,100 餘位用戶使用,Github Star 600+,項目採用Apache License v2 開源協議,最大限度地借助開源社區的力量來豐富完善功能。
#2. DataSophon – 大數據云原生管家
DataSophon[3] 是新一代云原生大數據管家,致力於快速實現部署、管理、監控以及自動化運維大數據云原生平台,幫助用戶快速構建起穩定、高效、自愈、可彈性伸縮的大數據云原生平台。
DataSophon 兼容複雜環境,得益於自身良好的架構設計,可輕鬆適應各種複雜環境,平台和大數據組件均支持arm 和x86 機器部署,支持CentOs、麒麟、歐拉、中科方德等常用的Linux 生態操作系統。
DataSophon 基於生產實踐提供了用戶最關心的監控指標,包括:JMX 全量指標、HTTP 常用指標、自定義指標,通過預置的監控模板,用戶可以查看各類服務組件詳細的監控指標,也可以很方便地添加所需的自定義監控指標。
DataSophon 支持了豐富的大數據組件,目前已經支持多種常用大數據組件,例如大數據基礎組件: HDFS、YARN、Zookeeper、Hive 等,也支持很多新晉Apache 項目,如: Flink、Spark、StreamPark、Doris 等… 用戶可以根據自身業務特點,選擇相應的組件來搭建自己的大數據平台,DataSophon 可方便地對集群、節點和服務進行監控和運維操作,幫助用戶大幅提昇運維工作效率,讓數據工程師更專注於業務開發。
#3. Datavines – 數據可觀測性平台
Datavines[4] 是一站式開源數據可觀測性平台,提供元數據管理、數據概覽報告、數據質量管理,數據分佈查詢、數據趨勢洞察等核心能力,致力於幫助用戶全面地了解和掌管數據。讓您做到心中有數。
Datavines 採用Framework + Plugin 的設計模式,支持數據源、執行引擎、數據質量檢查規則(規則+期望值+校驗公式)、註冊中心、告警通道和錯誤數據存儲的自定義插件擴展,擁有較高的擴展性。 Datavines 目前支持包含MySQL、Doris 等8種數據源類型、27 個數據質量檢查規則以及Spark 和Jdbc 兩種執行引擎等。
Datavines 具有高可用和高性能的特性。後端採用無中心化設計,支持水平擴展,能夠支撐大量的數據質量檢查規則的調度和執行,同時具有良好的容錯機制來保證服務宕機後的作業容錯,保證作業不丟失和不重複執行。
Datavines 提供可視化界面幫助用戶進行數據探測以生成數據概覽報告,提供界面操作和腳本運行兩種方式進行數據質量檢查,並支持檢查結果的問題管理和告警。
加入我們
Datavane 從名字確定到社區成立,包含著創始團隊的大量心血,如今終於得以和大家見面,我們將秉承做一個好軟件的宗旨,保持開源開放的態度,高度關注項目的質量和社區發展,聚集更多的開源項目作者和廣大開發者,共同打造一個開源項目建設和技術交流的樂園,目前已經有一批非常優秀的開源項目加入,我們歡迎更多的項目加入 Datavane 組織,相信每一個開源項目作者都是心懷遠大,目標高遠,如果你是在孤獨前行,感覺太累, 亦或者你想走的更遠,可以聯繫我們,Datavane 歡迎你的加入,一個人可以走的很快,一群人一定走的更遠。
歡迎各大社區的小伙伴關注和使用Datavane 社區的項目,如果你正在使用Datavane 社區的項目,請多多反饋。我們誠摯歡迎更多的貢獻者參與到社區建設中來,相信因為你的到來社區會變得更好,我們一道共同努力,共同建設。
💻 GitHub:https://github.com/datavane
🧐 官網:https://www.datavane.org
💁♀️ 社區溝通:
參考資料
[1] @Datavaen: https://www.datavane.org
[2] @TIS: https://github.com/datavane/tis
[3] @DataSophon: https://github.com/datavane/datasophon
[4] @Datavines: https://github.com/datavane/datavines
#Datavane一個專注於大數據領域的開源組織正式成立了 #科技資訊 #中文開源技術交流社區
You may also like
No related posts.
近期文章
- WooCommerce的完美產品過濾器插件!
- 5個最佳WooCommerce SEO插件在2024年
- WooCommerce的折扣規則 – 概述視頻
- 2024年WooCommerce的5個最佳AI插件
- 使用ProductX快速建立一家商店-WordPress的最終Gutenberg WooCommerce插件
- WordPress 2024的10個最佳WooCommerce主題(嚴重)
- Shopify vs WooCommerce:最佳電子商務平台|全面的比較評論
- 您不想錯過的十大WooCommerce附加組件!
- 提高您的WooCommerce商店使用Upsell的銷售,Cross Sell | WooCommerce教程
發佈留言