產品介紹
BDP是天云數據自研國產大數據管理平臺,致力于快速實現部署、管理、監控以及自動化運維大數據服務組件和節點的能力,幫助快速構建起穩定、高效的大數據集群服務。
BDP是天云數據自研國產大數據管理平臺,致力于快速實現部署、管理、監控以及自動化運維大數據服務組件和節點的能力,幫助快速構建起穩定、高效的大數據集群服務。
極易部署,可在短時間內完成多節點的大數據集群部署;
國產化兼容,兼容ARM服務器和常用國產化操作系統;
監控指標全面豐富,基于生產實踐展示用戶最關心的監控指標;
靈活便捷的告警服務,可實現用戶自定義告警組和告警指標;
可擴展性強,用戶可通過配置的方式集成或升級大數據組件。
?
Kafka組件
支持Topic級別的監控,包括Topic輸入、輸出、拒絕的字節流量,每秒輸入的消息條數等??
?
Hive組件
支持億級分區和百萬級表的能力;支持基于Redis實現Hive元數據緩存,可通過減少Metastore數據庫訪問、利用內存高速讀寫特性,顯著提升元數據讀取性能。合理設計緩存對象、Key結構、失效策略,并通過Hook機制保障一致性。??
?
Flink組件
完全支持流批一體架構。通過 Blink Planner 統一了批處理和流處理的執行引擎,所有作業使用相同的 Table API/SQL 語法編寫,無需為不同場景維護多套代碼。無論是處理歷史數據(如每天的訂單全量分析)還是實時數據流(如用戶行為實時統計),均可在同一集群上高效運行,并共享 Kafka、HDFS 等批流統一的連接器。??
?
Redis組件
支持通過服務配置認證鑒權,防止未認證的實例訪問集群。??
企業級多租戶
通過創建多級租戶,在不同租戶間,隔離計算資源和存儲資源。??
管理節點高可靠性
支持數據節點的故障自動恢復,無需人工干預。??
完善的自運維系統
提供圖形化的集群健康巡檢工具,能夠檢查集群相關節點、服務的健康狀態,提前發現集群中潛在的問題,并生成健康檢查報告,方便快速了解系統的健康狀況。??
支持滾動升級
支持業務不中斷,一次升級少量節點,循環滾動,直至集群所有節點完成升級。??