背景

在大數據業務系統中，所有技術棧生態均是圍繞著存儲進行擴展的，目前開源的主流存儲技術棧主要包含如下 3 種類型：

· HDFS：Hadoop 系列套件，包含 Hive、HBase、Phoenix 等；

· ElasticSearch：包含 Logstash、ElasticSearch、Kibana 等；

· Kudu：包含 Impala 等；

無論針對哪種存儲生態，其外層負責數據計算的技術棧很多都是通用的，例如Spark、Flink 幾乎支持讀寫所有存儲生態中的數據。對于生產環境而言，選擇哪一種存儲生態，往往取決于業務形態以及業務部門對不同技術棧的熟練程度。

針對大數據生態中的眾多服務，Cloudera（CDH，支持HDFS、Kudu生態）與Ambari（HDP，支持HDFS生態） 提供了部署、管理、監控、運維大數據服務組件與大數據節點的能力。但隨著Cloudera與Ambari合二為一，CDH與 HDP合并為CDP發行版，在后續的版本中不再提供免費版功能。這對于國內企業的大數據業務無疑增加了不少開發、運維成本，如果繼續使用免費的舊版本，將無法得到新特性的更新支持和BUG的及時修復。

在此背景下，UCloud基于多年大數據平臺開發經驗，近日全新發布了針對私有化部署場景下的一站式智能大數據平臺USDP免費版。免費版USDP支持HDFS、Kudu、ES全生態，助力企業提升大數據開發、運維效率，快速構建大數據業務的分析處理能力。

兼容最廣的一站式智能大數據平臺

USDP涵蓋了HDFS、Hive、HBase、Spark、Flink、Presto、Atlas、Ranger 等眾多開源大數據組件，支持對這些組件進行運維、中臺建設、數據開發、業務可視化等全棧式大數據開發運維管理。USDP通過輕量、易用、傻瓜式的形態交付給用戶，支持對不同模塊進行拆分，從而實現高度定制化，靈活匹配各垂直行業場景下的需求。

目前，UCloud一站式智能大數據平臺USDP所支持的服務如表格所示，同時還在持續拓展更多開源生態組件服務。

相比Cloudera（CDH、CDP）、Ambari（HDP），USDP支持更多豐富的大數據服務包括Flink、Kylin、Livy、Phoenix、Tez、Elasticsearch、Kibana、Azkaban、Presto、Atlas、Kafka Eagle、ZKUI等，幾乎涵蓋了所有主流技術框架，且所支持的大數據服務之間完全兼容，用戶可以靈活選擇、按需使用。此外，UCloud大數據技術團隊持續跟進開源社區進展以及產品反饋，對潛在的 Bug 進行及時修復，用戶無需再考慮大數據服務之間的適配問題。在CDH訂閱付費模式下，免費版USDP無疑是當下大數據開發運維的最佳選擇！

自研管理組件，安全可靠性更高

USDP作為UCloud大數據團隊自主研發的一站式智能大數據平臺，其整體架構如下圖所示：

上圖中，Manager Server為USDP管理端服務，需配備一個MySQL實例存儲集群相關的元數據信息。Agent為USDP從節點控制端服務，用于管理、操作所在節點以及所在節點上的大數據服務。其中BigData Service為各類大數據服務（例如：HDFS、YARN等）。

InfluxDB、Prometheus、Grafana作為監控服務，用于匯總并展示整個集群的監控數據。

USDP支持最少3個節點，最多上千節點的集群規模，同時，允許Manager Server與Agent等相關服務部署在相同的節點上，這樣滿足大型業務的同時，也盡可能幫助用戶使用較小的成本滿足小型業務對數據分析的訴求。

USDP一站式智能大數據平臺的核心優勢

?無需擔心業務綁定

USDP中所包含的大數據服務、組件，均滿足 Apache 2.0開源協議，UCloud大數據團隊在做過大量兼容性測試后，積極回饋社區，并將編譯后的兼容包全面公開發布。由于本身緊跟開源社區的步伐，用戶可以隨時進行自主替換、自主建設、自主數據遷移、集群遷移等，因此無需擔心大數據業務與閉源服務綁定。

傻瓜式部署方式

為了能讓用戶體驗到極簡的大數據部署運維、管理方案，USDP提供了豐富詳細的部署、操作文檔，并且用戶無需擔心安裝時準備眾多內容，初始化環境只需要簡單幾步，即可自動完成配置。

1-環境檢查

2-服務部署

全面豐富的監控指標

USDP預置的監控指標主要包含三部分內容：

??JMX全量指標采集

??Http常用指標采集

??自定義指標采集

以上三部分監控數據最終將匯總于USDP的 Promethues中，并在每個服務的概覽頁面中，展示最常用的監控指標，同時，在Grafana中，通過 USDP官方預置的監控模板（Dashboard），用戶可以查看最詳細監控指標。如果USDP預置的監控圖標無法滿足業務需求，用戶也可以自定義添加所需的監控圖表。

靈活便捷的告警服務

USDP提供預置的告警模板，用戶只需要引導進行簡單配置，即可實現向不同目標（微信、釘釘、郵件、接口調用等）發送集群指標告警的需求。與監控指標的設計相似，如果用戶認為預置的告警模板無法滿足業務需求，也可以自定義對告警模板進行修改，或添加新的告警規則。

專業的技術支持

UCloud大數據團隊積淀了多年公有云大數據運維和業務調優經驗，通過持續更新的文檔知識庫，為用戶提供專家級技術支持，解決使用USDP的后顧之憂。

反哺開源社區

USDP免費版中所使用的開源、全面兼容優化后的服務包，將反哺回開源社區，為開發者提供免費的下載渠道。

USDP解鎖豐富的大數據場景

使用USDP一站式智能大數據平臺，可以在各行各業中實現如下應用場景。

數據倉庫

目前國內常用的數倉模型為維度數倉，即按照事實表、維度表來構建數據倉庫、數據集市。通過USDP一站式智能大數據平臺，用戶可以部署構建維度數倉所需的各項服務，幫助企業快速構建數據中臺。

機器學習

機器學習通過算法對大量數據進行分析，挖掘出其中蘊含的規律，并用于事物預測或者分類，有大量的計算需求。通過USDP一站式智能大數據平臺支持的Spark、Flink等分布式運算框架，可以高效的進行機器學習應用開發。

信息檢索

從海量數據中快速檢索到所需信息，一直是數據應用的重要領域，USDP一站式智能大數據平臺集成了分布式搜索和分析引擎Elasticsearch以及實時檢索數據庫HBase、數倉服務Kylin等，能夠提供高效的數據檢索能力，可用于構建企業級搜索引擎、日志管理系統等。

最后，敲黑板劃重點：UCloud一站式智能大數據平臺USDP免費版誠邀大家參考以下方式進行下載使用。

附USDP資源下載地址：

? US3：

https://s3-cn-bj.ufileos.com/jungle111111/usdp-1.0.0.0/install/usdp-free-1.0.0.tar.gz

??百度網盤：

鏈接：

https://pan.baidu.com/s/1mlic-9ZbK4are52zh1mKfw?

提取碼:spp9

↓↓↓點擊文末“閱讀原文”，獲取詳細USDP安裝部署操作指南

掃碼添加UCloud大數據技術專家

備注“USDP”

邀請您加入大數據產品技術交流群

點擊獲取詳細USDP安裝部署操作指南

總結

以上是生活随笔為你收集整理的继CDH收费之后，这家公司率先推出了免费版大数据套件服务！的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。