继CDH收费之后,这家公司率先推出了免费版大数据套件服务!
背景
在大數據業務系統中,所有技術棧生態均是圍繞著存儲進行擴展的,目前開源的主流存儲技術棧主要包含如下 3 種類型:
· HDFS:Hadoop 系列套件,包含 Hive、HBase、Phoenix 等;
· ElasticSearch:包含 Logstash、ElasticSearch、Kibana 等;
· Kudu:包含 Impala 等;
無論針對哪種存儲生態,其外層負責數據計算的技術棧很多都是通用的,例如Spark、Flink 幾乎支持讀寫所有存儲生態中的數據。對于生產環境而言,選擇哪一種存儲生態,往往取決于業務形態以及業務部門對不同技術棧的熟練程度。
針對大數據生態中的眾多服務,Cloudera(CDH,支持HDFS、Kudu生態)與Ambari(HDP,支持HDFS生態) 提供了部署、管理、監控、運維大數據服務組件與大數據節點的能力。但隨著Cloudera與Ambari合二為一,CDH與 HDP合并為CDP發行版,在后續的版本中不再提供免費版功能。這對于國內企業的大數據業務無疑增加了不少開發、運維成本,如果繼續使用免費的舊版本,將無法得到新特性的更新支持和BUG的及時修復。
在此背景下,UCloud基于多年大數據平臺開發經驗,近日全新發布了針對私有化部署場景下的一站式智能大數據平臺USDP免費版。免費版USDP支持HDFS、Kudu、ES全生態,助力企業提升大數據開發、運維效率,快速構建大數據業務的分析處理能力。
兼容最廣的一站式智能大數據平臺
USDP涵蓋了HDFS、Hive、HBase、Spark、Flink、Presto、Atlas、Ranger 等眾多開源大數據組件,支持對這些組件進行運維、中臺建設、數據開發、業務可視化等全棧式大數據開發運維管理。USDP通過輕量、易用、傻瓜式的形態交付給用戶,支持對不同模塊進行拆分,從而實現高度定制化,靈活匹配各垂直行業場景下的需求。
目前,UCloud一站式智能大數據平臺USDP所支持的服務如表格所示,同時還在持續拓展更多開源生態組件服務。
相比Cloudera(CDH、CDP)、Ambari(HDP),USDP支持更多豐富的大數據服務包括Flink、Kylin、Livy、Phoenix、Tez、Elasticsearch、Kibana、Azkaban、Presto、Atlas、Kafka Eagle、ZKUI等,幾乎涵蓋了所有主流技術框架,且所支持的大數據服務之間完全兼容,用戶可以靈活選擇、按需使用。此外,UCloud大數據技術團隊持續跟進開源社區進展以及產品反饋,對潛在的 Bug 進行及時修復,用戶無需再考慮大數據服務之間的適配問題。在CDH訂閱付費模式下,免費版USDP無疑是當下大數據開發運維的最佳選擇!
自研管理組件,安全可靠性更高
USDP作為UCloud大數據團隊自主研發的一站式智能大數據平臺,其整體架構如下圖所示:
上圖中,Manager Server為USDP管理端服務,需配備一個MySQL實例存儲集群相關的元數據信息。Agent為USDP從節點控制端服務,用于管理、操作所在節點以及所在節點上的大數據服務。其中BigData Service為各類大數據服務(例如:HDFS、YARN等)。
InfluxDB、Prometheus、Grafana作為監控服務,用于匯總并展示整個集群的監控數據。
USDP支持最少3個節點,最多上千節點的集群規模,同時,允許Manager Server與Agent等相關服務部署在相同的節點上,這樣滿足大型業務的同時,也盡可能幫助用戶使用較小的成本滿足小型業務對數據分析的訴求。
USDP一站式智能大數據平臺的核心優勢
?無需擔心業務綁定
USDP中所包含的大數據服務、組件,均滿足 Apache 2.0開源協議,UCloud大數據團隊在做過大量兼容性測試后,積極回饋社區,并將編譯后的兼容包全面公開發布。由于本身緊跟開源社區的步伐,用戶可以隨時進行自主替換、自主建設、自主數據遷移、集群遷移等,因此無需擔心大數據業務與閉源服務綁定。
傻瓜式部署方式
為了能讓用戶體驗到極簡的大數據部署運維、管理方案,USDP提供了豐富詳細的部署、操作文檔,并且用戶無需擔心安裝時準備眾多內容,初始化環境只需要簡單幾步,即可自動完成配置。
1-環境檢查
2-服務部署
全面豐富的監控指標
USDP預置的監控指標主要包含三部分內容:
??JMX全量指標采集
??Http常用指標采集
??自定義指標采集
以上三部分監控數據最終將匯總于USDP的 Promethues中,并在每個服務的概覽頁面中,展示最常用的監控指標,同時,在Grafana中,通過 USDP官方預置的監控模板(Dashboard),用戶可以查看最詳細監控指標。如果USDP預置的監控圖標無法滿足業務需求,用戶也可以自定義添加所需的監控圖表。
靈活便捷的告警服務
USDP提供預置的告警模板,用戶只需要引導進行簡單配置,即可實現向不同目標(微信、釘釘、郵件、接口調用等)發送集群指標告警的需求。與監控指標的設計相似,如果用戶認為預置的告警模板無法滿足業務需求,也可以自定義對告警模板進行修改,或添加新的告警規則。
專業的技術支持
UCloud大數據團隊積淀了多年公有云大數據運維和業務調優經驗,通過持續更新的文檔知識庫,為用戶提供專家級技術支持,解決使用USDP的后顧之憂。
反哺開源社區
USDP免費版中所使用的開源、全面兼容優化后的服務包,將反哺回開源社區,為開發者提供免費的下載渠道。
USDP解鎖豐富的大數據場景
使用USDP一站式智能大數據平臺,可以在各行各業中實現如下應用場景。
數據倉庫
目前國內常用的數倉模型為維度數倉,即按照事實表、維度表來構建數據倉庫、數據集市。通過USDP一站式智能大數據平臺,用戶可以部署構建維度數倉所需的各項服務,幫助企業快速構建數據中臺。
機器學習
機器學習通過算法對大量數據進行分析,挖掘出其中蘊含的規律,并用于事物預測或者分類,有大量的計算需求。通過USDP一站式智能大數據平臺支持的Spark、Flink等分布式運算框架,可以高效的進行機器學習應用開發。
信息檢索
從海量數據中快速檢索到所需信息,一直是數據應用的重要領域,USDP一站式智能大數據平臺集成了分布式搜索和分析引擎Elasticsearch以及實時檢索數據庫HBase、數倉服務Kylin等,能夠提供高效的數據檢索能力,可用于構建企業級搜索引擎、日志管理系統等。
最后,敲黑板劃重點:UCloud一站式智能大數據平臺USDP免費版誠邀大家參考以下方式進行下載使用。
附USDP資源下載地址:
? US3:
https://s3-cn-bj.ufileos.com/jungle111111/usdp-1.0.0.0/install/usdp-free-1.0.0.tar.gz
??百度網盤:
鏈接:
https://pan.baidu.com/s/1mlic-9ZbK4are52zh1mKfw?
提取碼:spp9
↓↓↓點擊文末“閱讀原文”,獲取詳細USDP安裝部署操作指南
掃碼添加UCloud大數據技術專家
備注“USDP”
邀請您加入大數據產品技術交流群
點擊獲取詳細USDP安裝部署操作指南
總結
以上是生活随笔為你收集整理的继CDH收费之后,这家公司率先推出了免费版大数据套件服务!的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: win10系统怎么改奇摩输入法_Win1
- 下一篇: 手机输入法带拼音声调_最好用的输入法,百