?企業(yè)級基礎云服務商青云QingCloud日前宣布，Spark服務作為QingCloud大數(shù)據(jù)基礎平臺的重要組件現(xiàn)已正式上線。通過QingCloud Spark服務，用戶能夠在2-3分鐘內創(chuàng)建一個Spark集群，并支持橫向和縱向的在線伸縮，提供豐富的監(jiān)控告警服務，極大地簡化了大數(shù)據(jù)集群的運維和管理，讓用戶從繁重的運維工作中解脫出來，投入到業(yè)務創(chuàng)新中。
青云 QingCloud Spark 服務正式上線
數(shù)據(jù)是新一代的自然資源，是判別企業(yè)競爭力的試金石。然而，隨著數(shù)據(jù)量的爆炸式增長、數(shù)據(jù)來源和結構的多樣化，傳統(tǒng)IT基礎架構已無法滿足企業(yè)對數(shù)據(jù)處理的需求，Hadoop、Spark等支持PB級別數(shù)據(jù)的分布式存儲和分布式計算框架應運而生。
青云QingCloud系統(tǒng)工程師&大數(shù)據(jù)基礎平臺負責人周小四（Ray Zhou）表示，基礎架構是大數(shù)據(jù)應用的基石，如果沒有底層數(shù)據(jù)架構的支持，大數(shù)據(jù)就是紙上談兵。此次推出的Spark服務就是基于QingCloud穩(wěn)定高效、資源秒級響應、彈性可伸縮的IaaS之上，能夠最大限度地發(fā)揮Spark輕巧、靈活和快速的優(yōu)勢。
Spark 是繼Hadoop之后新一代的大數(shù)據(jù)分布式處理平臺。它是一個基于內存的、容錯型的分布式計算引擎。與Hadoop MapReduce相比，Spark的計算速度要快100倍。即便同樣采用硬盤計算，Spark也比MapReduce快10倍。Spark卓越的用戶體驗以及統(tǒng)一的技術堆?；旧辖鉀Q了大數(shù)據(jù)領域所有核心問題，使得Spark迅速成為當前最為熱門的大數(shù)據(jù)基礎平臺。
Spark 提供了多語言支持，如Scala、Python、Java、R等，支持交互式操作。它在RDD（Resilient Distributed Datasets，一個容錯的、并行的數(shù)據(jù)結構） 基礎之上提供了Spark Streaming流式計算，結構化數(shù)據(jù)處理組件Spark SQL，機器學習庫 MLlib 以及圖計算GraphX等功能。
具體而言，青云QingCloud提供的Spark服務有如下特征：
一鍵部署：QingCloud用戶只需簡單的配置，就能夠在2-3分鐘內搭建出一個Spark集群，并且通過豐富的工具和服務，實現(xiàn)高效簡便的Spark運維管理。QingCloud提供多樣化、組件化的服務模式，用戶可以根據(jù)自己的業(yè)務需求，組建個性化的解決方案。
在線伸縮：Spark服務支持橫向和縱向在線伸縮，以滿足用戶對計算能力和容量的需求，橫向伸縮對用戶業(yè)務的連續(xù)性不會產生任何影響。后續(xù)還會配合AutoScaling，達到Spark集群自動伸縮的效果。
遷移成本低：QingCloud Spark服務采用原生開源解決方案，并且采用最新的版本（目前為1.4.1版本，未來還會持續(xù)更新，并保留三個最新版本），具有良好的向下兼容特性，便于用戶將自有Spark集群遷移至云端，也不限制用戶從Spark服務遷移至自有集群。使用QingCloud的Spark服務，用戶完全不必擔心產生Vendor lock-in的束縛。
監(jiān)控告警：QingCloud提供了對每個節(jié)點資源的監(jiān)控告警服務，包括CPU使用率、內存使用率、硬盤使用率、硬盤IOPS、硬盤吞吐量等，以幫助用戶更好的管理和維護Spark集群。
安全性：Spark集群運行于私有網絡內，結合QingCloud提供的高性能存儲和超高性能存儲，在保障高性能的同時兼顧用戶的數(shù)據(jù)安全。
青云QingCloud CEO 黃允松（Richard Huang）表示，Spark服務的發(fā)布標志著QingCloud完整的大數(shù)據(jù)基礎平臺已初步建立，接下來QingCloud還會陸續(xù)發(fā)布一系列大數(shù)據(jù)相關服務，如Hadoop、Cassandra、Hive、HBase和Storm等。未來，大數(shù)據(jù)、數(shù)據(jù)庫、緩存和對象存儲將同IaaS組件一起構成QingCloud完整的數(shù)據(jù)產品生態(tài)圈，提供一站式的計算、存儲和數(shù)據(jù)處理服務，更好地幫助用戶實現(xiàn)數(shù)據(jù)的價值。
青云 QingCloud Spark 服務正式上線
數(shù)據(jù)是新一代的自然資源，是判別企業(yè)競爭力的試金石。然而，隨著數(shù)據(jù)量的爆炸式增長、數(shù)據(jù)來源和結構的多樣化，傳統(tǒng)IT基礎架構已無法滿足企業(yè)對數(shù)據(jù)處理的需求，Hadoop、Spark等支持PB級別數(shù)據(jù)的分布式存儲和分布式計算框架應運而生。
青云QingCloud系統(tǒng)工程師&大數(shù)據(jù)基礎平臺負責人周小四（Ray Zhou）表示，基礎架構是大數(shù)據(jù)應用的基石，如果沒有底層數(shù)據(jù)架構的支持，大數(shù)據(jù)就是紙上談兵。此次推出的Spark服務就是基于QingCloud穩(wěn)定高效、資源秒級響應、彈性可伸縮的IaaS之上，能夠最大限度地發(fā)揮Spark輕巧、靈活和快速的優(yōu)勢。
Spark 是繼Hadoop之后新一代的大數(shù)據(jù)分布式處理平臺。它是一個基于內存的、容錯型的分布式計算引擎。與Hadoop MapReduce相比，Spark的計算速度要快100倍。即便同樣采用硬盤計算，Spark也比MapReduce快10倍。Spark卓越的用戶體驗以及統(tǒng)一的技術堆?；旧辖鉀Q了大數(shù)據(jù)領域所有核心問題，使得Spark迅速成為當前最為熱門的大數(shù)據(jù)基礎平臺。
Spark 提供了多語言支持，如Scala、Python、Java、R等，支持交互式操作。它在RDD（Resilient Distributed Datasets，一個容錯的、并行的數(shù)據(jù)結構） 基礎之上提供了Spark Streaming流式計算，結構化數(shù)據(jù)處理組件Spark SQL，機器學習庫 MLlib 以及圖計算GraphX等功能。
具體而言，青云QingCloud提供的Spark服務有如下特征：
一鍵部署：QingCloud用戶只需簡單的配置，就能夠在2-3分鐘內搭建出一個Spark集群，并且通過豐富的工具和服務，實現(xiàn)高效簡便的Spark運維管理。QingCloud提供多樣化、組件化的服務模式，用戶可以根據(jù)自己的業(yè)務需求，組建個性化的解決方案。
在線伸縮：Spark服務支持橫向和縱向在線伸縮，以滿足用戶對計算能力和容量的需求，橫向伸縮對用戶業(yè)務的連續(xù)性不會產生任何影響。后續(xù)還會配合AutoScaling，達到Spark集群自動伸縮的效果。
遷移成本低：QingCloud Spark服務采用原生開源解決方案，并且采用最新的版本（目前為1.4.1版本，未來還會持續(xù)更新，并保留三個最新版本），具有良好的向下兼容特性，便于用戶將自有Spark集群遷移至云端，也不限制用戶從Spark服務遷移至自有集群。使用QingCloud的Spark服務，用戶完全不必擔心產生Vendor lock-in的束縛。
監(jiān)控告警：QingCloud提供了對每個節(jié)點資源的監(jiān)控告警服務，包括CPU使用率、內存使用率、硬盤使用率、硬盤IOPS、硬盤吞吐量等，以幫助用戶更好的管理和維護Spark集群。
安全性：Spark集群運行于私有網絡內，結合QingCloud提供的高性能存儲和超高性能存儲，在保障高性能的同時兼顧用戶的數(shù)據(jù)安全。
青云QingCloud CEO 黃允松（Richard Huang）表示，Spark服務的發(fā)布標志著QingCloud完整的大數(shù)據(jù)基礎平臺已初步建立，接下來QingCloud還會陸續(xù)發(fā)布一系列大數(shù)據(jù)相關服務，如Hadoop、Cassandra、Hive、HBase和Storm等。未來，大數(shù)據(jù)、數(shù)據(jù)庫、緩存和對象存儲將同IaaS組件一起構成QingCloud完整的數(shù)據(jù)產品生態(tài)圈，提供一站式的計算、存儲和數(shù)據(jù)處理服務，更好地幫助用戶實現(xiàn)數(shù)據(jù)的價值。
