雲計算對大數據來說是巨大的創新潛力

企業網d1net 發佈 2020-02-10T16:53:58+00:00

如果企業採用大數據技術,那麼必然會使用雲計算技術,因為雲平台已經成為存儲和處理大量數據的標準平台。Information Builders公司兩位副總裁Eric Raab和Kabir Choudry表示,目前,雲原生分析應用程式數量龐大,並且由於這一原因,雲計算將在2020年至關

如果企業採用大數據技術,那麼必然會使用雲計算技術,因為雲平台已經成為存儲和處理大量數據的標準平台。隨著雲計算巨頭致力於爭奪市場領先地位,雲計算服務將在2020年迅速增長。而在雲中成功地駕馭這些動態信息需要採用大數據進行分析,並清理混亂信息。

現代雲計算堆棧依靠Kubernetes進行容器編排。預計2020年將在Kubernetes上啟用大數據和人工智慧工作負載方面取得進展,而Alluxio公司創始人兼首席技術官 Lioyuan將其稱之為「Kubernetifying」分析堆棧。

Lioyuan說,「雖然容器和Kubernetes在無狀態應用程式(如Web伺服器和自包含資料庫)中表現特別出色,但在高級分析和人工智慧方面,我們還沒有看到大量的容器使用。到2020年,我們將看到人工智慧和分析工作負載在Kubernetes上變得更加主流。『Kubernetifying』分析堆棧將意味著通過將數據從遠程數據倉庫移動到K8s集群以獲得更緊密的數據位置,從而解決數據共享和彈性問題。」

Information Builders公司兩位副總裁Eric Raab和Kabir Choudry表示,目前,雲原生分析應用程式數量龐大,並且由於這一原因,雲計算將在2020年至關重要。

Raab和Choudry說:「如今使用商業智能和分析工具的組織分為三類:當前在雲中運營工作負載的組織、將工作負載遷移到雲中的組織,以及計劃將工作負載遷移到雲中的組織。雖然他們過去可能因為擔心自己平台的架構是否設計用於集成和利用雲生態系統而受到阻礙,但現在有一些經過驗證的解決方案是專門為基於雲計算的運營而構建的。2020年將看到更多的企業將工作負載遷移到雲平台,利用雲原生解決方案的可用性、可擴展性和靈活性。」

Teradata公司雲計算營銷總監Brian Wood預測,企業將在所有新分析工作負載的部署中採用雲優先策略。

他說:「預計IT部門將默認使用公共雲,以支持任何業務計劃,而不僅僅是現有基礎設施的容量擴展。與公共雲供應商簽訂的「或者使用,或者失去」批量購買協議將促使企業IT部門盲目地選擇雲部署位置而不是解決方案適合性,這讓他們的領導感到遺憾。實現短期預算目標的狂熱將勝過深思熟慮的規劃和戰略投資的審慎智慧。」

公共雲已經得到了大多數媒體的關注。但Cloudian公司首席營銷官Jon Toor預測,到2020年,私有雲將重新出現。

Toor說,「擁有大規模存儲需求(如醫療保健、科學研究、媒體和娛樂業)的企業在管理容量密集型工作負載(可達到數十PB)方面面臨獨特的挑戰。私有雲通過提供公共雲的規模和靈活性好處,以及在現場存儲的性能、訪問、安全和控制優勢來應對這些挑戰。」

雲計算的簡單性和靈活性是一大優勢。但是,基於雲計算的實用程序的定價並不適合所有工作負載。Splice Machine公司執行長Monte Zweben說,雲計算當前的數字化轉型計劃為DX 2.0。

他說:「雲計算之所以盛行,是因為很多用戶認為可以節省成本。一些急於遷移到雲平台的企業完成了第一階段項目,並意識到他們擁有與之前運行的應用程式相同的應用程式,這些應用程式不會利用新的數據源來讓他們使用人工智慧。事實上,他們的運營支出實際上已經增加了,因為運營商節省的成本被一直在運行應用程式的雲計算資源的成本所淹沒,而這些資源在內部部署之前已實現資本化。」

Quest Software公司研發團隊的軟體工程高級經理Yinghua Qin表示,混合計算的興起意味著傳統的數據中心將消失。

他說:「在未來幾年中,隨著雲計算服務、物聯網和其他創新限制了傳統數據中心所能提供的優勢,我們可以預見傳統數據中心將會消亡。企業將需要根據業務需求而不是物理位置來定位計算工作負載,因此,企業將開始移動到混合雲,以便提供更靈活的基礎設施。」

隨著企業尋求結合本地資源和基於雲計算資源的方式,混合環境正在增長。Ensono公司公共雲總經理Sean Roberts指出,弄清楚如何管理雲計算和本地資源的混合併不是一件容易的事,但是新興的管理平台將有所幫助。

Roberts說:「主要的雲計算運營商開始意識到他們不能擁有所有的工作負載,大多數公司將採用多雲策略。因此,在競爭中開闢控制管理平台這條新戰線。例如微軟公司推出其Azure Arc技術,這套技術旨在將Azure服務和管理引入任何基礎設施,從而使微軟雲計算客戶端能夠跨AWS和Google Cloud的雲平台管理資源。」

Sazzala Reddy說。公共雲在大部分人看來是相似的,這將使雲平台更加難以區分。作為回應,雲計算將在本地部署。

Reddy說:「不可知論者將占據優勢。一些雲計算供應商意識到,許多企業客戶還沒有準備好完全遷移到雲平台。很多企業表示希望採用雲計算服務,但是對於一些企業來說,要做出這種轉變仍然是一個挑戰。作為響應,雲計算供應商將發布本地產品,這些產品可為大型企業提供遷移到雲平台的緩慢遷移的本地經驗,例如AWS Outposts。但是這都是暫時的,因為Outposts的目標是為它們的特定雲平台提供便捷的橋樑。」

AWS Redshift、Snowflake和Google BigQuery等雲計算數據倉庫正在快速增長。但是,這種發展勢頭會在2020年持續嗎? Dremio公司聯合創始人兼執行長Tomer Shiran對此表示懷疑。

Shiran說,「鑒於傳統的本地數據倉庫所帶來的巨大成本和複雜性,新一代雲原生企業數據倉庫的出現不足為奇。但是精明的企業已經發現,雲計算數據倉庫只是對傳統體系結構的更好實現,因此,他們避免繞道而行,而是直接遷移到圍繞雲計算數據湖構建的下一代體系結構。」

Shiran說,在這種新架構中,數據不會被移動或複製,沒有數據倉庫,也沒有關聯的ETL、多維數據集或其他解決方法。他繼續說,「我們預測,到2020年,全球75%的產品將投入生產或在雲計算數據湖中進行試點,並將在數據科學、數據管道、商業智能和交互式/臨時的多個用例中使用多個最佳引擎分析。」

但是Sigma Computing公司聯合創始人兼執行長Rob Woollen完全沒有看到雲數據倉庫的增長速度下降。實際上,他認為雲計算數據倉庫(CDW)繼續受到關注。

Woollen說:「雲計算數據倉庫(CDW)的發展有很多原因。可擴展性、靈活性、更低的成本和連接性,現在很多人都看到雲中的數據倉庫比本地系統更安全。他們的理由是,因為雲計算數據倉庫提供商的整個業務模型都依賴於數據安全和加密,所以他們可能比你做得更好。這些公司在安全技術上投入巨資,並將整個部門投入到保護企業的數據。雲計算數據倉庫(CDW)可以減輕合規性負擔。通過將所有數據存儲在一個地方,企業不必處理搜索各種離散的業務系統和數據存儲以定位相關數據的複雜性。」

Kubernetes是一項關鍵技術,可實現雲計算堆棧的大部分靈活性。Unravel Data公司執行長Kunal Agarwal認為Kubernetes的發展趨勢不會很快減弱。

Agarwal說,「Kubernetes最近超過了Docker,成為最受關注的容器技術,在未來,每種數據技術都將在Kubernetes上運行。我們可能不會在2020年實現這一目標,但是隨著越來越多的主要供應商在其旗艦平台上建立基礎,Kubernetes將繼續被採用。還有一些問題需要解決,例如持久性存儲問題,但目前正在通過BlueK8等舉措解決這些問題。整個大數據社區都支持Kubernetes,並確保了其持續的統治地位。」

Neo4j公司執行長兼聯合創始人Emil Eifrem說,雲計算和開源的交集為開發人員提供了發展的沃土。

Eifrem說:「最具優勢的技術公司將是那些擁有B2D(企業對開發人員)、開發人員/實踐者主導的方法和交付SaaS產品的公司,這些企業隨時準備支持實踐者走向雲計算。這些公司往往是開源軟體(OSS)公司,隨著時間的推移,他們與開發社區建立了信任,了解開發人員不斷變化的需求,而且精通經典的企業軟體銷售活動。而擁有SaaS服務的開源軟體(OSS)公司完全有能力搶占整個市場,無論是在內部還是在雲端,都能獲得大量的交易。」

戴爾技術公司營運長Jeff Clarke說,新興的企業計算平台是公共雲和本地資源的結合。

Clarke說:「公共雲和私有雲可以共存。由混合雲架構支持的多雲IT戰略將在確保組織具有更好的數據管理和可見性的同時發揮關鍵作用,同時還確保其數據保持可訪問性和安全性,但是私有雲將不僅僅存在於企業的核心數據中心。隨著5G和邊緣部署的繼續推出,私有混合雲將存在於邊緣,以確保實時監控和管理所處數據的實時性。這意味著組織將期望更多的雲計算服務提供商確保他們能夠在所有環境中支持其混合雲計算需求。」

Panasas公司軟體架構師Curtis Anderson說,公共雲可能對開發人工智慧很有幫助,但採用人工智慧有利於運行本地資源。

Pang說。「隨著越來越多的組織為他們的人工智慧計劃試驗更多的數據,對人工智慧的安全性和道德使用將變得越來越重要。在這個領域,首要的擔憂是數據泄漏,尤其是個人身份信息(PII),新產品的想法和專有信息。這些擔憂將導致更多用於人工智慧創建的本地解決方案,包括數據注釋和安全利用多樣化用戶的解決方案。」

NetApp公司戰略官Atish Gude說,企業需要為邊緣的崩潰做好準備。他說,「為迎接5G的廣泛出現,將利用低成本傳感器和成熟的人工智慧應用來構建計算密集型的邊緣環境,為高帶寬、低延遲人工智慧驅動的物聯網環境奠定基礎,這些環境具有巨大的創新和顛覆潛力。」

關鍵字: