• <strike id="fdgpu"><input id="fdgpu"></input></strike>
    <label id="fdgpu"></label>
    <s id="fdgpu"><code id="fdgpu"></code></s>

  • <label id="fdgpu"></label>
  • <span id="fdgpu"><u id="fdgpu"></u></span>

    <s id="fdgpu"><sub id="fdgpu"></sub></s>
    您當前的位置是:  首頁(yè) > 資訊 > 國內 >
     首頁(yè) > 資訊 > 國內 >

    Cloudera:未來(lái)十年,企業(yè)數據云定義數據管理新模式

    2020-05-12 13:55:07   作者:郭鋒   來(lái)源:CTI論壇   評論:0  點(diǎn)擊:


      隨著(zhù)計算機技術(shù),傳感器技術(shù)以及互聯(lián)網(wǎng)技術(shù)的發(fā)展,人類(lèi)的數據總量已經(jīng)達到了前所未有的規模。數據充斥著(zhù)每個(gè)人的日常生活,企業(yè)每天都面臨著(zhù)管理數據以及使用數據的挑戰。目前,存儲數據的載體、數據的處理技術(shù)以及數據的使用的方式方法都在不斷的演進(jìn),企業(yè)用戶(hù)對數據價(jià)值的預期也不斷增加。企業(yè)用戶(hù)期望通過(guò)數據快速帶來(lái)商業(yè)價(jià)值,同時(shí)對數據的安全,數據隱私與合規等要求越來(lái)越高。
      根據《哈佛商業(yè)評論》最近一份研究報告顯示,越來(lái)越多的企業(yè)在尋求企業(yè)級成熟穩定的平臺解決方案,在完成基本的數據攝取、數據整合批量處理以及數據倉庫功能的基礎上,還能面向業(yè)務(wù)人員提供即時(shí)互動(dòng)的分析工具,以及提供建模、數據科學(xué)、機器學(xué)習,甚至是一些深度訓練的平臺工具。
      Cloudera持續推動(dòng)數據管理創(chuàng )新
      Cloudera作為企業(yè)數據云的領(lǐng)導者,多年來(lái)一直致力于將復雜的數據轉換為清晰而可行的洞察力。2008 年,順應技術(shù)發(fā)展潮流的Cloudera 成立,持續關(guān)注如何能讓用戶(hù)更快的從數據里獲取價(jià)值。2019 年,Cloudera 提出了全新利用數據的方式-- Cloudera Data Platform(以下簡(jiǎn)稱(chēng) CDP),賦能企業(yè) IT 從而應對新的商業(yè)挑戰。CDP 是世界上第一款企業(yè)數據云平臺產(chǎn)品,Cloudera 的開(kāi)源的商業(yè)模式發(fā)展戰略以及新的開(kāi)源許可模式,為 CDP 未來(lái)的發(fā)展提供原動(dòng)力。
      本文將探討 Cloudera對于企業(yè)級數據管理的深刻理解,以及如何在數據管理需求不斷更替的今天推動(dòng)開(kāi)源和創(chuàng )新。
      企業(yè)的數據管理需求日新月異
      以 2020 年為時(shí)間節點(diǎn),回看過(guò)去十年以及展望未來(lái)十年,企業(yè)對數據的應用需求迥異。
      過(guò)去的十年里,用戶(hù)需求主要集中在解決高效的存儲,并且能夠同時(shí)處理大規模數據。通過(guò)分布式的方式把數據分散在不同的服務(wù)器上,以分而治之的方式來(lái)并發(fā)處理數據,避免網(wǎng)絡(luò )傳輸帶來(lái)的消耗和延遲等。Hadoop 在過(guò)去十年里解決用戶(hù)需求的同時(shí)也在不斷自我演進(jìn)。Cloudera's Distribution Including Apache Hadoop(CDH)作為眾多 Hadoop 分支的一種,得到了企業(yè)用戶(hù)廣泛的認可和使用。
      未來(lái)十年里,現有的數據管理使用架構與解決方案面臨新的諸多挑戰。例如龐大集群規模部署時(shí)間長(cháng),企業(yè)實(shí)際應用中缺乏高效數據隱私與安全管理,數據災難恢復能力弱,多云及混合云跨云管理繁瑣等。都需要在現有技術(shù)架構基礎上進(jìn)行延展從而來(lái)應對這些新的挑戰。Cloudera 的全新 CDP 產(chǎn)品就是為了幫助用戶(hù)應對未來(lái)的新挑戰。
      從 Cloudera 數據架構的迭代,看數據管理方式的轉變
      Cloudera 在 Hadoop 基礎架構下發(fā)展出的商業(yè)版 CDH,是第一代架構的代表,主要關(guān)注在本地部署云上集中同位的存儲和計算以及大型共享集群;Cloudera 認為的第二代架構,主要關(guān)注在公有云上的存儲與計算解耦和多集群,例如 Amazon EMR;Cloudera 目前提出的平臺方案 CDP 被認為是第三代架構,主要關(guān)注在多云以及混合云上的存儲與計算解耦,多租戶(hù)以及容器化的 SaaS 體驗。
      去年年初,Cloudera 正式完成與 Hortonwork 的合并,新公司采用 Cloudera 品牌,新數據平臺將 HDP(Hortonworks 數據平臺)和 CDH(Cloudera Distribution Hadoop)的功能進(jìn)行結合,加入安全治理堆棧,支持百分百開(kāi)源,同時(shí)支持國際主流的五大公有云平臺,這意味著(zhù)Cloudera 開(kāi)始全面轉變?yōu)橐患覕祿乒尽?/div>
      數據云公司Cloudera致力于建設多重能力
      "在任何云上面,不管是在公有云、私有云,混合云,還是公有云上的任何一朵云,都可以來(lái)運行 Cloudera 的數據平臺。
      "提供全數據生命周期支持,不只是提供 Hadoop 技術(shù)本身的支持,還提供在整個(gè)數據生命周期所有使用到的工具和平臺,包括數據采集、IoT、數據分析、BI、數據倉庫、機器學(xué)習、數據科學(xué)等。
      "在數據安全和治理上,提出了共享的數據體驗架構,實(shí)現存儲層和計算層的解耦,更好的管理源數據,同時(shí)實(shí)現數據存儲分離。對數據的安全、治理、血緣和審計方面,提供了單獨的 SDX 工具。
      "延續 100% 開(kāi)源宗旨,保證產(chǎn)品開(kāi)源開(kāi)放。
      多重能力轉化為Cloudera 云數據平臺軟件 CDP
      Cloudera 的云數據平臺軟件 CDP可以為企業(yè)從數據戰略上提供完整的服務(wù),其多云和混合云的統一平臺解決方案,可以實(shí)現快速部署,并靈活適用于企業(yè)各自的云使用策略,節約成本同時(shí)實(shí)現快速上線(xiàn)。全數據生命周期的支持可以讓企業(yè)更加高效的使用數據和挖掘數據,提升企業(yè)數據價(jià)值。同時(shí)數據安全治理為分布各種云上的數據提供有效管理。因此,現在的 CDP,既能提供多云與混合云的統一平臺解決方案,又可以支持企業(yè)全數據生命周期中提升數據價(jià)值,還能實(shí)現企業(yè)云上的數據安全治理。
      管理多云、公有云、私有云與混合云的新理念
      企業(yè)在使用云的策略上,通常會(huì )根據其業(yè)務(wù)特點(diǎn)選擇公有云或私有云,有的企業(yè)也會(huì )選擇公有云 + 私有云,并構建混合云環(huán)境。Cloudera 在多云以及混合云的使用方面提出了很多新的理念和實(shí)踐。
      私有云對象存儲標準
      對公有云來(lái)說(shuō),原生云服務(wù)商建立了相關(guān)的對象存儲標準,但私有云目前并沒(méi)有對應的標準。Cloudera 通過(guò)主推 Ozone 為私有云提供未來(lái)的對象存儲標準。Ozone 是 Cloudera 在 2019 年創(chuàng )建并引入的一個(gè) Hadoop 子項目,是一個(gè)開(kāi)源的對象存儲項目。引入 Ozone 是為了能夠徹底解決 HDFS 文件數量的限制的弱點(diǎn)。目前很多企業(yè)用戶(hù)在部署大規模集群的時(shí)候,都需要使用 HDFS 聯(lián)邦,而 HDFS 聯(lián)邦在實(shí)際應用中也存在各種問(wèn)題,并不是最佳的解決方案,隨著(zhù)集群規模不斷的增長(cháng),局限性也日益突出。
      Cloudera 在不斷研發(fā)一些底層的新的存儲技術(shù),計劃未來(lái)幾年能夠替換 HDFS,為企業(yè)用戶(hù)部署大規模集群提供更加優(yōu)化的解決方案。
      數據存儲與數據處理的集成
      結合 CDP 存儲跟計算分離的概念,Cloudera 將 Ozone 定位為私有云的數據存儲引擎。Ozone 可以被理解為私有云里面的"S3",所有數據都是存放在 Ozone 里面,而分離的計算集群都是通過(guò)源數據,網(wǎng)絡(luò )遠程處理。未來(lái)規劃中,Hive、Spark、Impala 等一系列的處理引擎都會(huì )跟 Ozone 集成。
      同時(shí)私有云版上跟公有云版進(jìn)行映射,從而使存儲的接口和計算引擎都可以在 Ozone 上實(shí)施。由此不但可以滿(mǎn)足用戶(hù)使用對象存儲接口的需求,而且可以靈活的去分配計算資源,為開(kāi)發(fā)帶來(lái)便捷。
      混合云體驗
      從不同云的使用上講,CDP 提供公有云、Data Center和私有云版本,并提供體驗相同的各種數據服務(wù)。例如流式處理、Hive 批量處理、Spark 和即時(shí)查詢(xún)等,用戶(hù)在私有云環(huán)境里面,可以獲得跟公有云一樣的體驗。用戶(hù)使用 CDP 在自己搭建部署的云和使用 CDP 在原生云服務(wù)商的公有云時(shí),CDP 都會(huì )提供統一的用戶(hù)界面和相同的使用的方式,避免了用戶(hù)重復學(xué)習,同時(shí)大大節約了運維集群的時(shí)間。
      開(kāi)源商業(yè)模式及 CDP 發(fā)展戰略
      開(kāi)源是軟件技術(shù)創(chuàng )新的潮流,幾乎所有最新的技術(shù)都是以開(kāi)源的形式在傳播和推廣。同時(shí)開(kāi)源會(huì )成就技術(shù)的多樣化,一個(gè)百花齊放社區的文化可以持續不斷的發(fā)展。Cloudera 也會(huì )借助開(kāi)源強大的創(chuàng )新能力,不斷提升對用戶(hù)的服務(wù)。
      Cloudera作為一家開(kāi)源公司,會(huì )延續 100% 開(kāi)源的宗旨,并保證產(chǎn)品的持續開(kāi)源開(kāi)放。Cloudera 的新的授權許可方式整合了 Hortonworks 和 Cloudera 各自在之前使用的授權許可方式,并在合并 Hortonworks 之后做出了一些新的改變:
      "在授權許可方面,Cloudera 所有產(chǎn)品均將采用 OSI 批準的許可證,即 Apache 軟件許可證 (ASL) 或 Affero 通用公共許可證 (AGPL)。在此基礎上,Cloudera 貢獻代碼的由 Apache 軟件基金會(huì )托管的所有開(kāi)源項目將繼續由 ASF 監管。同時(shí),Cloudera 的代碼貢獻模式?jīng)]有改變,第三方項目將繼續采用 upstream first 方式。第三方項目代碼庫的公開(kāi)源僅保持在 upstream。
      "Cloudera 將采用市場(chǎng)及全球企業(yè)用戶(hù)已接受的類(lèi)似紅帽的開(kāi)源模式。自 2019 年 11 月起,產(chǎn)品的二進(jìn)制文件都將置于付費專(zhuān)區,并對廠(chǎng)商提供了一定程度的保護,因此需訂閱后才能訪(fǎng)問(wèn)。二進(jìn)制文件包含 Cloudera 特定的知識產(chǎn)權,將許多分散的開(kāi)源項目整合到企業(yè)級的功能系統中。
      "CDP 會(huì )對 Hadoop 開(kāi)源組件進(jìn)行精選與整合,結合新創(chuàng )建的開(kāi)源項目,提供跨云服務(wù)、全數據生命周期支持、數據安全和治理等,滿(mǎn)足企業(yè)級用戶(hù)的需求,為企業(yè)提供完整的云數據服務(wù)。
      訂閱模式為客戶(hù)創(chuàng )造新價(jià)值
      Cloudera 對以上新的開(kāi)源許可策略與其業(yè)務(wù)模型進(jìn)行了有機的結合,在最終制定策略方向之前,與客戶(hù)、行業(yè)專(zhuān)家、律師、同行公司和員工等進(jìn)行了充分討論與咨詢(xún)。采用類(lèi)似紅帽開(kāi)源模式,是以更友好的開(kāi)源軟件企業(yè)化商業(yè)模式服務(wù)于用戶(hù),也突顯了軟件產(chǎn)品"面向服務(wù)"本質(zhì)。而Cloudera 的軟件產(chǎn)品按訂閱方式提供,則減少了購買(mǎi)軟件的麻煩。
      購買(mǎi)訂閱服務(wù)與購買(mǎi)私有軟件許可相比,訂閱提供用戶(hù)所需的一切,不需要用戶(hù)端訪(fǎng)問(wèn)許可,不需要持續為升級投入成本,沒(méi)有服務(wù)支持限制以及隱藏費用。購買(mǎi)訂閱的用戶(hù)可以獲得諸多價(jià)值,例如:
    • "訂閱使用戶(hù)可以持續訪(fǎng)問(wèn) Cloudera 的商業(yè)軟件,獲得更新與維護,包括所有安全更新和漏洞修復。
    • "訂閱不依賴(lài)于特定的版本或架構,讓用戶(hù)無(wú)需任何代價(jià)即可升級系統,易于基于云的服務(wù)器上輕松部署。
    • "購買(mǎi)訂閱可以獲得 Cloudera 的全球服務(wù)支持,解決用戶(hù)的后顧之憂(yōu)。服務(wù)支持與用戶(hù)合作過(guò)程中,也打開(kāi)了用戶(hù)與 Cloudera 研發(fā)團隊的通道,在與用戶(hù)充分的溝通過(guò)程中,研發(fā)團隊也能更好的根據用戶(hù)的反饋研發(fā)更加貼近用戶(hù)需求的產(chǎn)品。
      "Cloudera 擁有 700 多個(gè)研發(fā)工程師,其中大概 300 名左右的 committers,同時(shí)其系列產(chǎn)品在全球幾千個(gè)大型客戶(hù)經(jīng)過(guò)廣泛的驗證,用戶(hù)的問(wèn)題可以得到快速解決。因此企業(yè)用戶(hù)訂閱 Cloudera 的企業(yè)版產(chǎn)品,不需要建立各自的技術(shù)團隊進(jìn)行平臺底層研發(fā)和日常維護,讓企業(yè)最大限度的節省平臺成本投入。
      "用戶(hù)訂閱本質(zhì)上是購買(mǎi) Cloudera 所提供的服務(wù),使用戶(hù)能夠釋放出維護軟件版本所需的大量寶貴的工程師資源,也不必擔心轉換平臺供應商所帶來(lái)的成本投入,令用戶(hù)能將更多資源投入在能產(chǎn)生更多收入的應用和產(chǎn)品服務(wù)上。
      "Cloudera 開(kāi)發(fā)了諸多開(kāi)源項目,這些項目已經(jīng)成為行業(yè)標準,但是沒(méi)有一家公司可以成為創(chuàng )新唯一來(lái)源。通過(guò)投資Spark,Kbernetes和Kafka等開(kāi)源項目,通過(guò)訂閱服務(wù),用戶(hù)可以獲得可持續發(fā)展的長(cháng)期架構。
      通過(guò)更開(kāi)放包容的商業(yè)策略,Cloudera最大限度的發(fā)揮開(kāi)源社區創(chuàng )新的原動(dòng)力,持續為客戶(hù)提供更好的服務(wù)。
      結語(yǔ)
      在應對企業(yè)用戶(hù)新需求方面,CDP 通過(guò)簡(jiǎn)化操作,減少了在整個(gè)企業(yè)機構內上線(xiàn)新用例的時(shí)間。同時(shí)使用機器學(xué)習來(lái)智能地自動(dòng)調整工作負載,能更經(jīng)濟有效地使用云基礎架構。CDP 還可以管理任何環(huán)境中的數據,包括多種公共云、裸機、私有云和混合云環(huán)境。此外,借助共享數據體驗技術(shù)(SDX)、CDP 中的安全和治理功能,IT 人員可以放心地在任何地方提供針對數據運行的安全分析。
      綜上,Cloudera的集成數據平臺解決方案能夠讓企業(yè)更加靈活的組建符合各自需求的云服務(wù),最終通過(guò)使用 CDP 進(jìn)行統一管理。同時(shí),其數據隱私以及安全管理方面的設計,可以幫助企業(yè)保證日常的安全運營(yíng)。此外,Cloudera 在堅持開(kāi)源的基礎上,持續探索關(guān)于開(kāi)源生態(tài)、商業(yè)模式的更多可能性。
      如需了解有關(guān)企業(yè)數據云和Cloudera 數據平臺(CDP)可用性的更多詳細信息,請訪(fǎng)問(wèn) cn.cloudera.com。
    【免責聲明】本文僅代表作者本人觀(guān)點(diǎn),與CTI論壇無(wú)關(guān)。CTI論壇對文中陳述、觀(guān)點(diǎn)判斷保持中立,不對所包含內容的準確性、可靠性或完整性提供任何明示或暗示的保證。請讀者僅作參考,并請自行承擔全部責任。

    專(zhuān)題

    CTI論壇會(huì )員企業(yè)

    亚洲精品网站在线观看不卡无广告,国产a不卡片精品免费观看,欧美亚洲一区二区三区在线,国产一区二区三区日韩 尉犁县| 平顶山市| 霍邱县| 谷城县| 滨海县| 潢川县| 北宁市| 达日县| 伽师县| 兰溪市| 通山县| 鹤庆县| 潼关县| 泽库县| 曲水县| 乐陵市| 获嘉县| 托克托县| 东乌珠穆沁旗| 嘉峪关市| 巴青县| 龙游县| 色达县| 江西省| 赞皇县| 剑河县| 南乐县| 绥阳县| 溧水县| 正安县| 兴海县| 抚顺县| 逊克县| 洞口县| 扶绥县| 华坪县| 应用必备| 平阳县| 大悟县| 乡城县| 安阳市| http://444 http://444 http://444 http://444 http://444 http://444