使AI第一企業(yè)能夠通過自助服務訪問受控數據。
標簽:開發(fā)商: Cloudera
產品類型:軟件
產品功能:大數據分析工具
平臺語言:
開源水平:不提供源碼
本產品的分類與介紹僅供參考,具體以商家網站介紹為準,如有疑問請來電 023-68661681 咨詢。
全球第二大軟件公司
全面,凝聚的用戶體驗
數據可任意移動
便捷的ML工作區(qū)
* 關于本產品的分類與介紹僅供參考,精準產品資料以官網介紹為準,如需購買請先行測試。
Cloudera Machine Learning(CML)只是您可以在Cloudera數據平臺(CDP)上使用的眾多體驗之一。 Cloudera Machine Learning使團隊可以立即部署機器學習工作空間,這些工作空間可以自動擴展以適應他們的需求,并可以通過使用kubernetes自動掛起以節(jié)省成本。 所有這些都打包成可移植的體驗,多個團隊成員可以輕松訪問這些體驗,以在整個組織中提供一致的體驗。在下面的視頻中,將帶您逐步了解CDP公共云上CML中的各種高級功能。
|
|
|
對于數據科學家 |
|
|
在可滿足您的業(yè)務和IT要求的平臺上獲取端到端機器學習工作流所需的訪問,工具和計算資源。 |
|
|
|
|
對于IT領導者 |
|
|
在不影響安全性和治理的前提下,為您的團隊提供通過機器學習進行試驗,迭代和影響業(yè)務所需的資源。
|
借助Cloudera Machine Learning,管理員可以輕松地在混合和多云環(huán)境中復制受控數據集,以使數據科學團隊可以自助訪問他們所需的業(yè)務數據,同時保持企業(yè)數據安全性和治理控制。
Cloudera Machine Learning使數據科學團隊可以訪問橫向擴展的異構計算資源,以快速完成工作,同時維護可調節(jié)的護欄,以幫助IT部門輕松管理和優(yōu)化基礎架構資源和成本。
除了適用于Spark的Python,R和Scala之外,現代數據科學團隊還需要最新的開源工具和庫來進行創(chuàng)新,并在首選IDE中進行協作。Cloudera機器學習使從業(yè)人員可以自由使用自己喜歡的工具,同時保持安全性,效率和可擴展性,而無需管理開銷。
當在本地訓練ML模型但推理數據存儲在云中時,可以對駐留在云存儲中的大量數據進行批評分。IT部門可以使用預先配置的資源利用防護欄來部署ML工作區(qū),數據科學團隊則使用自動縮放/掛起的TensorFlow/Spark作業(yè)快速處理數據,不會損失任何成本。
CML是Cloudera Machine Learning,CDSW是Cloudera Data Science Workbench。對于現有的Cloudera Data Science Workbench用戶,本主題將有助于重點介紹Cloudera Data Science Workbench與它的原生云產品Cloudera Machine Learning之間的一些關鍵區(qū)別。
CML利用云原生優(yōu)勢(如快速配置,彈性自動縮放,分布式依賴項隔離和分布式GPU培訓)擴展了Cloudera Data Science Workbench(CDSW)的端到端工作流。它可以運行自己的本機分布式計算工作負載,而無需單獨的CDH群集進行橫向擴展計算。 它旨在在現有Kubernetes環(huán)境中的CDP上運行,例如托管云Kubernetes服務(EKS,AKS,GKE)或Red Hat OpenShift,從而在提供多云可移植性的同時為某些客戶降低了運營成本。
兩種產品都可以幫助數據工程師和數據科學團隊通過強大的安全性和治理來提高共享數據和計算的生產力,他們共享大量的代碼。
主要區(qū)別在于:
CDSW | CML | |
---|---|---|
結構 | CDSW需要CDH或HDP群集,并在群集上的一個或多個專用網關節(jié)點上運行。 | CML是自包含的,不需要附加的CDH / HDP群集。 |
1個主主機和多個工作主機的概念。 | 沒有指定的主機和工作主機;所有節(jié)點都是短暫的。 | |
安全性 | 通過CDH / HDP集群集成了Kerberos身份驗證;通過LDAP / SAML進行外部身份驗證。 | 通過Cloudera數據平臺(CDP)使用FreeIPA進行集中身份管理。 |
應用存儲 | 項目文件,內部postgresDB和Livelog都永久存儲在Master主機上。 | 所有必需的持久性存儲都在云托管的塊存儲,NFS和關系數據存儲中。 |
計算 | Python / R / Scala工作負載在集群的CDSW網關節(jié)點上執(zhí)行。 | Python / R / Scala工作負載在CDP /云提供商管理的K8s集群上運行。 |
CDSW將分布式計算工作負載(例如YARN上的Spark)推送到CDH / HDP集群。 | 不支持Spark-on-YARN;改為使用Spark-on-K8s 。工作負載將在客戶環(huán)境中配置的專用K8s集群上運行。 | |
沒有自動縮放。 | 通過您的云服務提供商進行自動擴展。Kubernetes /節(jié)點級自動縮放將用于根據需求擴展/收縮集群大小。 | |
打包 | 作為可下載的RPM和CSD提供。 | 作為CDP上的托管服務提供。 |
Spark與CDH打包在一起。 | K8s上的Spark與CML打包在一起,不依賴于外部集群。 | |
資料存取 | 數據通常駐留在HDFS,Hive,HBase等中的附加CDH / HDP群集上。 | 數據可以駐留在對象存儲(例如S3)上,也可以駐留在向CDP注冊的任何現有工作負載群集上。 |
更新時間:2020-06-24 11:08:30.000 | 錄入時間:2020-05-07 11:16:09.313 | 責任編輯:胡濤