Cloudera發(fā)布有助簡化云端大數(shù)據(jù)作業(yè)的Altus云端平臺
 |
| Altus的作業(yè)管理系統(tǒng)可自動化且簡化常見的彈性數(shù)據(jù)管道操作問題,讓使用者無論在叢集或基礎(chǔ)架構(gòu)是否運作的狀態(tài)下,均可對作業(yè)進行除錯。此外,Altus的作業(yè)管理系統(tǒng)還可標(biāo)示出重大效能問題,進一步分析其原因,如此一來使用者便能在更加穩(wěn)定且更低成本的情況下運行數(shù)據(jù)管道。 |
全球機器學(xué)習(xí)和先進分析平臺供應(yīng)商Cloudera發(fā)表全新Cloudera Altus云端平臺,其平臺即服務(wù)(PaaS)的特性讓使用者能夠輕易地在公有云上運算大規(guī)模的數(shù)據(jù)處理程序。初版Altus服務(wù)旨在幫助數(shù)據(jù)工程師利用隨選基礎(chǔ)架構(gòu)來加速建構(gòu)和操作具彈性的數(shù)據(jù)管道(data pipeline),進一步處理復(fù)雜且以數(shù)據(jù)為導(dǎo)向的應(yīng)用。
常見的數(shù)據(jù)工程像是數(shù)據(jù)ETL(提取/轉(zhuǎn)換/讀取),或是批次跑分等通常都是大量且以批次為主的作業(yè),這些作業(yè)需要一段時間來進行運算,并幫助企業(yè)從原始數(shù)據(jù)中萃取出關(guān)鍵資訊。藉由在具彈性的基礎(chǔ)架構(gòu)上運行這些數(shù)據(jù)管道,企業(yè)可以獲得顯著的運作彈性與效率。此外,企業(yè)通常也會傾向在云端基礎(chǔ)架構(gòu)中應(yīng)用熟悉的大規(guī)模數(shù)據(jù)處理工具和技術(shù)。
Cloudera Altus數(shù)據(jù)工程服務(wù)簡化了彈性數(shù)據(jù)管道的開發(fā)和運作,并將數(shù)據(jù)工程作業(yè)視為核心,進一步精簡一般費時又復(fù)雜的基礎(chǔ)架構(gòu)管理與運作。 Altus同時也降低了云端轉(zhuǎn)移的風(fēng)險,并在此開放、整合,以及企業(yè)級的服務(wù)平臺上提供使用者熟悉的工具套件,透過多重數(shù)據(jù)工程應(yīng)用,提供一般儲存、元數(shù)據(jù)、資安,以及管理等服務(wù)。
Cloudera Altus數(shù)據(jù)工程服務(wù)簡化了彈性數(shù)據(jù)管道的開發(fā)和運作,并將數(shù)據(jù)工程作業(yè)視為核心,進一步精簡一般費時又復(fù)雜的基礎(chǔ)架構(gòu)管理與運作。 Altus同時也降低了云端轉(zhuǎn)移的風(fēng)險,并在此開放、整合,以及企業(yè)級的服務(wù)平臺上提供使用者熟悉的工具套件,透過多重數(shù)據(jù)工程應(yīng)用,提供一般儲存、元數(shù)據(jù)、資安,以及管理等服務(wù)。
簡化建立和運作彈性數(shù)據(jù)管道過程
Cloudera產(chǎn)品資深副總裁Charles Zedlewski表示:「現(xiàn)今數(shù)據(jù)導(dǎo)向的應(yīng)用是以數(shù)據(jù)工程作業(yè)為基礎(chǔ),Altus簡化了建立和運作彈性數(shù)據(jù)管道的過程,同時也保留了可攜性,并可更輕易地為復(fù)雜的商業(yè)智慧(BI)、數(shù)據(jù)科學(xué),和即時應(yīng)用導(dǎo)入數(shù)據(jù)工程元素。」
Cloudera產(chǎn)品資深副總裁Charles Zedlewski表示:「現(xiàn)今數(shù)據(jù)導(dǎo)向的應(yīng)用是以數(shù)據(jù)工程作業(yè)為基礎(chǔ),Altus簡化了建立和運作彈性數(shù)據(jù)管道的過程,同時也保留了可攜性,并可更輕易地為復(fù)雜的商業(yè)智慧(BI)、數(shù)據(jù)科學(xué),和即時應(yīng)用導(dǎo)入數(shù)據(jù)工程元素。」
根據(jù)IDC研究,公有云布建目前在整體全球商業(yè)分析軟體市場的占比為12%,并預(yù)期2020年的復(fù)合年均增長率(CAGR)會提升至25%。對Cloudera的客戶而言,云端是成長最快速的布建環(huán)境之一,而Altus讓使用者在云端運作數(shù)據(jù)工程作業(yè)變得比以往更加簡單。
Cloudera推出的初版Altus可支援Apache Spark、Apache Hive on MapReduce2,和Hive on Spark,且已在大部分有Amazon云端服務(wù)(AWS)的地區(qū)上市。 Cloudera期望將來能夠讓Altus支援其他主流公有云服務(wù),例如Microsoft Azure。
Cloudera推出的初版Altus可支援Apache Spark、Apache Hive on MapReduce2,和Hive on Spark,且已在大部分有Amazon云端服務(wù)(AWS)的地區(qū)上市。 Cloudera期望將來能夠讓Altus支援其他主流公有云服務(wù),例如Microsoft Azure。
彈性數(shù)據(jù)管道管理服務(wù)
彈性數(shù)據(jù)管道管理服務(wù)
作業(yè)導(dǎo)向
Cloudera Altus是以數(shù)據(jù)管道為核心,而非叢集或基礎(chǔ)架構(gòu),所以使用者可以輕易地針對數(shù)據(jù)管道進行提交、復(fù)制,和除錯,而不用擔(dān)心底層的基礎(chǔ)架構(gòu)。
無數(shù)據(jù)孤島(Data siloes)
無數(shù)據(jù)孤島(Data siloes)
向下相容與平臺可攜性
內(nèi)建作業(yè)管理系統(tǒng)
內(nèi)建作業(yè)管理系統(tǒng)...