CDP不僅提供了一種自助式數(shù)據(jù)體驗(yàn)，使數(shù)據(jù)科學(xué)家，數(shù)據(jù)工程師，商業(yè)分析師和開發(fā)人員能夠容易地訪問和分享數(shù)據(jù)。而且還提供了一個(gè)完整的機(jī)器學(xué)習(xí)工作流，使得數(shù)據(jù)科學(xué)家和機(jī)器學(xué)習(xí)工程師可以更快地構(gòu)建和部署模型。

Cloudera 大中華區(qū)技術(shù)總監(jiān)劉隸放表示，Cloudera是一家值得信任的幫助別人管理數(shù)據(jù)的公司，Cloudera的平臺(tái)上面管理的數(shù)據(jù)已經(jīng)超過2500萬TB，其規(guī)模與很多云服務(wù)商的整個(gè)數(shù)據(jù)體量相當(dāng)。

在劉隸放看來，Cloudera（肯睿）在幫助企業(yè)落地大語言模型方面有獨(dú)特優(yōu)勢(shì)。

首選，企業(yè)用戶不會(huì)直接用公有云上的大模型，這些模型有很多都是根據(jù)互聯(lián)網(wǎng)上的數(shù)據(jù)訓(xùn)練而來的。企業(yè)會(huì)基于自己的數(shù)據(jù)做訓(xùn)練，這些數(shù)據(jù)跟企業(yè)的關(guān)聯(lián)性更高，訓(xùn)練出的模型的實(shí)用性也更強(qiáng)。巧的是，用戶的很多數(shù)據(jù)原本就在Cloudera的平臺(tái)上。

第二點(diǎn)，Cloudera可以幫助企業(yè)落得更值得信任的大語言模型。ChatGPT的AI幻覺問題很明顯，當(dāng)沒有對(duì)應(yīng)的答案時(shí)，它經(jīng)常會(huì)“一本正經(jīng)的胡說八道”。Cloudera一直在做大數(shù)據(jù)分析，盡量在保持原始數(shù)據(jù)的基礎(chǔ)上來加工，對(duì)于輸出的結(jié)果還會(huì)有一個(gè)印證的過程，它可以利用大數(shù)據(jù)分析的能力對(duì)AI輸出的答案進(jìn)行分析和驗(yàn)證。

如今，Cloudera提供可部署在本地和公有云的數(shù)據(jù)平臺(tái)，過去兩年來，Cloudera一直在宣傳在數(shù)據(jù)編織的基礎(chǔ)上面，幫助用戶去做數(shù)據(jù)的治理和管控。同時(shí)，也在強(qiáng)調(diào)數(shù)據(jù)庫、數(shù)據(jù)湖、數(shù)據(jù)倉庫融合等技術(shù)的優(yōu)勢(shì)。而現(xiàn)在，Cloudera的平臺(tái)將轉(zhuǎn)向去成為一個(gè)AI平臺(tái)。

Cloudera的AI平臺(tái)CML（CDP Machine Learning）可以分為三個(gè)部分：

首先，就是以CDP為基礎(chǔ)的數(shù)據(jù)平臺(tái)，這里有很多用戶數(shù)據(jù)；

第二部分，它可以幫助用戶加工用于訓(xùn)練的數(shù)據(jù)，這套加工數(shù)據(jù)的流程原本用在大數(shù)據(jù)流程中，AI也同樣需要對(duì)數(shù)據(jù)進(jìn)行加工處理；

第三部分，它可以托管和運(yùn)行大語言模型，并在模型的基礎(chǔ)上，構(gòu)建和部署AI應(yīng)用。

劉隸放表示，憑借在數(shù)據(jù)技術(shù)方面安全可控的優(yōu)勢(shì)，CML用戶也吸引了很多用戶。目前，很多國內(nèi)的企業(yè)用戶都在思考如何落地大語言模型，Cloudera的CML平臺(tái)可以讓用戶在有管控的情況下來部署大語言模型。

除了在大語言模型方面的新布局，Cloudera還介紹了監(jiān)控和優(yōu)化CDP部署的新服務(wù)，叫做Cloudera Observability。

Cloudera Data Platform (CDP)是一個(gè)可以跨私有云和公有云部署的平臺(tái)，實(shí)際部署中，可能分布在多個(gè)基礎(chǔ)架構(gòu)上。在如今復(fù)雜系統(tǒng)架構(gòu)中，想僅僅通過監(jiān)控來掌握所有情況絕非易事，很多時(shí)候都會(huì)影響資源利用率和性能表現(xiàn)。

此外，由于數(shù)據(jù)和分析都是在混合云上完成的，這對(duì)財(cái)務(wù)管理也帶來了很大挑戰(zhàn)。將預(yù)算按照?qǐng)F(tuán)隊(duì)或者場景劃分都會(huì)很需要會(huì)計(jì)做很多工作，預(yù)測(cè)未來支出也會(huì)更麻煩?？傊?，財(cái)務(wù)管理綿連的挑戰(zhàn)也非常巨大。

此前，Cloudera有一個(gè)產(chǎn)品叫Workload  Management，它主要是做工作負(fù)載調(diào)優(yōu)的，但是在現(xiàn)在混合云的環(huán)境之下，光有調(diào)優(yōu)是不夠的。于是就有了Cloudera Observability ，它可以幫助企業(yè)解決上述問題。

Cloudera Observability 有助于提高系統(tǒng)的可控性和穩(wěn)定性。當(dāng)系統(tǒng)越來越復(fù)雜，對(duì)運(yùn)維人員的技能要求也越來越高，在排查故障，找出問題時(shí)的難度也越來越高。而Cloudera Observability 可以減輕運(yùn)維人員的負(fù)擔(dān)，從而提高系統(tǒng)的可控性和穩(wěn)定性。

Cloudera Observability 可以提高對(duì)于系統(tǒng)資源的管控，多云環(huán)境下的資源經(jīng)常會(huì)收縮或者膨脹，資源是在不同動(dòng)態(tài)的變化當(dāng)中，運(yùn)維人員希望在運(yùn)維過程中，對(duì)于系統(tǒng)資源的消耗有一個(gè)評(píng)判的標(biāo)準(zhǔn)，從而找到負(fù)載的優(yōu)化方向。

Cloudera Observability可以提高財(cái)務(wù)管控能力，以系統(tǒng)監(jiān)控和數(shù)據(jù)分析技術(shù)為基礎(chǔ)，幫助企業(yè)管理IT資源的使用成本，從財(cái)務(wù)角度出發(fā)，對(duì)整個(gè)系統(tǒng)的資源使用狀況做一個(gè)評(píng)判，從而幫助企業(yè)更好地管理IT資源的使用狀況。

目前，Cloudera Observability是SaaS版本，直接部署在公有云上的，從劉隸放的介紹中了解到，Cloudera很快還會(huì)推出一個(gè)本地的部署版，更適合那些行業(yè)監(jiān)管嚴(yán)格，對(duì)數(shù)據(jù)敏感的用戶，它可以在本地做分析。

zhupb