原創(chuàng)|大數(shù)據(jù)新聞|編輯:況魚杰|2020-11-25 11:55:42.423|閱讀 467 次
概述:現(xiàn)在,企業(yè)對(duì)數(shù)據(jù)觀念的轉(zhuǎn)變已經(jīng)將數(shù)據(jù)管理推向了新的高度。數(shù)據(jù)科學(xué)是現(xiàn)在數(shù)據(jù)管理的核心組成部分,但數(shù)據(jù)管理和數(shù)據(jù)科學(xué)往往被視為兩種不同的活動(dòng)。數(shù)據(jù)科學(xué)家工作在數(shù)據(jù)分析師、數(shù)據(jù)工程師和DBA之間,他們把時(shí)間花在為數(shù)據(jù)分析和競(jìng)爭(zhēng)情報(bào)做好數(shù)據(jù)基礎(chǔ)設(shè)施上。但是,在不斷發(fā)展的下一代數(shù)據(jù)市場(chǎng)中,數(shù)據(jù)管理和分析將是市場(chǎng)成功的核心差異化因素,因此,數(shù)據(jù)管理和數(shù)據(jù)科學(xué)必須協(xié)同工作。
# 界面/圖表報(bào)表/文檔/IDE等千款熱門軟控件火熱銷售中 >>
相關(guān)鏈接:
現(xiàn)在,企業(yè)對(duì)數(shù)據(jù)觀念的轉(zhuǎn)變已經(jīng)將數(shù)據(jù)管理推向了新的高度。數(shù)據(jù)科學(xué)是現(xiàn)在數(shù)據(jù)管理的核心組成部分,但數(shù)據(jù)管理和數(shù)據(jù)科學(xué)往往被視為兩種不同的活動(dòng)。數(shù)據(jù)科學(xué)家工作在數(shù)據(jù)分析師、數(shù)據(jù)工程師和DBA之間,他們把時(shí)間花在為數(shù)據(jù)分析和競(jìng)爭(zhēng)情報(bào)做好數(shù)據(jù)基礎(chǔ)設(shè)施上。但是,在不斷發(fā)展的下一代數(shù)據(jù)市場(chǎng)中,數(shù)據(jù)管理和分析將是市場(chǎng)成功的核心差異化因素,因此,數(shù)據(jù)管理和數(shù)據(jù)科學(xué)必須協(xié)同工作。
《福布斯》的一篇文章提到了Everest Group的一項(xiàng)研究,該研究指出,到2025年,全球數(shù)據(jù)管理和分析市場(chǎng)將達(dá)到1350億美元。多年來(lái),這個(gè)市場(chǎng)的廠商已經(jīng)從功能到流程轉(zhuǎn)向平臺(tái)導(dǎo)向。在平臺(tái)導(dǎo)向中,數(shù)據(jù)不再被視為業(yè)務(wù)流程的副產(chǎn)品,而是業(yè)務(wù)的神經(jīng)中樞。
一個(gè)組織的數(shù)據(jù)管理職能全面控制企業(yè)數(shù)據(jù)的獲取、存儲(chǔ)、質(zhì)量、治理和完整性,從而監(jiān)督該組織內(nèi)所有數(shù)據(jù)相關(guān)政策的制定和實(shí)施。但是,數(shù)據(jù)管理團(tuán)隊(duì)只管理數(shù)據(jù)資產(chǎn),它通常不參與數(shù)據(jù)的核心技術(shù)應(yīng)用。數(shù)據(jù)管理職能部門擁有所有的數(shù)據(jù)。在網(wǎng)絡(luò)研討會(huì) "數(shù)據(jù)管理與數(shù)據(jù)戰(zhàn)略 "中,Peter Aiken談到了 "組織數(shù)據(jù)管理需求與數(shù)據(jù)戰(zhàn)略需求的優(yōu)先級(jí)"。
另一方面,組織中的數(shù)據(jù)科學(xué)職能部門對(duì)數(shù)據(jù)資產(chǎn)的所有 "技術(shù)應(yīng)用 "進(jìn)行構(gòu)思、開發(fā)、實(shí)施和實(shí)踐。在這個(gè)意義上,"技術(shù)應(yīng)用 "意味著涉及企業(yè)數(shù)據(jù)的科學(xué)、技術(shù)、工藝和業(yè)務(wù)實(shí)踐。
數(shù)據(jù)科學(xué)團(tuán)隊(duì)從不擁有任何數(shù)據(jù),他們只是收集、存儲(chǔ)、處理、分析數(shù)據(jù)--然后向企業(yè)其他部門報(bào)告數(shù)據(jù)驅(qū)動(dòng)的成果,以獲得業(yè)務(wù)收益。數(shù)據(jù)科學(xué)家被認(rèn)為是數(shù)據(jù)科學(xué)和相關(guān)技術(shù)的專家,他們依靠高度專業(yè)化的知識(shí)(統(tǒng)計(jì)學(xué)、計(jì)算機(jī)科學(xué)、人工智能等知識(shí))為企業(yè)提供數(shù)據(jù)驅(qū)動(dòng)實(shí)踐的建議。
在實(shí)際工作中,數(shù)據(jù)科學(xué)職能隸屬于組織的數(shù)據(jù)管理職能。數(shù)據(jù)科學(xué)團(tuán)隊(duì)為組織帶來(lái)了一套核心技術(shù)技能,以實(shí)施數(shù)據(jù)管理政策、程序和準(zhǔn)則所規(guī)定的最佳實(shí)踐。
隨著數(shù)據(jù)的數(shù)量和復(fù)雜性急劇上升,數(shù)據(jù)管理已成為業(yè)務(wù)運(yùn)作的最重要方面之一。數(shù)據(jù)管理做法涉及制定與數(shù)據(jù)有關(guān)的政策、程序、角色、責(zé)任和嚴(yán)格的訪問控制機(jī)制。
完善的數(shù)據(jù)管理戰(zhàn)略,以數(shù)據(jù)治理為重點(diǎn),實(shí)現(xiàn)商業(yè)價(jià)值的最大化,目前已成為企業(yè)領(lǐng)導(dǎo)者和經(jīng)營(yíng)者討論的中心議題。企業(yè)中的數(shù)據(jù)管理團(tuán)隊(duì)負(fù)責(zé)構(gòu)思和制定所有的政策。
組織中不同部門的數(shù)據(jù)專業(yè)人員負(fù)責(zé)在日常數(shù)據(jù)相關(guān)工作中執(zhí)行和遵循所有政策和準(zhǔn)則。正如《數(shù)據(jù)管理與數(shù)據(jù)治理》中所解釋的那樣,數(shù)據(jù)治理已被確定為數(shù)據(jù)管理的核心組成部分。《數(shù)據(jù)管理與數(shù)據(jù)治理:改進(jìn)組織數(shù)據(jù)戰(zhàn)略》中解釋了這一點(diǎn)。
在數(shù)據(jù)科學(xué)領(lǐng)域,戰(zhàn)略政策、程序和準(zhǔn)則在數(shù)據(jù)技術(shù)項(xiàng)目的實(shí)施過程中起著重要作用,盡管在這個(gè)階段沒有一個(gè)管理角色直接出現(xiàn)。換句話說(shuō),組織數(shù)據(jù)戰(zhàn)略家通過塑造管理數(shù)據(jù)的政策、程序和準(zhǔn)則來(lái)結(jié)束他們的工作;然后,數(shù)據(jù)科學(xué)家或其他數(shù)據(jù)專業(yè)人員的職責(zé)是遵守政策和準(zhǔn)則,以確保組織-數(shù)據(jù)戰(zhàn)略藍(lán)圖的完整。
數(shù)據(jù)管理策略人員也會(huì)思考可能出現(xiàn)的違規(guī)行為和處罰措施,以便通過控制措施來(lái)監(jiān)督企業(yè)數(shù)據(jù)策略的實(shí)施。
《邁向數(shù)據(jù)科學(xué)》指出,最近的幾次技術(shù)運(yùn)動(dòng)要求數(shù)據(jù)科學(xué)家重新思考數(shù)據(jù)管理實(shí)踐,以實(shí)現(xiàn)高級(jí)分析。這些技術(shù)運(yùn)動(dòng)是:
在典型的增強(qiáng)型數(shù)據(jù)管理系統(tǒng)中,數(shù)據(jù)集成、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理(MDM)、元數(shù)據(jù)管理和數(shù)據(jù)庫(kù)管理系統(tǒng)(DBMS)這五項(xiàng)核心數(shù)據(jù)科學(xué)活動(dòng)通過工具完全或部分自動(dòng)化。
通過使用先進(jìn)的AI、Ml或分析工具,數(shù)據(jù)科學(xué)家可以從 "繁重的數(shù)據(jù)準(zhǔn)備工作 "中解脫出來(lái)。通常情況下,數(shù)據(jù)科學(xué)家約有80%的時(shí)間花在為分析準(zhǔn)備數(shù)據(jù)上;這些工具消除了這種耗時(shí)的參與--為復(fù)雜的分析工作留下了充足的時(shí)間,其中可能包括模型開發(fā)或數(shù)據(jù)解釋。增強(qiáng)型數(shù)據(jù)管理被列為Gartner 2020年十大數(shù)據(jù)分析趨勢(shì)之一。
一般數(shù)據(jù)隱私條例(GDPR)和CCPA等數(shù)據(jù)法規(guī)的出現(xiàn),為現(xiàn)有的數(shù)據(jù)管理實(shí)踐增加了一個(gè)與數(shù)據(jù)科學(xué)重疊的新維度。新法規(guī)提供了更好的管理機(jī)制,尤其是在數(shù)據(jù)隱私、數(shù)據(jù)安全和道德方面,但卻使AI驅(qū)動(dòng)的數(shù)據(jù)科學(xué)平臺(tái)變得復(fù)雜。現(xiàn)在,數(shù)據(jù)管理者不僅要考慮對(duì)數(shù)據(jù)隱私、安全和倫理實(shí)施嚴(yán)格的控制,還要擔(dān)心先進(jìn)技術(shù)(AI、ML)對(duì)數(shù)據(jù)治理的影響。
在以法規(guī)為中心的數(shù)據(jù)治理、數(shù)據(jù)管理和數(shù)據(jù)科學(xué)實(shí)踐的新世界中,這些活動(dòng)仍將是平行的活動(dòng),但會(huì)在一些情況下發(fā)生交叉。
這種碰撞的最終結(jié)果是什么?供應(yīng)商和服務(wù)提供商將進(jìn)行合并、收購(gòu)和整合。
從嚴(yán)格的技術(shù)角度來(lái)看,Gartner已經(jīng)奠定了企業(yè)數(shù)據(jù)管理和數(shù)據(jù)科學(xué)實(shí)踐的以下可觀察的轉(zhuǎn)變。
在理想的業(yè)務(wù)場(chǎng)景中,數(shù)據(jù)管理和數(shù)據(jù)科學(xué)實(shí)踐相統(tǒng)一,才能獲得最佳結(jié)果。那么,這兩種實(shí)踐如何協(xié)調(diào)呢?
根據(jù)Quora上的討論,數(shù)據(jù)管理專注于治理良好的數(shù)據(jù)收集和數(shù)據(jù)訪問。數(shù)據(jù)科學(xué)側(cè)重于從數(shù)據(jù)分析中得出戰(zhàn)略業(yè)務(wù)決策。數(shù)據(jù)管理的缺失表明 "數(shù)據(jù)科學(xué)由于數(shù)據(jù)質(zhì)量差或無(wú)法訪問而提供糟糕的分析結(jié)果 "的風(fēng)險(xiǎn)。
本站文章除注明轉(zhuǎn)載外,均為本站原創(chuàng)或翻譯。歡迎任何形式的轉(zhuǎn)載,但請(qǐng)務(wù)必注明出處、不得修改原文相關(guān)鏈接,如果存在內(nèi)容上的異議請(qǐng)郵件反饋至chenjj@fc6vip.cn