有沒有想過是選擇大數(shù)據(jù)還是數(shù)據(jù)科學(xué)?如果你對(duì)數(shù)據(jù)感興趣，又是一個(gè)技術(shù)怪胎，你可能至少有一次會(huì)陷入這樣的困境。在我們生活的數(shù)字世界中，數(shù)據(jù)正日益成為組織最有價(jià)值的資產(chǎn)。如果有一天它超過金價(jià)，那就不奇怪了。但要探索每一點(diǎn)數(shù)據(jù)，我們需要的不僅僅是基礎(chǔ)知識(shí)。大數(shù)據(jù)和數(shù)據(jù)科學(xué)技術(shù)以數(shù)據(jù)為核心內(nèi)容，實(shí)施著各種各樣的行動(dòng)。

[[386001]]

盡管大數(shù)據(jù)和數(shù)據(jù)科學(xué)是兩種不同的技術(shù)，但它們是以數(shù)據(jù)為基礎(chǔ)相互聯(lián)系的。這兩種技術(shù)在數(shù)字進(jìn)化中都扮演著重要角色。越來越多的公司在各個(gè)領(lǐng)域采用大數(shù)據(jù)和數(shù)據(jù)科學(xué)來加強(qiáng)日常工作。由于數(shù)據(jù)正在迅速改變我們的生活和交流方式，大數(shù)據(jù)和數(shù)據(jù)科學(xué)應(yīng)用有助于收集、整理和研究數(shù)據(jù)，以提高組織的績效。數(shù)據(jù)科學(xué)是統(tǒng)計(jì)學(xué)的延伸，借助計(jì)算機(jī)科學(xué)技術(shù)處理大數(shù)據(jù)集。另一方面，大數(shù)據(jù)涉及來自不同來源的大量異構(gòu)數(shù)據(jù)。在本文中，我們將解開每一個(gè)結(jié)，揭示數(shù)據(jù)科學(xué)和大數(shù)據(jù)之間的區(qū)別。

定義

大數(shù)據(jù)代表了大量的數(shù)據(jù)，包括結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)，這些數(shù)據(jù)每天都會(huì)淹沒企業(yè)。數(shù)據(jù)量非常大，傳統(tǒng)的數(shù)據(jù)管理工具都無法有效地存儲(chǔ)或處理數(shù)據(jù)。但是，大量的數(shù)據(jù)可以用來解決人類難以通過簡單計(jì)算解決的業(yè)務(wù)問題。

數(shù)據(jù)科學(xué)是一個(gè)處理大量數(shù)據(jù)以獲取有意義的信息并做出商業(yè)決策的領(lǐng)域。數(shù)據(jù)科學(xué)融合了各種工具、算法和機(jī)器學(xué)習(xí)原理，目的是從原始數(shù)據(jù)中發(fā)現(xiàn)隱藏的模式。“數(shù)據(jù)科學(xué)”一詞誕生于2008年，當(dāng)時(shí)各公司意識(shí)到需要能夠熟練組織和分析大量數(shù)據(jù)的數(shù)據(jù)專業(yè)人員。

概念

大數(shù)據(jù)擁有從多個(gè)數(shù)據(jù)源生成的各種數(shù)據(jù)類型。因此，用傳統(tǒng)的數(shù)據(jù)分析方法很難實(shí)現(xiàn)大數(shù)據(jù)方法。相反，非結(jié)構(gòu)化數(shù)據(jù)需要專門的數(shù)據(jù)建模技術(shù)、工具和系統(tǒng)來提取組織所需的見解和信息。

數(shù)據(jù)科學(xué)是一個(gè)專門的領(lǐng)域，充滿了智能數(shù)據(jù)捕獲技術(shù)、數(shù)據(jù)清理、挖掘和編程，以準(zhǔn)備和調(diào)整大數(shù)據(jù)進(jìn)行智能分析，以提取見解和信息。數(shù)據(jù)科學(xué)是一個(gè)相對(duì)具有挑戰(zhàn)性的領(lǐng)域，因?yàn)樵诖罅繑?shù)據(jù)中，結(jié)合和應(yīng)用不同的方法、算法和復(fù)雜的編程技術(shù)來進(jìn)行智能分析是非常復(fù)雜的。

應(yīng)用

• 金融服務(wù)中的大數(shù)據(jù)：信用卡公司、零售銀行、私人財(cái)富管理咨詢、保險(xiǎn)表格、風(fēng)險(xiǎn)基金和機(jī)構(gòu)投資銀行等金融服務(wù)每天都收集大量數(shù)據(jù)。為了使數(shù)據(jù)更有價(jià)值，他們使用大數(shù)據(jù)來解決常見問題。不幸的是，這些數(shù)據(jù)是生活在多個(gè)不同系統(tǒng)中的多結(jié)構(gòu)數(shù)據(jù)，只有大數(shù)據(jù)才能管理。實(shí)體執(zhí)行客戶分析、合規(guī)分析、欺詐分析和運(yùn)營分析以緩解財(cái)務(wù)問題。

• 游戲中的大數(shù)據(jù)：在線資源是數(shù)據(jù)的大來源。特別是，游戲行業(yè)是大數(shù)據(jù)的巨大創(chuàng)造者。一個(gè)在線游戲的單幀需要100mb的數(shù)據(jù)來渲染。想想游戲行業(yè)每天都會(huì)產(chǎn)生多少數(shù)據(jù)。是的，它超越了數(shù)不清的范圍。

• 醫(yī)療保健領(lǐng)域的大數(shù)據(jù)：隨著醫(yī)療保健行業(yè)越來越受到重視，從事該行業(yè)的組織和高管們發(fā)現(xiàn)，技術(shù)是加速醫(yī)療流程的解決方案。醫(yī)院和醫(yī)療服務(wù)提供商存儲(chǔ)大數(shù)據(jù)，以分析和執(zhí)行諸如跟蹤和優(yōu)化患者流入、跟蹤設(shè)施中設(shè)備和藥物的使用、組織患者信息等任務(wù)。

• 推薦中的數(shù)據(jù)科學(xué)：推薦系統(tǒng)在現(xiàn)代世界越來越普遍。我們每天都會(huì)遇到推薦系統(tǒng)，發(fā)現(xiàn)它們非常棒。甚至在我們尋找更多內(nèi)容之前，在線推薦系統(tǒng)就建議我們可能喜歡什么。這是一種向消費(fèi)者推銷產(chǎn)品的營銷方法。許多公司已經(jīng)開始使用推薦系統(tǒng)來提高銷售額。

• 推薦中的數(shù)據(jù)科學(xué)：推薦系統(tǒng)在現(xiàn)代世界越來越普遍。我們每天都會(huì)遇到推薦系統(tǒng)，發(fā)現(xiàn)它們非常棒。甚至在我們尋找更多內(nèi)容之前，在線推薦系統(tǒng)就建議我們可能喜歡什么。這是一種向消費(fèi)者推銷產(chǎn)品的營銷方法。許多公司已經(jīng)開始使用推薦系統(tǒng)來提高銷售額。

• 廣告中的數(shù)據(jù)科學(xué)：數(shù)字廣告有著不同于傳統(tǒng)廣告的點(diǎn)擊率。因此，在正確的時(shí)間和地點(diǎn)發(fā)布正確的廣告在網(wǎng)絡(luò)廣告活動(dòng)中是非常重要的。數(shù)字營銷人員使用數(shù)據(jù)科學(xué)算法來展示橫幅和數(shù)字廣告牌，從而獲得最大的收視率。

• 互聯(lián)網(wǎng)搜索中的數(shù)據(jù)科學(xué)：由于互聯(lián)網(wǎng)是數(shù)字社會(huì)的先知，我們?cè)诰W(wǎng)上搜索一切。幸運(yùn)的是，我們大部分時(shí)間都得到了相關(guān)的內(nèi)容。數(shù)據(jù)科學(xué)正被應(yīng)用于在線搜索引擎，以使我們得到我們期望的結(jié)果。它遍歷我們以前的瀏覽歷史，并根據(jù)我們的常規(guī)搜索過濾結(jié)果。

工作職責(zé)

大數(shù)據(jù)工程師的核心職能與數(shù)據(jù)工程師類似。數(shù)據(jù)工程師應(yīng)該設(shè)計(jì)大數(shù)據(jù)平臺(tái)的架構(gòu)，維護(hù)數(shù)據(jù)管道，定制和管理集成工具、數(shù)據(jù)庫、倉庫和分析系統(tǒng)，管理和構(gòu)建數(shù)據(jù)，為數(shù)據(jù)科學(xué)家建立數(shù)據(jù)訪問工具。一些常見的大數(shù)據(jù)職業(yè)是，

• 大數(shù)據(jù)工程師
• 大數(shù)據(jù)分析師
• 數(shù)據(jù)可視化開發(fā)者
• 業(yè)務(wù)分析專家
• 機(jī)器學(xué)習(xí)科學(xué)家

數(shù)據(jù)科學(xué)家與業(yè)務(wù)主管密切合作，以了解他們的目標(biāo)，并確定如何使用數(shù)據(jù)來實(shí)現(xiàn)這些目標(biāo)。他們?cè)O(shè)計(jì)建模過程，創(chuàng)建算法和預(yù)測模型，以提取業(yè)務(wù)需要的數(shù)據(jù)，并幫助分析數(shù)據(jù)和與同行分享見解。一般來說，數(shù)據(jù)科學(xué)家有權(quán)提出正確的問題來開始發(fā)現(xiàn)過程、獲取數(shù)據(jù)、清理和存儲(chǔ)數(shù)據(jù)、探索數(shù)據(jù)分析、應(yīng)用數(shù)據(jù)科學(xué)技術(shù)等，以改進(jìn)業(yè)務(wù)功能。數(shù)據(jù)科學(xué)領(lǐng)域最常見的職業(yè)是，

• 數(shù)據(jù)科學(xué)家
• 數(shù)據(jù)分析師
• 數(shù)據(jù)架構(gòu)師
• 數(shù)據(jù)工程師
• 商業(yè)智能專家