成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

如何判斷面向GPU的數據庫是否適合你的大數據項目?

譯文
大數據
GPU承諾會徹底改變大數據分析領域,但是它并不是適合每種應用的最佳選擇。

GPU承諾會徹底改變大數據分析領域,但是它并不是適合每種應用的***選擇。

[[169531]]

Hadoop很酷,Spark很快,但有時候你需要經過優化的硬件,處理越來越龐大的數據工作負載。這正是Kinetica基于的前提,這種內存中數據庫充分發揮了大規模分布式圖形處理單元(GPU)的強大功能:有望將實時分析性能提升100倍至1000倍。

考慮到如今可用的一堆大數據分析方案,這種承諾讓人有點犯暈。但它有點樂觀了,因為GPU非常擅長處理依賴高度并行化矩陣數學的工作負載,但是未必適合一系列更廣泛的大數據應用。

至少現在是這樣。

GPU在大數據領域的崛起

Kinetica(前身是GPUdb)問世已有好幾個年頭了,由于它可以在大規模部署環境取代甲骨文及其他行業巨頭,因而屢獲獎項。首先,美國政府使用跟蹤恐怖分子的數據庫來跟蹤和擊斃恐怖分子。***,美國郵政服務部門部署了Kinetica,以減少欺詐、簡化運營。

取得了什么樣的效果?不妨考慮這一點:2015年投遞了1500多億封郵件,行駛里程卻減少了7000萬英里,因而省下了700萬加侖燃油。在這一切的同時,從213000多個掃描設備獲取數據,美國各地的郵局和處理中心有15000多個并發用戶,另外結合了地理空間數據來預測實時事件。順便說一下,相比美國郵政服務部門一直使用的關系數據庫,這將性能提升了200倍。

雖然看似不一樣,但這種工作負載恰恰發揮了GPU的長處,正如MapD公司的創始人兼***執行官托德·莫斯塔科(Todd Mostak)所寫:“GPU擅長處理需要大量數學密集型運算的任務,比如視覺模擬、超快數據庫事務、計算視覺和機器學習等任務。”

搞清楚GPU適合的地方

如此說來,關鍵在于搞清楚將面向GPU的數據庫運用在何處,因為它們并不同樣適用于所有大數據應用。

正如內存數據庫公司MemSQL的***技術官兼聯合創始人尼基塔·沙姆古諾夫(Nikita Shamgunov)告訴我:“毫無疑問,GPU為某些工作負載提供了優勢,尤其是深度學習之類的應用。GPU之所以非常適合深度學習,是因為問題可以分解成許多小的操作單位,每一個小小的操作單位可以同時在大批核心上加以執行。”

除此之外,VMware的高級工程主管賈里德·羅索夫(Jared Rosoff)告知我:“單單一個GPU就有上千個針對矩陣數學運算經過優化的核心。深度學習涉及大量的超并行化矩陣數學。”如此一來,“像計算機圖形這種深度學習依賴非常適合GPU的大量并行化矩陣數學”,也就不足為奇了。

然而,除了深度學習和數據可視化之類的應用外,久經考驗的面向CPU的數據庫常常是更好的選擇,沙姆古諾夫繼續說:

就深度學習之外的領域而言,關于使用GPU相比CPU的總體成本/效益仍存在著爭論。英特爾等公司在以低成本封裝CPU能力方面非常高效。而圍繞CPU的行業基礎設施仍讓GPU方面的任何相似基礎設施相形見絀。

換句話說,利用CPU往往成本更低,生產力開銷極小,而且行業對CPU的支持力度要大得多。另外,大數據的一些方面完全更適合CPU。

沙姆古諾夫說:“比如說,數據處理查詢的其他方面以join和shuffle等操作為主,比如跨集群根據不同的鍵對數據重新分區。這些操作在CPU上來得極其高效。”

羅索夫也對此發表了意見,表示“大多數軟件無法充分利用這種程度的并行化,也無法用GPU有限的指令集來處理”,因而讓它成為非常適合深度學習這類應用的理想解決方案,但是不太適合其他工作負載。

當然,隨著時間的推移,我們可能會看到企業結合這兩種方法,將GPU用在它擅長的地方,將CPU用在其余每個地方。隨著GPU變得更普遍,數據庫也可能會開始加大支持GPU的力度。

責任編輯:趙立京 來源: 51CTO
相關推薦

2016-08-09 14:43:45

移動·開發技術周刊

2015-03-17 16:02:16

大數據混合云云模型

2018-04-02 10:58:28

大數據sqoop大數據項目

2018-04-11 09:50:04

大數據

2013-12-06 10:20:21

2013-04-22 10:00:53

云計算大數據

2018-04-15 21:39:04

大數據項目應用

2019-05-23 09:50:46

大數據IT人工智能

2022-06-30 21:08:25

大數據數據湖數據倉庫

2023-05-10 16:04:38

大數據架構

2021-09-09 09:28:08

面向列數據庫面向行

2016-05-18 11:47:35

Apache大數據項目開源

2014-08-15 09:09:32

大數據

2021-03-14 15:05:22

大數據程序員游戲

2016-01-26 10:02:18

GitHub大數據開源

2016-12-13 19:40:00

大數據

2017-01-20 09:08:28

大數據路線應用

2016-03-21 18:56:54

物聯網IoTIT基礎架構

2014-12-10 10:51:54

OpenStackSahara云計算

2013-11-08 13:52:56

點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产 欧美 日韩 一区 | 激情福利视频 | 一区二区三区不卡视频 | 欧美日韩在线一区二区三区 | 国产黄色小视频在线观看 | 日韩视频在线观看一区二区 | 日韩av大片免费看 | 欧美专区在线 | 91精品久久久久久久久久 | 女人av | 亚洲一区视频在线 | av在线播放不卡 | 久草视 | 国产精品明星裸体写真集 | 日本淫视频 | 在线观看国产视频 | 永久免费视频 | 97久久精品午夜一区二区 | 亚洲 中文 欧美 日韩 在线观看 | 国产成人jvid在线播放 | 毛色毛片免费看 | 中文字幕二区三区 | 伊人精品 | 激情91 | 亚洲一区二区av | 亚洲综合色视频在线观看 | 羞羞视频网站在线观看 | 国产精品成人一区 | 99精品欧美一区二区三区 | 欧美在线高清 | 一区精品在线观看 | 久久精品免费观看 | 国产精品视频中文字幕 | 久久国产精品视频 | 91久久精品一区二区三区 | 97人澡人人添人人爽欧美 | 亚洲成人一区二区 | 黄色日批视频 | 求个av网址 | 久久精品免费一区二区三 | 久久免费国产 |