成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Google Dremel vs. Apache Hadoop

云計算 Hadoop
Google Dremel是個可擴展的、交互式的即時查詢系統,專注于只讀嵌套(nested)數據的分析。通過集合不同層次的執行樹和柱狀的數據布局,他能夠在幾秒內完成在萬億張表上的聚合查詢。系統可以擴展到成千上萬的CPU上,滿足Google上萬用戶操作PB及的數據。

Naresh Kumar在介紹兩者之間的區別之前,首先針對Google Dremel進行簡單的描述:

什么是Google Dremel?

Google Dremel是個可擴展的、交互式的即時查詢系統,專注于只讀嵌套(nested)數據的分析。通過集合不同層次的執行樹和柱狀的數據布局,他能夠在幾秒內完成在萬億張表上的聚合查詢。系統可以擴展到成千上萬的CPU上,滿足Google上萬用戶操作PB及的數據。

Apache Hadoop vs Google Dremel:兩者之間的不同

Dremel是個數據分析工具,經專門設計用于完成大規模查詢結構化數據集(如日志和事件文件)。它支持類SQL語法,區別在于它是只讀的。不支持修改或者建立功能,也沒有表索引。數據被列式存儲,這樣有助于提升查詢的速度。Google的BigQuery就是Dremel通過RESTful API的一種實現。

Hadoop(MapReduce的一種開源實現)集合了“Hive”數據倉庫軟件,同樣允許使用SQL語句對大量的數據集進行數據分析。Hive本質上是把查詢轉換成MapReduce運算。對比使用ColumIO格式,Hive則是使用表索引的思想去優化查詢。

Hadoop更多的則是用于批處理,這就意味著數據是運行在你已經擁有的數據集上。有數據流入時,流引擎會進行處理。“流”和“實時”通常被互換使用,這也是導致Dremel和Drill混淆的原因,通常都會把它們歸類成延時。

值得注意的是Google只是打算將Dremel作為MapReduce的一種補充,而不是替換。通過論文也可以得知,Dremel被頻繁的用于分析MapReduce的結果或者是作為大規模計算的測試。Dremel可以做那些通常需要一系列MapReduce才可以完成的查詢,但是花費的時間只是使用MapReduce的一小部分。如前所述,Dremel從速度上完全超越MapReduce。

Google Dremel vs Apache Drill

Apache Drill更像是Google Drill的開原版本。OpenDremel,另一個創建Dremel開源版本的項目。當然還有一些其他支持大數據快速查詢的項目,比如:Apache CouchDB和Cloudant的演變版本BigCouch。

其他一些大數據分析工具和技術

1. Storm —— Backtype開發并被Twitter開源。

2. Apache S4 —— Yahoo!開源。

而流引擎就是這些實時大數據處理系統(比如Storm和S4)與Dremel的最大區別,當然Dremel是專門針對查詢設計。

責任編輯:王程程 來源: The Professionals Point
相關推薦

2020-04-15 10:21:43

云計算AWSAzure

2020-07-21 07:58:17

云計算AWSAzure

2012-08-27 10:04:20

Google Drem

2012-12-03 09:29:52

HadoopMapReduceHive

2021-01-13 16:04:07

網絡On-Prem托管

2012-12-04 10:54:21

Hadoop云服務微軟

2019-05-24 11:13:51

AWSAzureGoogle

2014-09-28 10:29:43

喬布斯施密特Android

2021-12-23 15:36:21

NASSANDAS

2023-05-22 19:49:30

命令Linux

2020-08-25 09:14:17

對象存儲文件存儲塊存儲

2024-09-12 22:45:47

2025-02-18 16:00:00

代碼Python架構

2019-04-02 15:07:51

API NginxZuul

2022-06-01 13:52:11

開源大數據

2022-01-26 10:26:57

ChromeBrave網頁瀏覽器

2022-01-25 19:36:46

ChromeBrave瀏覽器

2020-01-13 15:38:33

Hadoop代碼項目

2013-04-25 10:21:10

Facebook數據中心Google

2022-08-04 14:54:50

APTDNFYUM
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 亚洲国产精品久久久久秋霞不卡 | 日本a视频 | 在线免费观看视频你懂的 | 免费观看黄| 国产亚洲一区二区三区在线 | 国产精品福利网 | 日韩精品一区二 | 国产精品第2页 | 日产久久 | 国产a一区二区 | 亚洲理论在线观看电影 | 美女久久 | 国产精品区二区三区日本 | 成人免费黄色片 | 欧美一级视频免费看 | 天天摸天天干 | 成人妇女免费播放久久久 | 仙人掌旅馆在线观看 | 狠狠av | 在线三级电影 | 久久久久中文字幕 | 免费毛片网 | 91精品久久久久久久久 | 天堂av在线影院 | 91精品国产91久久久久久不卞 | 日本手机看片 | 国产精品不卡视频 | 91影院| 日本成人福利 | 国产国产精品 | 亚洲综合在线播放 | 久久久久久久久蜜桃 | 五月天激情综合网 | 五月激情综合 | 一区二区三区精品 | 国产欧美日韩一区 | 盗摄精品av一区二区三区 | 大象视频一区二区 | 青青草网站在线观看 | 亚洲精品一二区 | 欧美a√|