成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Hadoop生態系統全面盤點

譯文
大數據 Hadoop
Hadoop擁有一個龐大而且充滿活力的開發者社區,但Hadoop生態系統當中的很多項目在名稱與功能的匹配性方面出入很大,這直接導致很多朋友難以分清各個項目的作用以及使用目的。

 

Hadoop擁有一個龐大而且充滿活力的開發者社區,但Hadoop生態系統當中的很多項目在名稱與功能的匹配性方面出入很大,這直接導致很多朋友難以分清各個項目的作用以及使用目的。

作為Hadoop的構建核心,HDFS與MapReduce是無法回避的兩大要素。不過開發者及企業做出的大量貢獻讓Hadoop成為一套更為復雜的平臺。生態系統中的一部分項目屬于Apache基金會項目(在下圖中以‘A’作為標注),另一些則屬于具備Apache許可、但卻由企業負責運作(在下圖中以‘AL’作為標注)的項目。

在今天的文章中,我們將對Hadoop的發展歷程做一番回顧,看看如今其陣容之中包含著哪些“猛將”。

  

能做什么: 作為Hadoop的文件系統或者存儲機制。

有何幫助: 創建一套重復性、可容錯且可擴展的文件系統,旨在處理大型文件。利用數據位置提高MapReduce任務的數據輸入性能。

 

能做什么: 一款高度可擴展的數據庫。

有何幫助: 允許我們以線性方式對數據庫進行擴展。提供可進行調節的數據一致性級別控制。

 

能做什么: 利用HDFS創建高度可擴展性數據庫。

有何幫助: 實現高度可擴展特性與隨機訪問。利用HDFS保障嚴格的數據一致性。

 

能做什么:幫助分布式節點之間的數據實現同步 。

有何幫助: 對集群中所有節點之間的一致性分布式小規模數據進行維護。

#p#

 

能做什么: 將一項工作拆分為多個任務并同時加以實施。

有何幫助: 框架會對分布式系統當中的疑難組件進行抽象化處理,允許系統同時處理大量數據。

 

能做什么: 允許用戶通過查詢語言來處理數據。

有何幫助: 幫助SQL程序員通過創建類SQL查詢以使用MapReduce。

 

能做什么: 在大規模數據當中實現低延遲查詢。

有何幫助: 幫助SQL程序員通過創建類SQL查詢以提高大數據訪問速度。

 

能做什么: 利用數據流或者腳本類語言進行數據處理。

有何幫助: 幫助程序員利用數據流語言發揮MapReduce功能。

能做什么: 利用預先編寫的庫在MapReduce中運行機器學習算法。

有何幫助: 允許用戶通過庫創建MapReduce建議與集群。利用現有代碼加快開發速度。

 

能做什么: 利用預先編寫的庫在MapReduce中運行圖形算法。

有何幫助: 用戶不必再為了使用MapReduce而重新編寫圖形算法。利用現有代碼加快開發速度。

 

能做什么: 運行測試以驗證MapReduce工作功能的正確性。

有何幫助: 運行程序測試以驗證MapReduce程序運作的正確性。提供對象,允許用戶模擬輸入流程以驗證執行結果。

#p#

 

能做什么: 提供簡便方式以實現MapReduce工作數據的輸入與輸出。

有何幫助: 創建域對象以存儲數據。簡化MapReduce工作數據的序列化與反序列化。

 

能做什么: 在關系型數據庫與Hadoop之間實現數據移動。

有何幫助:允許數據從關系型數據庫轉移到Hadoop當中,以備后期處理。將數據輸出結果從MapReduce工作中提取出來并移回關系型數據庫。

 

能做什么: 以可擴展方式處理大量日志數據。

有何幫助: 將大量日志數據轉移到HDFS當中。由于Flume擁有的擴展性,因此能夠處理大量傳入數據。

 

能做什么: 允許用戶通過網絡瀏覽器與Hadoop集群進行交互。

有何幫助: 用戶能夠更輕松地與Hadoop集群實現交互。細化權限設定幫助管理員對用戶進行配置。

 

能做什么: Hadoop中的復雜工作流的創建任務更加便捷。

有何幫助: 允許用戶利用Hive、pig以及MapReduce等其它項目創建復雜工作流。內置邏輯允許用戶按預定步驟處理故障。

英文原文:http://www.networkworld.com/slideshow/124977/sizing-up-the-hadoop-ecosystem.html#slide1

責任編輯:林師授 來源: 51CTO
相關推薦

2011-12-09 11:02:52

NoSQL

2022-01-06 18:21:00

Hadoop生態系統

2013-08-05 11:31:16

Linux

2013-05-27 10:01:33

HadoopHadoop系統

2015-10-20 12:17:48

思科/云計算

2011-05-19 15:15:39

Oracle生態系統

2010-05-12 11:16:00

SAP

2024-01-15 00:07:08

JS生態系統

2019-01-13 15:00:52

區塊鏈生態系統

2022-02-25 11:09:16

區塊鏈技術生態系統

2017-08-02 13:08:30

物聯網生態系統邊緣計算

2021-11-23 20:54:34

AI 生態系統

2009-12-25 14:49:55

2023-10-11 15:11:08

智能建筑人工智能

2015-04-01 11:23:23

2015-06-08 12:44:58

大數據InterlAMPCamp

2010-06-03 18:59:59

未來網絡MX 3D路由器Juniper

2020-06-02 21:02:48

物聯網硬件威脅物聯網安全

2024-07-12 15:19:36

2018-04-25 16:20:01

邊緣計算原生云邊緣平臺
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产欧美日韩综合精品一区二区 | 亚洲一区二区三区视频 | 在线视频亚洲 | 国产成人在线一区二区 | 欧美日韩成人在线 | www.日本三级 | 国产精品美女 | 午夜在线视频 | 99在线资源 | 国产二区视频 | 免费a大片 | 青青草一区 | 亚洲成人精 | 久久综合激情 | 成人高清网站 | 日韩一区在线视频 | 久久精品视频99 | 日本三级线观看 视频 | 久久久久久综合 | 国产日韩精品一区二区三区 | 97精品视频在线 | 亚洲精品一区二区三区蜜桃久 | 欧美视频xxx| 亚洲国产一区二区三区在线观看 | 欧美成人免费在线视频 | 99精品久久99久久久久 | 中文在线视频 | 久久精品一 | 国产午夜亚洲精品不卡 | 国产一区中文字幕 | 中文字幕精品一区二区三区精品 | 久久99精品视频 | 精品一区二区三区四区五区 | 91精品久久久久久久久久入口 | 日韩高清国产一区在线 | 免费日本视频 | 免费中文字幕日韩欧美 | 亚洲韩国精品 | 日日噜噜噜夜夜爽爽狠狠视频97 | 一区二区三区日 | 91视频.com |