成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Standalone是什么?Standalone集群的三類進程

大數據
Standalone模式是Spark自帶的一種集群模式,不同于前面本地模式啟動多個進程來模擬集群的環境,Standalone模式是真實地在多個機器之間搭建Spark集群的環境,完全可以利用該模式搭建多機器集群,用于實際的大數據處理。

Standalone是什么

Standalone模式是Spark自帶的一種集群模式,不同于前面本地模式啟動多個進程來模擬集群的環境,Standalone模式是真實地在多個機器之間搭建Spark集群的環境,完全可以利用該模式搭建多機器集群,用于實際的大數據處理。

StandAlone 是完整的Spark運行環境,其中: Master角色以Master進程存在, Worker角色以Worker進程存在 Driver和Executor運行于Worker進程內, 由Worker提供資源供給它們運行。

StandAlone集群在進程上主要有3類進程:

(1)主節點Master進程:

Master角色, 管理整個集群資源,并托管運行各個任務的Driver

(2)從節點Workers:

Worker角色, 管理每個機器的資源,分配對應的資源來運行Executor(Task); 每個從節點分配資源信息給Worker管理,資源信息包含內存Memory和CPU Cores核數。

(3)歷史服務器HistoryServer(可選):

Spark Application運行完成以后,保存事件日志數據至HDFS,啟動HistoryServer可以查看應用運行相關信息。Spark的歷史服務器, 功能: 將Spark運行的程序的歷史日志記錄下來, 通過歷史服務器方便用戶查看程序運行的歷史信息。

責任編輯:華軒 來源: 今日頭條
相關推薦

2014-04-16 14:04:34

SparkStandalone

2010-07-30 16:06:41

2010-07-19 13:49:52

autoTelnet

2010-09-26 16:10:03

數據加密產品

2010-06-12 16:41:59

網絡核心協議

2021-09-01 15:48:50

API漏洞應用程序安全

2014-12-29 10:25:34

MEFNFVSDN

2021-11-29 10:41:09

分布式抽象接口

2018-04-24 09:00:00

開發自動化軟件架構

2012-03-26 10:10:56

云計算

2010-09-28 15:33:18

DHCP服務器應用

2010-09-25 15:54:23

SQL存儲過程

2018-07-05 22:43:24

2010-07-16 10:58:21

云計算

2020-09-22 18:01:22

SparkStandalone運行

2016-09-13 14:05:24

Spark集群管理模式

2010-09-09 11:25:09

2014-06-10 10:20:42

2015-09-29 09:53:07

數據中心數據

2009-06-10 15:49:25

就業IT培訓偏門
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 免费日韩av| 国产婷婷精品 | 中文字幕国产精品 | 一区在线观看 | 久久婷婷国产麻豆91 | 中文字幕av高清 | 成人av在线大片 | 一区二区三区在线观看免费视频 | 国产情侣激情 | 黄色大片观看 | 久久精品日产第一区二区三区 | 日日干夜夜操 | 亚洲区一区二区 | 91精品国产日韩91久久久久久 | 久久久免费电影 | 国产一区在线免费观看视频 | 国产精品欧美精品日韩精品 | 国产乱码久久久久久 | 免费一区二区在线观看 | 91不卡在线 | 欧美日韩不卡在线 | 国产成人小视频 | 国产精品久久久久久久久久久免费看 | 亚洲高清网 | 精品国产一区久久 | 久久成人一区二区三区 | 久久久久久久久久久久91 | 亚洲精品视频一区二区三区 | аⅴ资源新版在线天堂 | 久久久久国产精品一区 | 自拍第一页 | 毛片区 | 一区二区三区在线播放 | 亚洲午夜视频 | 国产一级片一区二区 | a级毛片免费高清视频 | 亚洲精品1区 | 国产日韩91 | 日韩亚洲一区二区 | 激情a| 成人午夜免费视频 |