如何通過YARN設(shè)計(jì)分布式資源動(dòng)態(tài)調(diào)度協(xié)同分配系統(tǒng)
資料介紹
Storm on yarn是目前主流的分布式資源調(diào)度框架,但其存在需要人工干預(yù)和無法根據(jù)資源可用性實(shí)時(shí)調(diào)整系統(tǒng)資源的不足。根據(jù)流數(shù)據(jù)處理的實(shí)時(shí)延遲計(jì)算系統(tǒng)負(fù)載情況,在 Storm平臺(tái)上基于YARN設(shè)計(jì)分布式資源調(diào)度和協(xié)同分配系統(tǒng)。建立包含系統(tǒng)層和任務(wù)層的雙層調(diào)度模型,系統(tǒng)層通過對(duì)流數(shù)據(jù)處理負(fù)載的實(shí)時(shí)監(jiān)測進(jìn)行資源分配預(yù)測,任務(wù)層利用 Zookeeper和YARN對(duì)集群資源的高效管理能力進(jìn)行動(dòng)態(tài)資源管理。實(shí)驗(yàn)結(jié)果表明,該系統(tǒng)可以實(shí)時(shí)調(diào)整集群資源分布,有效減小系統(tǒng)延遲。
- 一種分布式認(rèn)知無線電網(wǎng)絡(luò)資源分配算法 11次下載
- 電力物聯(lián)網(wǎng)下分布式的源網(wǎng)荷儲(chǔ)協(xié)同調(diào)度機(jī)制 14次下載
- 基于分布式數(shù)據(jù)Cache的實(shí)時(shí)動(dòng)態(tài)遷移機(jī)制 20次下載
- 一種可行的分布式存儲(chǔ)系統(tǒng)安全構(gòu)造方法 21次下載
- 一種分布式網(wǎng)絡(luò)掃描架構(gòu)和任務(wù)調(diào)度算法 19次下載
- 分布式智能電網(wǎng)控制系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn) 2次下載
- 電力系統(tǒng)分布式經(jīng)濟(jì)調(diào)度 10次下載
- 分布式云管理協(xié)同平臺(tái)研究 6次下載
- 分布式系統(tǒng)進(jìn)程調(diào)度方法研究
- 基于分布式數(shù)據(jù)庫系統(tǒng)的數(shù)據(jù)分配模型研究
- 分布式系統(tǒng)動(dòng)態(tài)負(fù)載分配算法研究
- 分布式Alamouti空時(shí)碼的信道容量及最優(yōu)資源分配方案
- 分布式并行BOD系統(tǒng)資源管理算法研究
- 基于Multi-Agent的分布式測控系統(tǒng)任務(wù)調(diào)度算法
- 基于OFDMA資源調(diào)度分配算法的研究
- 一種完全分布式的點(diǎn)線協(xié)同視覺慣性導(dǎo)航系統(tǒng) 468次閱讀
- Java手寫分布式鎖的實(shí)現(xiàn) 612次閱讀
- tldb提供分布式鎖使用方法 923次閱讀
- 深入理解redis分布式鎖 988次閱讀
- 如何使用分布式存儲(chǔ)系統(tǒng)促進(jìn)AI模型訓(xùn)練 608次閱讀
- 利用NI VeriStand 2010實(shí)現(xiàn)分布式同步系統(tǒng)的設(shè)計(jì) 3436次閱讀
- 分布式系統(tǒng)的特征和優(yōu)缺點(diǎn) 1.7w次閱讀
- PCB上的電源分配系統(tǒng)到底是什么 6059次閱讀
- 基于Jini互聯(lián)技術(shù)實(shí)現(xiàn)分布式嵌入式系統(tǒng)的設(shè)計(jì) 3200次閱讀
- 詳談分布式系統(tǒng)的定義及屬性 3896次閱讀
- 基于TMS320F2812 DSP實(shí)現(xiàn)三協(xié)同分布式控制系統(tǒng)的設(shè)計(jì) 1145次閱讀
- 基于多智能體一致性算法分布式協(xié)同的能源互聯(lián)網(wǎng)控制 7499次閱讀
- 存儲(chǔ)分布式系統(tǒng)中如何從CAP轉(zhuǎn)到PACELC 2779次閱讀
- 深度解讀分布式存儲(chǔ)技術(shù)之分布式剪枝系統(tǒng) 1860次閱讀
- 基于CAN總線的分布式網(wǎng)架健康狀態(tài)監(jiān)測系統(tǒng)的設(shè)計(jì) 1027次閱讀
下載排行
本周
- 1TC358743XBG評(píng)估板參考手冊(cè)
- 1.36 MB | 330次下載 | 免費(fèi)
- 2開關(guān)電源基礎(chǔ)知識(shí)
- 5.73 MB | 6次下載 | 免費(fèi)
- 3100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 4嵌入式linux-聊天程序設(shè)計(jì)
- 0.60 MB | 3次下載 | 免費(fèi)
- 5基于FPGA的光纖通信系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)
- 0.61 MB | 2次下載 | 免費(fèi)
- 6基于FPGA的C8051F單片機(jī)開發(fā)板設(shè)計(jì)
- 0.70 MB | 2次下載 | 免費(fèi)
- 751單片機(jī)窗簾控制器仿真程序
- 1.93 MB | 2次下載 | 免費(fèi)
- 8基于51單片機(jī)的RGB調(diào)色燈程序仿真
- 0.86 MB | 2次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費(fèi)
- 2555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33564次下載 | 免費(fèi)
- 3接口電路圖大全
- 未知 | 30323次下載 | 免費(fèi)
- 4開關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21548次下載 | 免費(fèi)
- 5電氣工程師手冊(cè)免費(fèi)下載(新編第二版pdf電子書)
- 0.00 MB | 15349次下載 | 免費(fèi)
- 6數(shù)字電路基礎(chǔ)pdf(下載)
- 未知 | 13750次下載 | 免費(fèi)
- 7電子制作實(shí)例集錦 下載
- 未知 | 8113次下載 | 免費(fèi)
- 8《LED驅(qū)動(dòng)電路設(shè)計(jì)》 溫德爾著
- 0.00 MB | 6653次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935054次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537796次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191185次下載 | 免費(fèi)
- 7十天學(xué)會(huì)AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183278次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138040次下載 | 免費(fèi)
評(píng)論
查看更多