資料介紹
針對(duì)官方的Hadoop軟件中提供的節(jié)點(diǎn)心跳超時(shí)容錯(cuò)機(jī)制對(duì)短作業(yè)并不合理,而且忽略了異構(gòu)集群中各節(jié)點(diǎn)超期時(shí)間設(shè)置的公平性的問題,提出了公平心跳超時(shí)容錯(cuò)機(jī)制。首先根據(jù)每個(gè)節(jié)點(diǎn)的可靠性及計(jì)算性能構(gòu)建節(jié)點(diǎn)故障誤判損失模型,提出公平誤判損失(FMJL)算法,使其同時(shí)滿足長(zhǎng)作業(yè)和短作業(yè)要求;接著,設(shè)計(jì)并實(shí)現(xiàn)了基于FMJL算法的公平超時(shí)機(jī)制。在實(shí)現(xiàn)了公平超時(shí)機(jī)制的Hadoop上運(yùn)行大約345 s的短作業(yè)時(shí),當(dāng)出現(xiàn)TaskTracker節(jié)點(diǎn)故障時(shí)作業(yè)完成時(shí)間平均大約節(jié)省了44%,與自適應(yīng)超時(shí)機(jī)制相比,作業(yè)完成時(shí)間大約節(jié)省了23%。實(shí)驗(yàn)結(jié)果表明,公平超時(shí)機(jī)制在保證不影響長(zhǎng)作業(yè)完成時(shí)間的情況下縮短了短作業(yè)的容錯(cuò)處理時(shí)間,提高了Hadoop的實(shí)時(shí)處理效率。
- 基于注意力機(jī)制的新聞文本分類模型 30次下載
- 基于FPGA塊存儲(chǔ)器的多位反轉(zhuǎn)容錯(cuò) 19次下載
- 下行非正交多址接入系統(tǒng)的公平資源分配算法 4次下載
- 電機(jī)制動(dòng)器拆卸安裝教程課件下載 3次下載
- 一種分層共識(shí)優(yōu)化機(jī)制TDH-PBFT 10次下載
- 主動(dòng)容錯(cuò)技術(shù)如何提高存儲(chǔ)系統(tǒng)的可靠性詳細(xì)算法模型資料說明 9次下載
- 基于虛擬化的仿真系統(tǒng)容錯(cuò)方法 0次下載
- 多路徑纏繞模型及其容錯(cuò)路由機(jī)制 0次下載
- TCP的超時(shí)與重傳的全面解說 7次下載
- 基于WindowsSocket的網(wǎng)絡(luò)通信中的心跳機(jī)制原理及其實(shí)現(xiàn) 6次下載
- 基于心跳消息的VANET安全應(yīng)用性能分析 26次下載
- 基于模糊流感知的動(dòng)態(tài)優(yōu)先公平調(diào)度算法
- 一種基于星型結(jié)構(gòu)的移動(dòng)代理的容錯(cuò)模型
- 嵌入式系統(tǒng)的超時(shí)控制及其應(yīng)用
- 基于ARP緩存超時(shí)的中間人攻擊檢測(cè)方法
- Feign的超時(shí)時(shí)間如何設(shè)置呢? 1270次閱讀
- IC設(shè)計(jì):一種簡(jiǎn)單超時(shí)機(jī)制 488次閱讀
- LED單色屏發(fā)送超時(shí)的原因分析 3933次閱讀
- 影響報(bào)文超時(shí)上報(bào)的機(jī)制有哪些 1729次閱讀
- STM32程序超時(shí)設(shè)計(jì) 1202次閱讀
- 超時(shí)邏輯在OpenHarmony中的實(shí)現(xiàn) 880次閱讀
- 基于有限狀態(tài)機(jī)的FlexRay時(shí)鐘同步機(jī)制 3602次閱讀
- 基于容量證明的共識(shí)機(jī)制PoC介紹 2219次閱讀
- 如何注冊(cè)SERO Staking機(jī)制 1083次閱讀
- 如何使算法公平?如何定義“公平”? 4415次閱讀
- 關(guān)于一種面向異步FIFO的低開銷容錯(cuò)機(jī)制研究 3210次閱讀
- 一文讀懂雙機(jī)熱備份和單機(jī)容錯(cuò)的區(qū)別 4919次閱讀
- 一文讀懂容錯(cuò)與冗余技術(shù) 1.9w次閱讀
- 基于AD620芯片的心跳速率檢測(cè) 1w次閱讀
- 一文讀懂如何解決MySQL數(shù)據(jù)庫(kù)超時(shí)配置問題 6607次閱讀
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費(fèi)
- 2AN158 GD32VW553 Wi-Fi開發(fā)指南
- 1.51MB | 2次下載 | 免費(fèi)
- 3AN148 GD32VW553射頻硬件開發(fā)指南
- 2.07MB | 1次下載 | 免費(fèi)
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費(fèi)
- 5AN153-用于電源系統(tǒng)管理的Linduino
- 1.38MB | 次下載 | 免費(fèi)
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費(fèi)
- 7SM2018E 支持可控硅調(diào)光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費(fèi)
- 8AN-1308: 電流檢測(cè)放大器共模階躍響應(yīng)
- 545.42KB | 次下載 | 免費(fèi)
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費(fèi)
- 2免費(fèi)開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機(jī)智能手環(huán)心率計(jì)步器體溫顯示設(shè)計(jì)
- 0.10 MB | 130次下載 | 免費(fèi)
- 4使用單片機(jī)實(shí)現(xiàn)七人表決器的程序和仿真資料免費(fèi)下載
- 2.96 MB | 44次下載 | 免費(fèi)
- 53314A函數(shù)發(fā)生器維修手冊(cè)
- 16.30 MB | 31次下載 | 免費(fèi)
- 6美的電磁爐維修手冊(cè)大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測(cè)試電源的紋波
- 0.36 MB | 17次下載 | 免費(fèi)
- 8感應(yīng)筆電路圖
- 0.06 MB | 10次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191367次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評(píng)論