資料介紹
針對官方的Hadoop軟件中提供的節點心跳超時容錯機制對短作業并不合理,而且忽略了異構集群中各節點超期時間設置的公平性的問題,提出了公平心跳超時容錯機制。首先根據每個節點的可靠性及計算性能構建節點故障誤判損失模型,提出公平誤判損失(FMJL)算法,使其同時滿足長作業和短作業要求;接著,設計并實現了基于FMJL算法的公平超時機制。在實現了公平超時機制的Hadoop上運行大約345 s的短作業時,當出現TaskTracker節點故障時作業完成時間平均大約節省了44%,與自適應超時機制相比,作業完成時間大約節省了23%。實驗結果表明,公平超時機制在保證不影響長作業完成時間的情況下縮短了短作業的容錯處理時間,提高了Hadoop的實時處理效率。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
- 基于FPGA块存储器的多位反转容错19次下载
- 下行非正交多址接入系统的公平资源分配算法4次下载
- 基于演化博弈的数据收益权分配机制综述10次下载
- 电机制动器拆卸安装教程课件下载3次下载
- 一种分层共识优化机制TDH-PBFT10次下载
- 主动容错技术如何提高存储系统的可靠性详细算法模型资料说明9次下载
- 基于虚拟化的仿真系统容错方法0次下载
- 多路径缠绕模型及其容错路由机制0次下载
- TCP的超时与重传的全面解说7次下载
- 基于WindowsSocket的网络通信中的心跳机制原理及其实现6次下载
- 基于心跳消息的VANET安全应用性能分析26次下载
- 基于模糊流感知的动态优先公平调度算法12次下载
- 一种基于星型结构的移动代理的容错模型19次下载
- 嵌入式系统的超时控制及其应用16次下载
- 基于ARP缓存超时的中间人攻击检测方法17次下载
- 该如何提高代码容错率、降低代码耦合度?1123次阅读
- Feign的超时时间如何设置呢?1547次阅读
- IC设计:一种简单超时机制677次阅读
- LED单色屏发送超时的原因分析4899次阅读
- 影响报文超时上报的机制有哪些2202次阅读
- STM32程序超时设计1522次阅读
- 超时逻辑在OpenHarmony中的实现1028次阅读
- 基于容量证明的共识机制PoC介绍2389次阅读
- 如何注册SERO Staking机制1202次阅读
- 如何使算法公平?如何定义“公平”?4678次阅读
- 关于一种面向异步FIFO的低开销容错机制研究3463次阅读
- 一文读懂双机热备份和单机容错的区别5067次阅读
- 一文读懂容错与冗余技术20097次阅读
- 基于AD620芯片的心跳速率检测10770次阅读
- 一文读懂如何解决MySQL数据库超时配置问题6821次阅读
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費
- 2AN158 GD32VW553 Wi-Fi開發指南
- 1.51MB | 2次下載 | 免費
- 3AN148 GD32VW553射頻硬件開發指南
- 2.07MB | 1次下載 | 免費
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費
- 5AN153-用于電源系統管理的Linduino
- 1.38MB | 次下載 | 免費
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費
- 7SM2018E 支持可控硅調光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費
- 8AN-1308: 電流檢測放大器共模階躍響應
- 545.42KB | 次下載 | 免費
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費
- 2免費開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機智能手環心率計步器體溫顯示設計
- 0.10 MB | 130次下載 | 免費
- 4使用單片機實現七人表決器的程序和仿真資料免費下載
- 2.96 MB | 44次下載 | 免費
- 53314A函數發生器維修手冊
- 16.30 MB | 31次下載 | 免費
- 6美的電磁爐維修手冊大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測試電源的紋波
- 0.36 MB | 17次下載 | 免費
- 8感應筆電路圖
- 0.06 MB | 10次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論