電子發(fā)燒友App
創(chuàng)作
發(fā)文章
發(fā)帖 
提問 
發(fā)資料
發(fā)視頻資料介紹
近年來，隨著網絡和云計算技術的飛速發(fā)展，網絡數據以幾何級數的方式迅速增長。數據的爆炸性增長對存儲系統(tǒng)的容量、可擴展性以及I/O性能等方面提出了越來越高的要求。如今雖然計算、傳輸和存儲三大IT基礎設施都得到了飛速的發(fā)展，但是相對于計算和傳輸而言，存儲技術相對發(fā)展緩慢。分布式文件系統(tǒng)是指網絡中的多個存儲節(jié)點通過網絡組織起來，并通過網絡來完成各存儲節(jié)點的通信和控制的文件系統(tǒng)。由于其能有效解決分布式存儲系統(tǒng)的海量數據存儲和I/O瓶頸問題，在容量和可擴展性等方面有很大優(yōu)勢，越來越受到企業(yè)界、學術界的青睞。
針對Hadoop分布式文件系統(tǒng)（HDFS）的寫性能在執(zhí)行效率上的不足，提出一種在節(jié)點性能異構環(huán)境中對HDFS數據塊進行并發(fā)傳輸的調度算法。該算法實時監(jiān)控HDFS集群中每個節(jié)點的資源狀態(tài)和內存緩存隊列，動態(tài)地將接收節(jié)點與轉發(fā)節(jié)點進行配對傳輸，使全系統(tǒng)節(jié)點的網卡和磁盤并發(fā)工作，縮短了所有副本寫入分布式文件系統(tǒng)的時間。將數據寫入磁盤后請求下一個數據塊，保證數據安全性，同時也使得各個節(jié)點獲得與自身性能相匹配的副本數，使性能異構的系統(tǒng)能達到較高的寫入速度。性能測試結果表明，使用該算法的分布式文件系統(tǒng)的寫入性能較原始的HDFS提高了l倍。
?
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 異構環(huán)境下的多DAG任務調度算法綜述 13次下載
- 基于SVC與多網絡接口的視頻塊聯(lián)合調度算法 4次下載
- 異構云環(huán)境中二級實時密碼服務調度策略 9次下載
- 申威.太湖之光深度學習庫中的并行卷積算法 1次下載
- 帶傳輸時限的跨數據中心數據傳輸調度算法 11次下載
- 基于異構云計算的工作預算等級調度算法 15次下載
- 擬態(tài)通用運行環(huán)境的資源管理調度及框架 6次下載
- 一種自適應多路傳輸數據調度算法GMM-S 5次下載
- 如何在實現(xiàn)工業(yè)物聯(lián)網應用中實現(xiàn)多時隙幀調度算法 4次下載
- DS1302的時鐘電路并行傳輸顯示方式程序和工程文件免費下載 12次下載
- 異構系統(tǒng)多副本容錯調度算法 0次下載
- 基于MIMO異構Ad Hoc網絡節(jié)點調度優(yōu)化算法 0次下載
- 云計算環(huán)境中任務調度應用 3次下載
- 數據網格環(huán)境中傳輸性能的改進 17次下載
- 網格環(huán)境中多連接傳輸機制研究
- wdm主要應用在傳輸網絡的什么層 286次閱讀
- FreeRTOS任務調度器的三種調度算法講解（下） 1794次閱讀
- 塊調用環(huán)境對話框操作 522次閱讀
- 調度算法評測與仿真系統(tǒng) 調度算法仿真系統(tǒng)介紹 1710次閱讀
- 多種處理器調度過程及調度算法 1230次閱讀
- SD卡的三種傳輸模式及功能解析 2w次閱讀
- 如何使用CRC算法檢查數據傳輸的正確性 8699次閱讀
- 什么是串行總線和并行總線區(qū)別是什么 3w次閱讀
- DMA數據傳輸（源代碼分享） 8943次閱讀
- 基于異構并行計算的兩個子概念異構和并行的簡單分析 6466次閱讀
- Mapreduce和Hive中map reduce個數設定 6017次閱讀
- 成為一名并行異構并行計算工程師需要掌握的技能詳解 6499次閱讀
- 串行傳輸方式都比并行傳輸方式更勝一籌 7046次閱讀
- HDFS優(yōu)化面臨新挑戰(zhàn),如何按照數據冷熱程度進行分層存儲 2975次閱讀
- CPU+FPGA的圖片壓縮異構加速方案效率提升14倍 2099次閱讀
上傳資料賺積分下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1490次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費
- 6基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
- 7基于單片機和 SG3525的程控開關電源設計
- 0.23 MB | 3次下載 | 免費
- 8基于單片機的紅外風扇遙控
- 0.23 MB | 3次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537791次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
工商網監(jiān)
評論