小型Hadoop集群的數據分層調度處理算法分析
大小:0.78 MB 人氣: 2017-11-03 需要積分:0
隨著全球進入互聯網時代,數據獲取技術的不斷發展帶來數據量不斷激增,數據的抓取調度成為關鍵信息有效采集的重點問題。與此同時,計算機受物理器件性能的限制,為了滿足數據處理的要求,MySQL數據庫面對的調度處理的要求也在逐漸提高,僅依靠CPU主頻的提升并不能快速的處理大數據帶來的壓力,快速有效的算法成為目前數據挖掘的主流。本研究致力于數據挖掘分層調度處理,抓取的目標為各數據集的維度特征信息,最終設計并實現一種白配置的Hadoop分布式數據調度算法。因此,為了完成數據集分層調度功能的設計與實現,本系統主要包括兩大基本模塊:數據集的分層模塊和調度模塊。采用凝聚層次聚類對數據集進行分層處理,結合小型Hadoop分布式系統實現數據集分層調度。
非常好我支持^.^
(0) 0%
不好我反對
(0) 0%
下載地址
小型Hadoop集群的數據分層調度處理算法分析下載
相關電子資料下載
- Hadoop是什么?其核心由兩大部分組成,分別是什么? 1188
- 大數據計算框架簡介 1927
- 大數據相關介紹:Hadoop的生態系統構成 1909
- Hadoop大數據存算分離方案:計算層無縫對接存儲系統 1011
- 開源“摩爾定律”即將打破《2022開源大數據熱力報告》云棲大會上發布 489
- 如何將Hadoop部署在低廉的硬件上 1331
- Ampere將在2022 Apache Hadoop Meetup上解讀云原生 978
- 基于Hadoop的產品大數據分布式存儲優化 672
- Hadoop大數據“存算分離”,柏科數據 ISCloud分布式存儲提質增效 623
- 如何將Hadoop遷移到云平臺中? 782