• • Hadoop 計算加速實驗
  •  參考程式(Hadoop WordCount 字數計算)
    • （Windoop 1.0) WordCount_Project_jdwang2014_11_12.zip (如使用Windoop 2.0 需修改)
  • 資料來源
    • 2013
    • 2013-12_Parsed.txt
    • 2013-11_Parsed.txt
    • 2013-10_Parsed.txt
    • 2013-09_Parsed.txt
    • 2013-08_Parsed.txt
    • 2013-07_Parsed.txt
    • 2013-06_Parsed.txt
    • 2013-05_Parsed.txt
    • 2013-04_Parsed.txt
    • 2013-03_Parsed.txt
    • 2013-02_Parsed.txt
    • 2013-01_Parsed.txt
    • 2014
    • 2014-12_Parsed.txt
    • 2014-11_Parsed.txt
    • 2014-10_Parsed.txt
    • 2014-09_Parsed.txt
    • 2014-08_Parsed.txt
    • 2014-07_Parsed.txt
    • 2014-06_Parsed.txt
    • 2014-05_Parsed.txt
    • 2014-04_Parsed.txt
    • 2014-03_Parsed.txt
    • 2014-02_Parsed.txt
    • 2014-01_Parsed.txt
  • 實驗結果
  • （103_1_WindoopExecuteTime_MidlleProject.xlsx）
    • 資料量 vs.執行時間
    •  Node數目 vs.執行時間
  • 評分標準
  • 資料量 vs # of Nodes
  • 1, 2, 4 Nodes => (2014-01-2014-06)(6月)
  • 1, 2, 4 Nodes => (2014-01-2014-12)(6月+12月)
  • 1, 2, 4 Nodes => (2013-01-2014-12)(6月+12月+24月)
• • 書面報告(電子檔上傳Moodle1)
    • 期中專題書面報告(
    • 題目、小組成員、
    • 完成項目、
    • 實驗環境(軟體(OS,Windoop)、硬體(CPU,RAM,HD))、
    • 實驗結果
    • (50%)效能觀察、比較 (資料量 vs. # of Node)?
    • (10%)出現最多前20名的字?
    • (因為資料量不同而改變)(6月?12月?24月?)
    • (10%)出現不同字數?
    • (因為資料量不同而改變)(6月?12月?24月?)
    • (Google Chart )
    • (10%) 控制Reduce數目：如job.setNumReduceTasks(2);Reduce數目=2;
    • (10%)容錯實驗(Fault Tolerance): (2014-01-2014-12)(12月) 執行中，有計算節點毀損(Ctrl+C,關機)，觀察是否能依然能順利完成?執行時間?
    • (10%)利用Hadoop 2.0 cluster 執行實驗
    • 小組成員工作分配、
    • 個別貢獻度百分比、
    • 個人心得