大數據資料處理(Big Data Management) (資工系)

上課時間:(四)234 (I628)
成績(Score) [A] 大數據資料處理(資工系)



  • Ewant: 大數據資料分析處理:以國道高速公路車流資料分析運用為例(2023夏季班)
  • 亞大教發中心_MOOCs大數據資料分析處理_以國道高速公路車流資料分析運用為例

  • REFERENCES

    (自學) AWS 雲端運算基礎與實作
    書號:MP32307(作者:葉期財、陳秀如 ISBN: 978-626-333-575-2)上市日:2023/9/1

  • AWS Educate Program

  • AWS Learner Lab [72134]

    AWS Academy Data Engineering [72135]


    期末專題: (112-2_FianlProject_jdwang202?) 題目:利用AWS 雲端雲算服務-分析與展示於不同時間週期之國道高速公路車流
    >GoogleMap (TDSC_jdwang)
    one Intersection (一個交流道) : 四個 Gantry (ETC 電子匝道)
    利用『交通部高速公路閘道資料』做大數據分析
    如何利用這些分析,讓分析資料加值(車輛種類?不同時段分析(星期?24 小時?連續假期?)?避免尖峰時段?流量估計?)
    觀察匝道: 選定至少一個交流道 (注意每個交流道車流 分為{上交流道}與{下交流道} 每一種又分為{南下}{北上}共四種統計資料)

    以{龍井}交流道為例:
    {上交流道}:
    {從龍井南下}: 如: "03F-186.0S"(國道三號 龍井-和美)=> GantryID="03F1860S"
    {從龍井北上}: 如: "03F-177.9N"(國道三號 龍井-沙鹿)=> GantryID="03F1779N"
    {下交流道}:
    {南下到龍井}: 如: "03F-177.9S"(國道三號 沙鹿-龍井)=> GantryID="03F1779S"
    {北上到龍井}: 如: "03F-186.0N"(國道三號 和美-龍井)=> GantryID="03F1860N"



    ps. 選擇一個交流道(上下交流道:共有四個電子匝道)"
    題目:利用AWS 雲端雲算服務-分析與展示於不同時間週期之國道高速公路車流-選擇一個交流道?"
    報告(pdf)+ 解說 (3~5 分鐘)Youtube URL (shared)"
    (1) TDCS M06A 資料時間範圍 (2022/12/1-31, 共31 天)存在不同的AWS 儲存空間(S3, RDS, DynamoDB, Redshift)。比較優缺點(操作方便性,使用查詢時間等)。"
    (2) 另用程式分析 每日(7天 Monday to Sundfay)不同車種在 小時的變化。"
    (3) 以星期為單位,觀察比較每週週末(有連假 或一般週末)的車流是否有不同? 可能原因是?"
    (4) 不同車種,是否有不同的變化?(須轉用百分比後再比較)"
    (5) 將統計結果,利用Quicksight 視覺化圖表呈現。"