學院的信息化建設在國內處于先進水平,學院建設的教、管、訓等各種業(yè)務系統(tǒng)優(yōu)化了管理工作的流程,規(guī)范了管理制度,提高了工作效率。但是這些數(shù)據(jù)沒有被充分地利用起來,且部門間信息不流通,數(shù)據(jù)只在各個部門縱向流通,沒有形成部門之間的橫向流通,作為數(shù)據(jù)分析和建模主要對象的業(yè)務數(shù)據(jù)分別保存在各個業(yè)務系統(tǒng)中,需要進行清洗、管理。
目前學院建設的部分系統(tǒng)有一定的統(tǒng)計功能,一方面這些統(tǒng)計功能數(shù)量比較少、功能比較簡單,沒有挖掘出這些數(shù)據(jù)的真正價值;另一方面這些統(tǒng)計功能只能對自己系統(tǒng)的數(shù)據(jù)進行統(tǒng)計,不能對跨系統(tǒng)的數(shù)據(jù)進行分析和建模,更不能形成可視化的數(shù)據(jù)展示。缺乏大數(shù)據(jù)平臺統(tǒng)一管理。
1、統(tǒng)一對外服務接口:提供標準化的對外服務接口封裝;
2、權限管理:實現(xiàn)對平臺功能權限和數(shù)據(jù)權限的統(tǒng)一管控;
3、工作流:通過工作流運行機制,實現(xiàn)對各類任務的統(tǒng)一配置和調度管控;
4、數(shù)據(jù)資源管理:制定數(shù)據(jù)資源管理辦法,推動數(shù)據(jù)資源分類管理,建立數(shù)據(jù)采集、管理、交換、體系架構、評估認證等標準制度。加強數(shù)據(jù)資源目錄管理、整合管理、質量管理、安全管理、提高數(shù)據(jù)準確性、可用性。
1、圍繞“教學質量監(jiān)測診改”,同時展開業(yè)務調研和數(shù)據(jù)調研,根據(jù)分析需求范圍,梳理客戶的分析指標?!?/p>
2、搭建大數(shù)據(jù)平臺,集群管理。
3、制作數(shù)據(jù)分析報告,數(shù)據(jù)服務于教學。
通過項目建設,YDH實現(xiàn)了學院18個業(yè)務系統(tǒng)數(shù)據(jù)資源的整合,Yonghong Z-Suite作為YDH的數(shù)據(jù)分析模塊,包括課堂教學分析、教師工作量數(shù)據(jù)分析,教師教學工作質量分析等,建立學院教學大數(shù)據(jù)分析運行體系,形成適合教學大數(shù)據(jù)管理的教學管理運行體 系,從教師教和學生學兩個方面實現(xiàn)對課程教學大數(shù)據(jù)支持,同時為有關教學需要的基礎性、決策性、參考性數(shù)據(jù)提供基本服務。
學院非常注重數(shù)據(jù)和教學的結合,借助數(shù)據(jù)服務于教學。
經(jīng)過調研,形成了學院大數(shù)據(jù)平臺業(yè)務需求,主要從11個大項,120個小項進行統(tǒng)計分析。涉及的方向包括課堂教學大數(shù)據(jù)監(jiān)測、到課率統(tǒng)計、教師工作量核算、教師教學質量考核、高等教育質量數(shù)據(jù)分析、教學運行監(jiān)測、成績數(shù)據(jù)分析、教學基本數(shù)據(jù)分析、學生技能素質分析、教師畫像和學生畫像。
YDH適用于將存儲在文件、關系型數(shù)據(jù)庫、實時數(shù)據(jù)流等各類數(shù)據(jù)源中的結構化數(shù)據(jù)、非結構化數(shù)據(jù)及半結構化數(shù)據(jù)采集到YDH平臺中進行存儲、處理、分析,輔以Yongong Z-suite展現(xiàn)和挖掘,實現(xiàn)了學院教學從 GB到TB、PB級的大數(shù)據(jù)處理場景,包括但不限于以下場景:
1、數(shù)據(jù)倉庫建設
YDH完整覆蓋數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)處理、數(shù)據(jù)共享、數(shù)據(jù)安全、數(shù)據(jù)分析等數(shù)倉建設環(huán)節(jié);用戶通過YDH平臺,大大降低數(shù)據(jù)倉庫、數(shù)據(jù)處理、數(shù)據(jù)應用的運維成本。
2、實時流式數(shù)據(jù)處理
用戶可基于YDH平臺快速開發(fā)本行業(yè)在實時流式場景下的大數(shù)據(jù)處理、分析的應用程序,以實現(xiàn)對學院實時業(yè)務的風險監(jiān)控與告警。
流式數(shù)據(jù)處理可用于課堂教學監(jiān)測、學生教學樓分布情況等。
3、離線數(shù)據(jù)處理
YDH基于Hadoop體系的MapReduce、Hive、Pig、Spark等技術向學院提供強大的數(shù)據(jù)離線批處理能力,用戶可以便捷的使用YDH平臺對學院數(shù)據(jù)進行抽取、轉換、加載等離線數(shù)據(jù)處理加工。
通過離線數(shù)據(jù)處理引擎,用戶可迅速的對學院所積累的數(shù)據(jù)進行ETL處理,快速發(fā)掘海量歷史數(shù)據(jù)價值。
4、數(shù)據(jù)分析與探索挖掘
通過YDH平臺所提供的強大數(shù)據(jù)分析與探索挖掘能力,用戶可快速對學院在PB級規(guī)模下的大數(shù)據(jù)進行可視化的探索式分析,在紛繁復雜的數(shù)據(jù)中快速獲取數(shù)據(jù)洞察力,輔助于教學。
用戶還可通過YDH平臺提供的強大機器學習能力對學院數(shù)據(jù)進行深度挖掘,進一步發(fā)掘海量數(shù)據(jù)中蘊藏的無限價值。