《大數(shù)據(jù)處理與云計(jì)算》教學(xué)大綱

1、《大數(shù)據(jù)處理與云計(jì)算》教學(xué)大綱課程類別：專業(yè)教育課課程名稱：大數(shù)據(jù)處理與云計(jì)算開課單位：信息與通信工程學(xué)院課程編號：N03050703總學(xué)時(shí)：40學(xué)分：2.5適用專業(yè)：信息工程專業(yè)先修課程：無一、課程在教學(xué)計(jì)劃中的地位、作用大數(shù)據(jù)處理與云計(jì)算是信息工程專業(yè)高年級學(xué)生開設(shè)的一門專業(yè)教育課。本課程主要學(xué)習(xí)大數(shù)據(jù)處理和云計(jì)算的相關(guān)原理和技術(shù)，根據(jù)實(shí)際需求，構(gòu)建相應(yīng)的大數(shù)據(jù)處理和云計(jì)算平臺框架。通過本課程學(xué)習(xí)，使學(xué)生掌握大數(shù)據(jù)的采集、傳輸、處理

2、和應(yīng)用的技術(shù)，了解Hadoop分布式系統(tǒng)基礎(chǔ)架構(gòu)，掌握HDFS和MapReduce技術(shù)。了解HBase、Hive、Zookeeper、Avro、Pig等相關(guān)大數(shù)據(jù)技術(shù)，與實(shí)際工程應(yīng)用相結(jié)合，構(gòu)建相應(yīng)的云計(jì)算平臺。教學(xué)應(yīng)當(dāng)結(jié)合實(shí)際實(shí)驗(yàn)條件，培養(yǎng)學(xué)生實(shí)踐動(dòng)手能力，了解大數(shù)據(jù)技術(shù)發(fā)展現(xiàn)狀，促進(jìn)大數(shù)據(jù)相關(guān)教學(xué)改革。二、課程教學(xué)內(nèi)容、要求及學(xué)時(shí)分配第一章大數(shù)據(jù)與云計(jì)算概況1、了解大數(shù)據(jù)概念2、了解大數(shù)據(jù)的產(chǎn)生、應(yīng)用和作用3、了解云計(jì)算技術(shù)的概述4

3、、了解云計(jì)算的特點(diǎn)及技術(shù)分類5、了解大數(shù)據(jù)與云計(jì)算、物聯(lián)網(wǎng)之間的關(guān)系第二章大數(shù)據(jù)處理與云計(jì)算的關(guān)鍵技術(shù)1、理解大數(shù)據(jù)處理的基本流程2、掌握大數(shù)據(jù)的關(guān)鍵技術(shù)3、理解大數(shù)據(jù)的處理工具4、了解大數(shù)據(jù)面臨的挑戰(zhàn)5、理解云計(jì)算及關(guān)系型數(shù)據(jù)庫第三章Hadoop1、了解Hadoop概述2、了解Hadoop發(fā)展簡史3、掌握HBase高級應(yīng)用4、理解HBase應(yīng)用場景5、理解HBase常用接口和SQL引擎層實(shí)戰(zhàn)6、理解基于HadoopV1和V2使用HBa

4、se的異同第八章基于HadoopV2的HivePig開發(fā)技巧1、理解Hive和Pig架構(gòu)和理論基礎(chǔ)2、理解Hive的作用和原理說明3、掌握Hadoop倉庫和傳統(tǒng)數(shù)據(jù)倉庫的協(xié)作關(guān)系4、理解HadoopHive倉庫數(shù)據(jù)數(shù)據(jù)流5、理解基于HadoopV1和V2使用Hive和Pig等工具的異同6、HQL基本語法第九章實(shí)時(shí)流框架StmonYARN（HadoopV2）實(shí)戰(zhàn)技巧1、理解實(shí)時(shí)流計(jì)算的概念2、理解Stm的概念、核心組件、特性3、理解Stm