1、西京学院教师授课计划20* 20* 学年第 * 学期课程名称：大数据技术原理及应用 课程性质：专业必修课程 编写教师：徐鲁辉 职称：副教授总学时： 48 其中理论学时： 32 实验学时： 16 其它学时： 0 考核方式： 考试 教材名称： Hadoop大数据原理与应用 主编： 徐鲁辉 出版社： 西安电子科技大学出版社 适用专业、年级： 数据科学与大数据技术专业*级 要求：1.授课计划由教研室主任（团队负责人）召集相关主讲教师集体研究后编写；2.每个授课单元（2学时）的内容占一格，表格不够可另加附页；3.任课教师须严格按授课计划教学，进度提前或推迟超过4学时视为教学事故；4.“讲课”、“实验”、
2、“其它”的填写，应在相应栏画 “”，如果有其它教学内容必须在备注栏进一步说明；“课程性质”填写公共必修课程、公共选修课程、数学与自然科学类课程、工程基础类课程、专业基础类课程、专业必修课程、专业方向课程、专业选修课程、专业实践环节等。5.授课计划经审核后使用，报院系教务科备案，授课教师人手一份。 教研室主任签字: 学院(中心)负责人签字: 教学单位盖章序号周周课次讲课实验其它教 学 内 容备 注（如课堂讨论、习题等）章节（章节名称、教学内容提要、实验的名称、课堂讨论的题目）11111.1-1.7开学第一课1.自我介绍2.课程地位、先修及后续课程3.教学目标及知识图谱4.课时分配（理论+实验）及
3、进度、教材、参考资料、上机软件5.考核方式：平时+实验+期末6.雨课堂、学堂云使用方法一、大数据概述1.大数据内涵、特征、关键技术、产业2.大数据与云计算、物联网、人工智能、5G的关系3.大数据岗位介绍4.大数据学习路线图头脑风暴，问卷调查，在线复习并测试Java、Python知识，导入必备Linux基础操作章节测试12121/22.1-2.4二、初识Hadoop1.Hadoop来源、发展史、特点、版本2.Hadoop生态系统3.Hadoop体系架构4.Hadoop应用现状章节测试2预习实验1指导书，自行实践部署Hadoop集群32122.5实验1 部署全分布模式Hadoop集群1.安装和配置
4、CentOS2.安装和配置Java环境3.启动和配置SSH免密登录4.安装和配置Hadoop实验报告143133.1-3.4三、分布式文件系统HDFS1.HDFS简介2.HDFS体系结构3.HDFS文件存储机制：块的分布4.HDFS数据读写53233.5三、分布式文件系统HDFS5.实战HDFS Web UI、HDFS Shell、HDFS Java API编程6.HDFS高可靠性机制章节测试364133.5实验2 实战HDFS实验报告275144.1-4.3四、分布式计算框架MapReduce1.MapReduce简介2.第一个MapReduce案例：WordCount3. MapReduc
5、e作业执行流程85244.4-4.6四、分布式计算框架MapReduce4.MapReduce数据类型与格式5.Shuffle机制6.在MapReduce中自定义组件96144.7实验3 MapReduce编程(1)实验报告3107154.7-4.9四、分布式计算框架MapReduce7.实战MapReduce：MapReduce Web UI、MapReduce Shell、MapReduce Java API编程8.MapReduce调优9.其他主流计算框架章节测试4117255.1-5.6五、分布式资源管理平台YARN1.YARN简介2.YARN体系架构3.YARN工作流程新旧MapRe
6、duce对比（补充）4.实战YARN5.YARN新特性6.其他统一资源管理和调度框架章节测试51281补充实验4 MapReduce编程(2)实验报告4139166.1-6.5六、分布式协调框架ZooKeeper1.分布式协调技术2.初识ZooKeeper3.ZooKeeper系统模型4.ZooKeeper工作原理5.ZooKeeper应用场景149266.6-6.7六、协调系统ZooKeeper6.部署Zookeeper集群7.实战ZooKeeper：ZooKeeper Shell，ZooKeeper Java API编程章节测试61510166.6-6.7实验5 部署ZooKeeper集群
7、和实战ZooKeeper实验报告51611177.1-7.5七、分布式数据库HBase1.NoSQL简介2.初识HBase3.HBase数据模型4.HBase体系架构5.HBase运行机制1711277.6-7.7七、分布式数据库HBase6.部署HBase集群7.实战HBase：HBase Shell，HBase Java API编程章节测试71812177.6-7.7实验6 部署HBase集群和实战HBase实验报告61913188.1-8.6八、数据仓库Hive1.初识Hive2.Hive体系架构3.Hive数据类型4.Hive文件格式5.Hive数据模型6.Hive函数2013288.7-8.8八、数据仓库Hive7.部署Hive 8.实战Hive：HWI，Hive Shell，Hive Java API编程章节测试82114188.7-8.8实验7 部署Hive和实战Hive实验报告72215199.1-9.4九、数据迁移和采集1.数据迁移工具Sqoop2.日志采集工具Flume3.分布式流平台Kafka4.ETL工具Kettle章节测试9231521010.1-10.4十、数据可视化1.可视化概念2.可视化作用与意义3.可视化图表的类型4.可视化工具章节测试102416199.49.5期末大复习实验8 实战Sqoop实验报告84
