详细介绍现阶段流行的开源系统大数据技术架构及其运用案例,并以实践活动实际操作的方法輔助了解怎么使用Hadoop、Spark对具体运用的互联网大数据开展储存和剖析。
课程大纲:
1互联网大数据核心技术概述
1.1大数据技术概述
1.1大数据技术发展趋势
1.2深层次了解大数据技术架构
1.3典型性的大数据技术架构
2Hadoop技术性基本
2.1Hadoop核心技术
2.1.1Hadoop概述
2.1.2HDFS系统文件
2.1.3MapReduce测算实体模型
2.2Hadoop生态体系介绍
3Hadoop运用实例
3.1家庭医师消息推送系统软件
3.2分布式视頻存储系统
3.3生产制造机器设备三层交换机
4运行内存建筑科学
4.1Spark技术性概述
4.2RDD方式
4.3SparkStream
5Spark运用实例
5.1自主创新公司算法
5.2农村基层税收单位存档系统软件
6试验
6.1Hadoop群集配备与应用
6.2Spark自然环境配备与应用