- 前辅文
- 项目1 认识大数据,实现学情分析系统设计与环境搭建
- 学习目标
- 学习情境
- 任务1.1 设计学情分析系统
- 任务1.2 构建学情分析系统开发环境
- 项目小结
- 项目2 Hadoop大数据平台的构建
- 学习目标
- 学习情境
- 任务2.1 搭建Ambari Hadoop系统
- 任务2.2 使用Apache Ambari管理Hadoop集群
- 项目小结
- 项目3 就业岗位数据的采集和存储
- 学习目标
- 学习情境
- 任务3.1 使用网络爬虫采集岗位招聘数据
- 任务3.2 将采集的数据上传到HDFS
- 任务3.3 使用Sqoop转换MySQL中的学生成绩数据到Hive中
- 项目小结
- 项目4 岗位数据的处理
- 学习目标
- 学习情境
- 任务4.1 使用Hadoop MR对数据进行清洗
- 任务4.2 使用命令行对Hive进行数据查询和过滤
- 任务4.3 使用Java API对Hive进行连接与操作
- 项目小结
- 项目5 岗位和技能数据的分析
- 学习目标
- 学习情境
- 任务5.1 使用Mahout 命令进行岗位聚类分析
- 任务5.2 使用Mahout的 Java API进行岗位分析聚类开发
- 任务5.3 使用Mahout推荐工作岗位
- 项目小结
- 项目6 数据的可视化
- 学习目标
- 学习情境
- 任务6.1 使用Excel可视化数据
- 任务6.2 使用ECharts可视化数据
- 任务6.3 使用D3.js可视化数据
- 项目小结
- 参考文献