本书详细介绍了一个大数据应用案例——电信用户行为分析，案例涉及数据预处理、数据存储与管理、数据分析和数据可视化等流程，涵盖Linux、MySQL、Hadoop、Spark、IntelliJ IDEA、Spring等系统和软件的安装与使用方法。案例采用的编程语言是Scala和Java。 林子雨（1978－），男，博士，厦门大学计算机科学系助理教授，厦门大学云计算与大数据研究中心创始成员，厦门大学数据库实验室负责人，中国计算机学会数据库专委会委员，中国计算机学会信息系统专委会委员。于2001年获得福州大学水利水电专业学士学位，2005年获得厦门大学计算机专业硕士学位，2009年获得北京大学计算机专业博士学位。中国高校**“数字教师”提出者和建设者（http://www.cs.xmu.edu.cn/linziyu），2009年至今，“数字教师”大平台累计向网络免费发布超过500万字高价值的教学和科研资料，累计网络访问量超过500万次。 主要研究方向为数据库、数据仓库、数据挖掘和大数据，发表期刊和会议学术论文多篇，并作为课题负责人主持了1项国家自然科学基金、1项福建省自然科学基金项目和1项福建省教改课题。曾作为志愿者翻译了Google Spanner、BigTable和《Architecture of a Database System》等大量英文学术资料，与广大网友分享，深受欢迎。2013年开始在厦门大学开设大数据课程，并因在教学领域的突出贡献和学生的认可，成为2013年度和2017年度厦门大学教学类奖教金获得者。获得2017年福建省精品在线开放课程、2018年厦门大学高等教育教学成果特等奖、2018年福建省高等教育教学成果二等奖。 主讲课程：《大数据处理技术》。 个人主页：http://www.cs.xmu.edu.cn/linziyu。 E-mail: ziyulin@xmu.edu.cn。 数据库实验室网站：http://dblab.xmu.edu.cn。 建设了高校大数据课程公共服务平台（http://dblab.xmu.edu.cn/post/bigdata-teaching- platform/），成为全国高校大数据教学****。平台为教师教学和学生学习大数据课程提供包括教学大纲、讲义PPT、学习指南、备课指南、实验指南、上机习题、授课视频、技术资料等全方位、一站式免费服务，平台年访问量超过100万次，同时提供面向高校的大数据实验平台建设方案和大数据课程师资培训服务。 第1章 案例概述 11．1　案例目的　11．2　适用对象　11．3　时间安排　11．4　预备知识　21．5　硬件要求　21．6　软件工具　21．7　数据集　31．8　案例任务　31．9　实验步骤　41．10　在线资源　61．10．1　在线资源一览表　61．10．2　下载专区　61．10．3　先修课程　71．10．4　大数据课程公共服务平台　71．11　本章小结　8第2章　大数据实验环境搭建　92．1　Linux系统及相关软件使用方法　92．1．1　Shell　102．1．2　root用户　102．1．3　创建普通用户　102．1．4　sudo命令　112．1．5　常用的Linux系统命令　112．1．6　文件解压缩　122．1．7　常用的目录　122．1．8　目录的权限　132．1．9　更新APT　132．1．10　切换中英文输入法　142．1．11　vim编辑器的安装和使用方法　152．2　JDK的安装　152．3　Scala的安装　162．4　Hadoop的安装和基本使用方法　172．4．1　安装Hadoop前的准备工作　172．4．2　安装Hadoop　192．4．3　HDFS操作常用Shell命令　222．5　Spark的安装和基本使用方法　242．5．1　下载安装文件　242．5．2　配置相关文件　252．5．3　Spark和Hadoop的交互　252．5．4　在spark-shell中运行代码　262．6　MySQL数据库的安装和基本使用方法　282．6．1　安装MySQL　282．6．2　MySQL常用操作　312．7　安装Tomcat　332．7．1　安装方式的选择　332．7．2　下载安装文件　332．7．3　安装和启动Tomcat　342．8　本章小结　35第3章　IntelliJ IDEA开发工具的安装和使用方法　363．1　下载和安装IDEA　363．2　下载Scala插件安装包　363．3　启动IDEA　373．4　为IDEA安装Scala插件　403．5　配置项目的JDK　443．6　使用IDEA开发WordCount程序　453．6．1　创建一个新项目WordCount　463．6．2　为WordCount项目添加Scala框架支持　483．6．3　设置项目目录　513．6．4　新建Scala代码文件　533．6．5　配置pom．xml文件　553．6．6　更新Maven的依赖文件　573．6．7　运行WordCount程序　573．6．8　打包WordCount程序生成JAR包　593．6．9　把JAR包提交到Spark中运行　633．7　本章小结　63第4章　使用Spring、SpringMVC和MyBatis开发网页应用　644．1　MVC模型　644．2　Spring框架　654．3　Spring MVC框架　664．3．1　网页开发中的“请求-响应”模型　664．3．2　采用Spring MVC框架后的网页请求处理过程　674．4　MyBatis　684．5　一个简单的网页应用开发实例　694．5．1　新建项目　694．5．2　配置pom．xml文件　714．5．3　设置项目目录　744．5．4　编写代码文件　754．5．5　对项目文件进行编译打包　774．5．6　把WebDemo．war发布到Tomcat中　814．5．7　实现Spring MVC和Spring的整合　834．5．8　实现Spring、Spring MVC和MyBatis三者的融合　864．5．9　把后端数据提交给网页显示　934．6　在IntelliJ IDEA中使用Tomcat调试网页程序　964．7　本章小结　104第5章　使用ECharts制作可视化图表　1055．1　ECharts简介　1055．2　ECharts图表制作方法　1055．2．1　下载ECharts　1055．2．2　在HTML中引入ECharts　1065．2．3　绘制一个简单的图表　1065．2．4　导出图片　1075．3　可视化图表制作实例　1095．3．1　快速制作图表方法　1095．3．2　实例1：柱状图　1105．3．3　实例2：饼状图　1135．4　本章小结　117第6章　电信用户行为分析实现过程　1186．1　数据分析整体过程　1186．2　本地数据集上传到HDFS　1196．2．1　数据集下载　1196．2．2　把数据集上传到HDFS　1196．3　在MySQL中创建数据库　12