Spark实时项目

本Spark实时项目依托企业级真实的实时数据分析环境，对目前互联网大厂中常见的实时分析场景提出了一套全面实用的技术解决方案。本项目以Spark为核心技术引擎，并联合使用了多种大数据流行计算框架，例如Kafka、Canal、Maxwell、ElasticSearch、Redis、Kibana等。为应对不同的流式数据采集场景，本项目给出了多种MySQL变动数据采集方案，并给出详尽的框架安装部署过程和代码解读流程。本项目全程使用SparkStreaming作为实时计算引擎，使用Scala作为开发语言，简洁高效，贴近Spark开发背景。通过本项目的学习，学员可以彻底掌握Spark这一流行计算引擎的实时计算功能，并解决了与其余多种大数据分析框架的兼容性，为学员增添了更多的实时计算开发经验。