前    言

在21世纪的数字化时代，数据已成为国家基础性战略资源，被誉为新时代的“钻石矿”。党中央、国务院始终高度重视大数据在经济社会发展中的关键作用。自党的十八届五中全会提出“实施国家大数据战略”以来，国务院相继印发《促进大数据发展行动纲要》，标志着我国大数据发展进入全面推进的新阶段，旨在加快建设数据强国，推动经济社会高质量发展。

进入“十四五”规划时期，我国大数据产业发展迎来新的历史机遇。在国家政策的引导下，大数据与云计算、人工智能、区块链等新技术深度融合，不断催生新业态、新模式，为经济社会发展注入强大的动力。与此同时，大数据技术在政务、金融、教育、医疗、交通等领域的应用不断深化，有力推动了政府治理体系和治理能力的现代化，加速了产业数字化转型的步伐。

展望“十五五”规划，我国大数据产业将继续保持蓬勃发展态势，技术创新和应用实践将更加广泛深入。随着数据规模的持续增长和数据处理技术的不断进步，大数据将在推动经济社会发展中发挥更加重要的作用。因此，掌握大数据处理技能，特别是像Spark这样高效、易用的大数据处理框架，已成为大数据从业者必备的核心竞争力。

在此背景下，本书应运而生，专注于Apache Spark 3.5版本的快速上手和开发参考，所有内容都在培训机构历时8年的教学实践中锤炼而成。鉴于Spark Core和Spark SQL在大数据开发工作中的核心地位，本书将重点聚焦这两个组件，通过系统化的内容安排和深入浅出的讲解方式，帮助读者迅速掌握Spark的核心原理与实战技巧。

本书特点

（1）入门指南，全面剖析：本书作为Spark入门的权威指南，以深入浅出的笔触，全面剖析Spark原生组件的基础理论、实战技巧及集群部署策略。

（2）培训视角，直击核心：本书从培训教学的角度出发，精炼阐述Spark中核心组件的运作原理与实战应用，使读者能够迅速把握组件精髓，熟练运用各项功能。这不仅是一次知识的传递，更是一场实战技能的快速充电。

（3）实例辅助，强化理解：书中每个操作步骤均辅以详尽的实例代码或直观图表，确保理论知识与实践操作无缝对接。每章末尾设有精炼总结，不仅是对本章内容的回顾与提炼，更是为读者搭建起一座通往Spark全局视野的桥梁。

（4）实战案例，视频辅助：相较于市面上众多Spark图书，本书独树一帜地融合了实战案例分析与视频辅助教学的讲解方式，使读者在掌握Spark原理的基础上，通过实战演练进一步巩固知识。

（5）面试问答，助力应聘：特别增设Spark面试题章节，精准覆盖工作中常见的使用场景及互联网企业面试要点，助力读者在Spark领域游刃有余，无论是职场实践还是面试挑战都能从容应对。

（6）作者答疑，专业指导：作者创建答疑微信群，为学习本书的读者提供答疑服务，指导读者快速掌握Spark应用开发技术。

本书适合读者

本书适合Spark初学者、大数据分析人员、大数据应用开发人员。同时本书也适合高等院校或高职高专院校学习大数据技术课程的学生。

本书资料下载

本书配套示例代码、PPT课件、集群环境、教学视频、作者微信群答疑服务，读者需要使用自己的微信扫描下面的二维码获取。

本书写作分工

本书由多个作者合作完成，其中第1～5章由段海涛撰写，第6～10章由杨忠良撰写，第11～15章由余辉撰写。

由于作者的水平有限，书中难免会存在一些疏漏或者不够准确的地方，恳请读者批评指正。如果读者有疑问或者遇到任何问题，请联系下载资源中提供的微信，或者私信至微信公众号“辉哥大数据”，期待得到读者的真挚反馈。

谨以此书献给我最亲爱的家人、同事，以及众多热爱大数据的朋友们！

著  者

2025年8月