本书系统讲解了大数据关键技术，通过部署Hadoop平台操作系统常用命令、部署Hadoop伪分布式集群、安装与配置ZooKeeper组件、配置与启动Hadoop高可用集群、安装与配置Hive组件、安装与配置Spark组件、安装与配置HBase组件、安装与配置Sqoop和Flume组件、安装与配置Flink组件共九个实战项目，覆盖了Linux、Hadoop、ZooKeeper、Hive、Spark、HBase等核心组件及Sqoop、Flume、Flink等工具的应用。

当前，大数据已成为推动社会进步、产业升级和企业创新的关键力量。无论是互
联网企业、金融科技企业，还是传统制造业等行业领域，都在积极拥抱大数据，尝试
通过挖掘数据背后的价值来优化决策、提升效率、创造新的增长点。然而，大数据的
采集、存储、处理、分析和应用并非易事，它需要一个完整的生态系统来支撑，这就
是我们通常所说的大数据生态圈。


本书是教育部现代学徒制试点院校系列教材、“十四五”高等职业教育大数据技
术及应用系列教材之分册，旨在为广大读者提供一本系统、全面、实践导向的大数据
技术指南。本书通过项目化的方式组织教学，将大数据生态圈中的关键技术组件，如
Hadoop、ZooKeeper、Hive、Spark、HBase、Sqoop、Flume、Flink等逐一拆解，结合
丰富的实战案例，帮助读者从零开始，逐步掌握大数据技术的核心知识和技能。


本书结构严谨，逻辑清晰，从基础到应用、从理论到实践层层递进，逐步深入。
首先，通过项目一平台常用的系统命令，帮助读者掌握Linux操作系统的基础知识和
Hadoop平台的搭建方法；然后，通过项目二至项目九，依次介绍Hadoop伪分布式集
群、ZooKeeper组件、Hadoop高可用集群、Hive组件、Spark组件、HBase组件、Sqoop
组件、Flume组件，以及Flink组件的安装、配置与应用。每个项目都包含了多个任务，
每个任务都针对特定的技术点进行深入剖析和实战演练。


书中不仅提供了详细的操作步骤，还配备了大量的实战案例和练习题，以帮助读
者巩固所学知识，提升解决实际问题的能力。同时，本书还紧跟技术发展潮流，以确
保读者能够站在技术前沿，把握行业脉搏。


本书具有以下特色：


（1）实践性强：通过实际操作，读者可以直观地感受到大数据技术的魅力，通过
强化各组件的配置步骤，加深对理论知识的理解。


（2）针对性强：每个项目都针对大数据生态圈中的一个具体组件或应用场景进行
设计，通过具体的组件使用解决读者在实际工作中可能遇到的问题。


（3）系统性强：书中的各个项目相互关联、逐层解析、深入应用，形成了一个完
整的知识体系，有助于读者系统地掌握大数据技术。


（4）趣味性强：本书注重培养读者的学习兴趣和动手能力，使学习过程更加生动
有趣。


本书由刘琰、任晓鸽、孙芳任主编；郭华平、孙艳歌、谢晓、熊林、冯卫华任副
主编；朱灿基、沈洋、孔晓岚、刘天梅、牛文姣、何莹、赵正华、李展鹏参与编写。
本书是校企合作的成果，河南景奈教育科技集团有限公司参与本书编写，郑州新思齐
科技有限公司提供了项目和技术支持。本书在编写过程中得到了许多同事的大力支持
和帮助，收到了许多宝贵的意见和建议，还参考了许多资料和国内外的优秀教材，在
此一并表示衷心的感谢。


由于编者水平有限，加之编写时间仓促，书中难免有不妥之处，敬请各位读者和
专家批评指正。

项目一部署Hadoop平台操作系统常用命令 任务一了解Linux常用命令 1.1.1文件与目录操作 1.1.2用户操作 1.1.3文本操作 1.1.4系统操作 任务二了解Linux虚拟机及用户信息 1.2.1创建Linux操作系统虚拟机 1.2.2用户和组 1.2.3文件类型和权限 1.2.4配置静态IP 项目二部署Hadoop伪分布式集群 任务一走进Hadoop的世界 2.1.1Hadoop的发展历程与应用现状 2.1.2Hadoop的优点与核心组成 2.1.3Hadoop的安装部署方式 2.1.4Hadoop各版本选择 任务二配置Hadoop集群基础环境 2.2.1Hadoop集群概述 2.2.2平台系统环境配置 2.2.3Hadoop的安装与配置 任务三启动与

刘琰，研究生学历、副教授，现任濮阳科技职业学院党委副书记、院长，长期教授组网与网络安全、计算机网络、单片机技术与应用等课程；在全国职业院校技能大赛中屡获优秀指导教师殊荣，并积累了多项国家级与省级教学改革及研究成果，曾负责多门精品课程的建设。长期研究大数据技术，发表相关期刊论文近30篇，在数据分析、数据可视化领域具有深厚的学术造诣与卓越的研究能力。多次荣获河南省优秀共产党员及先进个人称号。任晓鸽，硕士研究生，讲师，现任许昌电气职业学院人工智能教学团队负责人，主要讲授“面向对象程序设计”课程，主编教材《移动端uni-app跨平台技术》，发表专业论文十余篇，曾获第十五届振兴杯河南省赛计算机程序设计大赛职工组第二名，指导学生获得河南省高等职业教育技能大赛省赛一等奖4项、第二届全国职业技能大赛河南省选拔赛移动应用开发赛项金奖等奖项30余项。孙芳，博士研究生，副教授，现任信阳师范大学软件学院专职教师，主要讲授操作系统、数据分析与可视化、高级语言程序设计、汇编语言等课程，拥有丰富的一线教学经验，曾获河南省自然科学优秀论文三等奖、河南省教学技能竞赛三等奖项，发表专业学术论文20余篇。

案例实用，教学资源丰富，实践性强。