本书是华为ICT学院大数据技术官方教材，旨在帮助学生进一步学习大数据的基本概念、技术原理，以及大数据平台的搭建和使用。

本书从大数据的概念和特征开始讲起，首先让读者对大数据有一个感性的认识；接下来结合大数据平台的各个功能模块，详细介绍大数据的存储、处理、分析、可视化等原理和操作；最后对大数据在各种行业中的应用加以叙述，让读者更加充分地感受到大数据应用的价值。

除华为ICT学院的学生之外，本书同样适合正在备考HCNA-Big Data认证，或者正在参加HCNA-Big Data技术培训的学员进行阅读和参考。其他有志进入ICT行业的人员和大数据技术爱好者也可以通过阅读本书，加深自己对大数据技术的理解。

物联网、云计算、大数据、人工智能等新技术的兴起，推动着社会的数字化演进。全球正在从“人人互联”，发展至“万物互联”，未来二三十年，人类社会将演变成以“万物感知、万物互联、万物智能”为特征的智能社会。

新兴技术快速渗透并推动企业加速数字化转型，企业业务应用系统趋于横向贯通，数据趋于融合互联，ICT正在成为企业新一代公共基础设施和创新引擎，成为企业的核心生产系统。据华为GIV（全球ICT产业愿景）预测，到2025年，全球的连接数将达到1000亿，85%的企业应用上云，100%的企业会连接云服务，工业智能的普及率将超过20%。数字化发展为各行业带来的纵深影响远超出想象。

作为企业数字化转型中的关键使能者，ICT人才将站在更新的高度，以更为全局的视角审视整个行业，并依靠新思想、新技术驱动行业发展。因此，企业对于融合型ICT人才需求也更为迫切。未来5年，华为所领导的全球ICT产业生态系统对人才的需求将超过80万。华为积累了20余年的ICT人才培养经验，对ICT行业发展现状及趋势有着深刻的理解。面对数字化转型背景下的企业ICT人才短缺，华为致力于构建良性的ICT人才生态。2013年，华为开始与高校合作，共同制定ICT人才培养计划，设立华为信息与网络技术学院（简称华为ICT学院），依据企业对ICT人才的新需求，将物联网、云计算、大数据等新技术和最佳实践经验融入到课程与教学中。华为希望通过校企合作，让大学生在校园内就能掌握新技术，并积累实践经验，促使他们快速成长为有应用能力、会复合创新、能动态成长的融合型人才。

教材是知识传递、人才培养的重要载体，华为聚合技术专家、高校教师倾心打造ICT学院系列精品教材，希望帮助大学生快速完成知识积累，奠定坚实的理论基础，助力同学们更好地开启ICT职业道路，奔向更美好的未来。

亲爱的同学们，面对新时代对ICT人才的呼唤，请抓住历史机遇，拥抱精彩的ICT时代，书写未来职业的光荣与梦想吧！华为，将始终与你同行！

随着技术的发展，数据的产生、传输和存储变得越来越容易。人类社会产生的信息也越来越多地被数据化。这些海量、详尽的数据让人们可以更客观、全面地探索和研究世界。数据已经成为一种重要的生产要素。大小超出了典型数据库软件的采集、存储、管理和分析等能力的数据集被称为大数据，大数据有海量的数据（Volume）、快速的数据处理（Velocity）、多样的数据类型（Variety）和低价值密度（Value）四大特征，统称“4V”。大数据蕴藏着巨大的价值，对大数据的运用和价值挖掘会给社会和企业带来新的机遇和变革。

第1章　大数据概述

人类社会产生的数据与日俱增，涉及社会的方方面面。数据已经成为一种重要的生产要素，这些海量的数据被称为“大数据”。大数据蕴藏着巨大的价值，对大数据的运用和价值挖掘会给社会和企业带来新的机遇和变革。本章讲述了大数据的基本概念、关键技术及其产业模式。

第2章　Hadoop大数据处理平台