本书主要介绍大数据关键技术中的大数据采集和数据预处理技术，是大数据专业的入门级的专业基础课教程（含教学课件、源代码与视频教程），旨在为学生搭建起大数据的知识架构，讲述大数据采集和数据预处理的基本原理，开展相关的实验，为学生在大数据以及相关领域的学习奠定坚实的基础。全书共分四部分：第一部分是理论基础（第1~2章和第6章），主要介绍大数据技术、大数据采集和大数据预处理的基本概念以及基础理论；第二部分是大数据采集（第3~5章），分别介绍3种大数据的采集方法、技术及4种工具；第三部分是大数据预处理（第7~8章），介绍4种大数据预处理技术、方法；第四部分是实验指导（第9~11章），介绍大数据采集和大数据预处理的实验平台以及具体实验的内容、方法、流程等。 为便于读者高效学习，快速掌握大数据专业基础知识。作者精心制作了完整的教学课件（11章PPT）与部分配套视频教程（200分钟）。本书可以作为高等院校计算机、电子信息、信息管理、软件工程等专业，尤其大数据相关专业的本科和硕士研究生教材或参考书。

前言 据赛迪智库预测，中国近年来大数据核心人才缺口达230万人，全世界相关人才缺口超过1000万人。我国教育部门为了响应社会发展需要，于2016年开始正式开设“数据科学与大数据技术”本科专业及“大数据技术与应用”专科专业。近几年，全国形成了申报与建设大数据相关专业的热潮。目前全国各类高校、高职院校都已陆续开设了大数据相关的专业和课程。大数据作为交叉型学科，其相关专业强调培养具有多学科交叉能力的大数据人才。 大数据专业是顺应时代发展的产物。大数据作为新兴的、交叉的专业，在培养方案、系列教材等方面，各高校都在组织教师进行改进、研究。普遍认为，数据科学与大数据技术专业的毕业生，应掌握计算机理论和大数据处理技术，需要从大数据应用的三个主要层面（即数据管理、系统开发、海量数据分析与挖掘）系统地培养，能够应对大数据应用中的各种典型问题，具有将领域知识与计算机技术和大数据技术融合、创新的能力，可以从事大数据研究和开发应用等工作。 本书主要介绍大数据关键技术中的大数据采集和数据预处理技术，是大数据专业的入门级的专业基础课教程，旨在为学生搭建起大数据的知识架构，讲述大数据采集和数据预处理的基本原理，开展相关的实验，为学生在大数据以及相关领域的学习奠定坚实的基础。 本书以大数据关键技术为主线，重点介绍大数据采集技术和数据预处理技术。本书共四大部分，共11章。第一部分：大数据基础，含第1章概述、第2章大数据采集技术基础和第6章数据预处理基础；第二部分：大数据采集，含第3章系统日志数据采集、第4章基于数据库的数据迁移和第5章互联网数据采集；第三部分：数据预处理，含第7章数据清洗与集成和第8...