





定价:39元
印次:1-7
ISBN:9787302550938
出版日期:2020.03.01
印刷日期:2022.03.24
图书责编:袁勤勇
图书分类:教材
本书通过一个招聘网站岗位分析的案例,完整的呈现了大数据开发的过程。其中第1章对实训项目进行概述,让大家了解项目功能、明确实训项目的需求和目标;第2章带领大家搭建了大数据环境;第3章讲解了如何使用爬虫的方式采集数据;第4章讲解了数据预处理操作;第5章对处理后的数据进行分析;第6章通过一个web项目对数据分析结果可视化呈现。本书适合作为高等院校计算机相关专业的实训教程,也可作为广大编程爱好者的实践图书。
江苏传智播客教育科技股份有限公司(简称传智播客)是一家致力于培养高素质软件开发人才的科技公司,“黑马程序员”是传智播客旗下高端IT教育品牌。
前言 江苏传智播客教育科技股份有限公司(简称“传智播客”)是一家致力于培养高素质软件开发人才的科技公司。经过多年探索,传智播客的战略逐步完善,从IT教育培训发展到高等教育,从根本上解决以“人”为单位的系统教育培训问题,实现新的系统教育形态,构建出前后衔接、相互呼应的分层次教育培训模式。 一、 “黑马程序员”——高端IT教育品牌 “黑马程序员”的学员多为大学毕业后,想从事IT行业,但各方面条件还不成熟的年轻人。“黑马程序员”的学员筛选制度非常严格,包括了严格的技术测试、自学能力测试,以及性格测试、压力测试、品德测试等。百里挑一的残酷筛选制度确保学员质量,并降低企业的用人风险。 自“黑马程序员”成立以来,教学研发团队一直致力于打造精品课程资源,不断在产、学、研3个层面创新自己的执教理念与教学方针,并集中“黑马程序员”的优势力量,有针对性地出版了计算机系列教材90多种,制作教学视频数十套,发表各类技术文章数百篇。 “黑马程序员”不仅斥资研发IT系列教材,还为高校师生提供以下配套学习资源与服务。 1. 为大学生提供的配套服务 (1) 请同学们登录http://yx.ityxb.com,进入“高校学习平台”,免费获取海量学习资源。平台可以帮助高“播妞学姐”微信公众号 校学生解决各类学习问题。 (2) 针对高校学生在学习过程中存在的压力大等问题,我们还面向大学生量身打造了IT技术女神——“播妞学姐”,可提供教材配套源码、习题答案及更多学习资源。同学们快来关注“播妞学姐”的微信公众号boniu1024。 2. 为教师提供的配套服务 针对高校教学,“黑马程序员...
第1章项目概述1
1.1项目需求和目标1
1.2预备知识2
1.3项目架构设计及技术选取2
1.4开发环境和开发工具介绍3
1.5项目开发流程3
小结5
第2章搭建大数据集群环境6
2.1安装准备6
2.1.1虚拟机安装与克隆6
2.1.2虚拟机网络配置19
2.1.3SSH服务配置26
2.2Hadoop集群搭建31
2.2.1JDK安装31
2.2.2Hadoop安装33
2.2.3Hadoop集群配置35
2.2.4Hadoop集群测试39
2.2.5通过UI界面查看Hadoop
运行状态43
2.3Hive安装44
2.3.1Hive的安装模式44
2.3.2Hive的安装45
2.4Sqoop安装49
小结52
第3章数据采集53
3.1知识概要53
3.1.1数据源分类53
3.1.2HTTP请求过程54
3.1.3认识HttpClient57
3.2分析与准备57
3.2.1分析网页数据结构57
3.2.2数据采集环境准备59
3.3采集网页数据62
3.3.1创建响应结果JavaBean类62
3.3.2封装HTTP请求的工具类63
3.3.3封装存储在HDFS的工具类68
3.3.4实现网页数据采集70
小结72
目录大数据项目实战第4章数据预处理73
4.1分析预处理数据73
4.2设计数据预处理方案75
4.3实现数据的预处理76
4.3.1数据预处理环境准备76
4.3.2创建数据转换类77
4.3.3创建实现Map任务的Mapper类81
4.3.... 查看详情
本书除了制作精美的教材外,还提供丰富的数字资源、在线咨询服务.
本书适合作为高等院校计算机相关专业的实训教程,也可作为广大编程爱好者的实践图书。
查看详情