Hadoop大数据第一季：真实电商数据仓库全流程开发详解-VIP全集

Hadoop大数据视频教程-第一季：真实电商数据仓库全流程开发详解(共46讲)

关键词：hadoop视频教程 hive教程 大数据 数据仓库 hadoop实战 数据分析平台 大数据平台 hadoop实际项目 hadoop进阶  hive进阶 bi视频教程 商业智能 数据仓库工程师 bi工程师





目前hadoop版本2.x hive0.13

大数飓出品www.itqsc.com





本视频特点：

真实电商环境的全面解析，侧重于数据仓库开发

助学习者提前了解真实开发环境和每天工作任务

视频简明扼要，内容实用不拖沓，大量实际经验





视频全部学完的实际价值=1年左右电商公司工作经验





主要内容为：

第一部分：数据仓库基础理论与技术圈

  第一章：互联网电商大数据环境

  第二章：商业智能与数据仓库基础理论

  第三章：维度建模基础理论

  第四章：电商大数据一般架构

  第五章：电商数据平台从零搭建方案参考

第二部分：Hadoop&Hive数据仓库技术

  第一章：电商全分布式开发环境搭建

  第二章：Hadoop&Hive光速入门

  第三章：HiveSQL语言全解释

  第四章：Hive内部运行机制

  第五章：HiveSQL优化

第三部分：电商核心业务知识详解

  第一章：订单商品模块

  第二章：客户模块

  第三章：活动模块

  第四章：流量模块

  第五章：电商用户画像项目





详情：





第一部分：数据仓库基础理论与技术圈





第一章：互联网电商大数据环境

1.职业环境

2.可能会有哪些重点项目

3.可能会有哪些重点方向

4.每天会做什么工作

5.电商项目的生命周期

6.Hadoop在国内的情景

7.待遇怎么样

8.工作机会介绍

9.关于猎头的知识





第二章：商业智能与数据仓库基础理论

1.BI的作用

2.BI的构建

3.数据仓库基础理论：数据仓库,企业信息工厂,维,事实表

4.数据仓库基础理论：数据集市,ODS,元数据,ETL,OLAP





第三章：维度建模基础理论

1.维度建模－基础术语

2.维度建模－建模中的三种模型

3.维度建模－维度的类型

4.建模的一般过程

5.库存管理业务建模实例

6.电信DW建模实例演示





第四章：电商大数据一般架构

1.数据流向介绍

2.电商源系统和源数据特点

3.数据抽取与装载策略

4.DW层数据特点

5.DM层数据特点

6.元数据管理

7.报表层数据特点





第五章：电商数据平台从零搭建方案参考

1.技术选型建议

2.真实电商数据仓库架构解密

3.真实电商数据仓库架构各层实现细节

4.中等规模电商数据平台建设情况参考

调度系统，集群，元数据的管理，对外提供数据，团队情况

5.中等规模电商数据平台实现方式参考

开发与测试环境的实现，数据访问实现，提供数据的实现





第二部分：Hadoop&Hive数据仓库技术





第一章：电商全分布式开发环境搭建

1.hadoop2.x全分布式搭建，

三台虚拟机，系统 CentOS 6.5 32位 * 3；

Hadoop-2.2.0-bin.tar.gz

2.Hive的搭建（数据仓库，ETL过程），

apache-hive-0.13.0-bin.tar.gz；

mysql数据库创建





第二章：Hadoop&Hive光速入门

1.Hadoop概要

2.HDFS介绍(HDFS可靠性介绍，Block解析)

3.MapReduce介绍(MapReduce工作过程,JOB调度机制，

内部任务优化机制，MapReduce错误处理机制)

4.YARN介绍,YARN特性，YARN如何解决MapReduce1.0的问题

5.Hadoop进程介绍（Namenode，Secondary Namenode，DataNode，JobTracker，TaskTracker，ResourceManager，ResourceManager，NodeManager）

6.Hadoop工作过程（详细内部工作过程，读取文件过程，写入文件过程）

7.HDFS终端命令全解释，管理命令21个，文件操作命令30个

8.常用配置参数详细解析，core-site.xml,hdfs-site.xml,hive-site.xml,mapred-site.xml,yarn-site.xml真实环境配置





Hive光速入门

1.Hive介绍，Hive的helloword