Hadoop高级应用实战

Hadoop是2013年最热门的技术之一，通过北风网robby老师深入浅出Hadoop实战开发、Hadoop高级实战 两套课程的学习，普通Java开发人员可以在最快的时间内提升工资超过15000.成为一位完全精通Hadoop应用开发的高端人才。 

第1章节: （4课时） 



搜索引擎自动推荐（4课时） 



> 新平台搭建： 使用VirtualBox创建CentOs虚拟机，并使用RPM的方式安装和使用Hadoop 



> 内存数据库Redis的安装和基本使用 



> 搜索引擎自动推荐算法讲解 



> 使用JqueryUI + Ajax + Redis搭建前后台框架 



> 使用Map Reduce实现数据统计算法 



> 定制Map Reduce输出，将数据直接写入Redis内存数据库 



第2章节: (3课时） 



好友智能推荐 (3课时） 



> 应用背景和算法详细讲解 



> Web框架搭建Struts2 + Redis 



> 使用Map Reduce结合Redis实现潜在好友查找算法 



> 完整的应用逻辑实现：前台好友关注，后台潜在好友查找，再到前台潜在好友推荐 



第3章节:(2课时） 



Hadoop Streaming(2课时） 



> 非Java的Map Reduce实现 



> 如何使用脚本语言实现一个Map Reduce任务 



> 如何使用C语言实现一个Map Reduce任务 



第4章节: (1课时） 



Hadoop Pipes (1课时） 



> 基于Hadoop Pipes，使用C++实现Map Reduce任务 



第5章节: (2课时） 



Apache Flume基础 (2课时） 



> Apache Flume概述 



> Flume Agent详细介绍及使用 



> 深入Flume子模块: Source, Sink及Channel的使用 



第6章节: (3课时） 



Flume实践及分布式应用 (3课时） 



> 与搜索引擎自动推荐应用的结合 



> 搭建分布式的flume应用 



第7章节: (约5课时） 



最短路径算法的Hadoop实现(约5课时） 



> 最短路径算法介绍 



> 如何使用MapReduce实现最短路径算法 



> 找到城市任意公交站点之间的最短路径 



第8章节: (约3课时） 



Hadoop集群管理(约3课时） 



> Hadoop的日志管理 



> 动态添加和删除Hadoop节点 



> Namenode和Datanode目录结构介绍 



> HDFS的数据安全性：fsimage和editlog 



> Hadoop管理工具dfsadmin和fsck的使用 



第9章节:(约5课时） 



PageRank算法的Hadoop实现(约5课时） 



> Google的成名之作：PageRank算法介绍 



> 如何使用Hadoop实现PageRank算法