课程介绍
Apache 本课程主要是构建大数据平台,包含目前大数据常用的所有技术组件的环境部署。所有技术组件的安装部署,都是手把手操作,不会出现跳讲和断讲,0基础同学也能一站式搞定大数据平台环境。
讲师介绍
-
杨俊
大讲台大数据高级讲师 | 原某广电数据咨询公司大数据高级架构师
原某广电数据咨询公司大数据高级架构师 资深Java玩家,大数据技术狂热者。曾在北京某广电数据咨询公司担任大数据高级架构师,7年以上大数据实操经验, 经历过10个以上的重量级大数据项目。Hadoop源码级技术大咖,熟练使用Hadoop、Spark、Flink、Hive、HBase、Flume、Kafka、ElasticSearch等各大主流组件。谦虚亲和,崇尚实操至上的教学理念。受到学员一致好评。
免费视频这么多,为什么还要来大讲台?
智能化
学习任务智能推送
混合式
“图文+视频”混合式课件
答疑快
30分钟问答响应
实战多
3分理论7分实战
包学会
账号长期有效学会为止
课程大纲
大数据集群节点准备 |
1VMware虚拟机软件安装配置 2Linux操作系统介绍 3Linux操作系统安装1 4VMware三种网络类型详解 5Linux操作系统安装2 6Linux系统网络配置 7Linux虚拟机克隆 8Linux静态IP技术 9x-shell远程连接工具使用 10Linux用户和用户组创建 11Linux主机名配置 12Linux防火墙配置 13openssh-clients服务安装 14Linux主机名与IP地址映射配置 15SSH免密码登录 16FileZilla工具使用 17节点2所有配置 18节点3所有配置 |
Zookeeper分布式集群搭建 |
1Zookeeper安装模式及不同厂商版本选择 2Zookeeper集群规划 3搭建时钟同步服务器 4集群节点IP地址映射与防火墙配置 5集群节点SSH免密码登录 6集群脚本配置文件开发 7集群分发shell脚本开发 8集群远程执行shell脚本开发 9集群JDK安装配置 10Zookeeper集群安装部署 |
Hadoop分布式集群搭建 |
1HDFS分布式文件系统安装配置 2HDFS服务启动与测试 3HDFS文件系统测试运行 4YARN集群安装配置 5YARN服务启动与测试 6YARN测试运行 7HDFS HA和YARN HA 故障转移实战演示 8Hadoop默认配置详解 |
Hive客户端安装部署 |
1Hive部署方式讲解 2MySQL元数据库安装 3Hive安装配置 4Hive服务启动与测试 5beeline访问HiveServer2 6Hive与HBase集成开发 |
Sqoop客户端安装部署 |
1Sqoop数据导入导出原理 2Sqoop安装部署 3Sqoop将MySQL数据导入HDFS 4Sqoop将HDFS数据导入MySQL 5利用Sqoop实现Hive与MySQL数据导入导出 6利用Sqoop实现HBase与MySQL数据导入导出 7MySQL数据库乱码以及访问权限问题解决 |
Hue安装部署 |
1Hue安装配置1 2Hue安装配置2 3Hue安装配置3 4Hue与HDFS集成开发 5Hue与YARN集成开发 6Hue与Hive集成开发 7Hue与HBase集成开发 8Hue与MySQL集成开发 9Hue可视化分析1 10Hue可视化分析2 |
Kafka分布式集群安装部署 |
1Kafka集群配置 2Kafka集群服务启动与测试 3Kafka 新api数据发送与消费 4Kafka旧api数据发送与消费 5Kafka集群监控 6Kafka与flume集成开发 |
Spark分布式集群安装部署 |
1scala安装配置 2Spark集群配置 3spark集群服务启动测试 4Spark Standalone工作流程 5提交作业到Spark Standalone集群运行 6Spark ON YARN 工作原理 7Spark ON YARN集群搭建 |