播放记录

Sqoop是大数据生态圈中一个数据传输工具，也是大数据工程师的一个常用工具。在本课程中，你将学习到，Sqoop的原理、安装配置、使用Oozie实现数据在Mysql与HDFS(Hive、HBase)等框架之间的互导

Flume是Cloudera提供的一个海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。是大数据大数据开发工程师必须会的框架之一。在本课中，你将学习到，Flume架构原理、安装配置、拓扑结构、使用Flume搭建监控端口采集数据、监控本地(或HDFS)文件(或文件夹)采集数据等。 更新：课件升级、Flume中的事务、Flume故障转移、自定义组件Source和Sink

Zookeeper主要应用于大数据开发中的，统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等场景。该框架相当于大数据框架中的润滑剂。是大数据大数据开发工程师必须会的框架之一。本套课程讲解了，Zookeeper的集群安装、选举机制、监听器原理、写数据流程、Shell命令行操作、客户端API操作、服务器节点动态上下线综合案例以及企业真实面试题。

本套视频从分布式系统的基本概念出发，由浅入深，讲解了RPC原理，Dubbo基本使用，Dubbo高可用场景以及Dubbo原理，涉及了分布式系统中服务注册、服务发现、负载均衡、灰度发布、集群容错、服务降级等核心概念的讲解及演示。通过学习，大家对分布式系统会有一个清晰的认识，为后来开发大型分布式项目奠定良好基础。

Kafka是高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。你将学到Kafka架构原理、安装配置使用、详细的Kafka写入数据和处理数据以及写出数据的流程、新旧版本对比及运用等。 更新：课件升级、Kafka幂等性、Kafka事务、监控器Eagle的使用、Kafka对接Flume的使用以及企业真实面试题详解

众所期待，隆重推出！大数据领域中杀手级的应用计算框架：Spark视频教程。 本套视频教程基于Scala 2.12版本，对最新Spark 3.0版本的核心模块进行了详尽的源码级讲解，授课图文并茂，资料详实丰富，带你领略不一样的技术风景线。课程内容涉及方方面面，函数式编程，你熟悉吗？认知心理学，你知道吗？工程化代码框架，你了解吗？在这套Spark视频教程中，你想要的这些全都有！

企业级大数据项目开发流程贯穿每个业务模块的讲解，囊括需求分析、方案设计、数据设计、编码实现、测试以及性能调优等环节，全面还原真实大数据项目的开发流程，对实时业务中涉及的双流Join以及Kafka精准一次性消费的问题进行了细致的讲解； 通过本套项目讲解视频学习，可掌握企业中使用Spark Streaming进行实时计算的完整流程，并掌握整个环节中涉及的各类框架技术。

Flink在大数据实时计算领域炙手可热，尚硅谷发布过Scala和Java两版Flink视频教程，深入讲解了Flink流计算思想和各种高阶实战应用。本套教程另辟蹊径，针对Flink 1.12.0版本的核心模块进行源码级讲解，从任务提交流程、通讯过程、Task调度、内存模型四大方面入手，庖丁解牛逐行分析源码，手术刀级别剖析Flink内核架构！

Hadoop是大数据技术中最重要的框架之一，是学习大数据必备的第一课，在Hadoop平台之上，可以更容易地开发和运行其他处理大规模数据的框架。尚硅谷Hadoop视频教程再次重磅升级！以企业实际生产环境为背景，增加了更全面、更细致、更硬核的生产调优手册，对源码解析部分进行了全新的扩充和升级，并增加大量企业实战案例！ 前置知识： Java基础、Maven基本操作、IDEA基本使用、Linux基础命令。

Azkaban是Linkedin公司推出的一个任务调度系统，目前在企业中应用非常广泛。本套教程全新升级，重点讲解Azkaban的安装部署及进阶使用，基于当下最主流的Azkaban版本3.x讲解；引入了官方推荐的结构更清晰、功能更丰富的flow2.0；增加了更多类型的工作流案例，讲解更全面；根据企业实际需求新增了条件工作流；新增了邮件报警，电话报警配置更加高效。

如今大数据技术蓬勃发展，Spark作为大数据处理的核心框架，是从业人员必须掌握的工具，它的底层代码就由Scala编写，同时提供了功能强大的Scala API，Flink等大数据框架同样提供了完整的Scala API，掌握Scala已成为学习大数据技术的必备技能！ 本套视频教程采用Scala 2.12版本，以项目为导向，内容详尽，通过案例驱动，由浅入深，通俗易懂，即使编程小白也可快速上手！