会议详情 |
推荐会议:QCon上海2025|全球软件开发大会
发票类型:增值税普通发票 增值税专用发票
课程简介
a) 结合实战分析大数据系统的基石——Zookeeper的实现原理以及典型使用场景,如分布式配置管理,领导选举,分布式锁
b) 分析分布式系统的消息路由策略以及如何解决数据倾斜问题
c) 从Kafka 0.8到0.10的数据复制与领导选举策略的演进,分析通用分布式系统中典型的复制与领导选举的关键技术及解决方案
d) 分析Kafka 0.8到0.10的Consumer Group Rebalance方案的演进——从分布式“自各为政”选举到集中式“统一决策”选举
e) 分析流式处理系统的新贵——Kafka Stream的原理及其与其它流式处理系统的区别
f) 介绍Kafka Producer/Consumer的用法
g) 介绍如何使用Kafka实现正好一次(Exactly Once)处理语义
h) 介绍Kafka Stream的使用注意事项
i) 介绍如何将Kafka与其它主流分布式系统,如Hadoop、Spark,集成
目标收益
a) 掌握Kafka的Producer/Consumer的用法及与其它系统集成的方案
b) 初步掌握如何使用Kafka Stream开发流式处理应用
c) 掌握Kafka的复制和领导选举策略,并了解分布式系统一致性解决方案
d) 能够理解并掌握分布式产品选型方法
培训对象
a) 大数据产品开发工程师
b) 大数据运维工程师
c) 大数据架构师
麦思博(msup)有限公司发源美国西雅图,2007年创办,是一家面向技术型组织的培训咨询机构,服务于技术团队的技能提升、软件工程的实际应用和产品品质的创新与超越。强调人员、技术、流程和管理的有机结合,注重角色岗位的技能提升与职业发展,以及技术团队复合管理与协作。每年超过1000家企业续单参与msup旗下公开课、工作坊、案例研究、国际游学等培训项目。
课程大纲
Kafka架构 | 1.1 Kafka整体架构 |
Kafka高可用原理 | 2.1 Kafka面临的CAP问题 |
Consumer Rebalance方案演进 | 3.1 为什么需要Rebalance |
Kafka Stream | 4.1 Kafka Stream架构 |
| 5.1 重新分配Replica |
Jason
多年Kafka/Hadoop/Spark研究、应用及调优经验。现从事大数据平台(集群规模两万加)优化工作。高性能Java应用架构与设计
敏捷团队建设与管理
数据库、数据仓库的设计与优化
分布式应用架构与开发
大数据系统(如Kafka、Hadoop和Spark)架构与开发
会务费:5800元/人,含参会费,住宿交通自理。
相关会议
2025-10-23上海
2025-04-25深圳