从简单到复杂:Apache Kafka应用实例详解

来源:互联网 发布:网络语取向狙击 编辑:程序博客网 时间:2024/05/16 00:42

讲师:Jiangjie Qin (linkedin corp)

09:00–12:30 周四, 2017-07-13

数据工程和架构

地点: 多功能厅8A+8B

观众水平:中级


必要预备知识

观众需要对数据基础架构有基本了解。演讲本身会尽可能由浅入深。


您将学到什么

观众将会学习如何使用合理使用Kafka来解决实际需求。


描述

1. Apache Kafka简介

1.1 Kafka的基本概念(Topic,Partition,Offset)

1.2 Kafka的数据生命周期(Producer,Broker,Consumer)

1.3 Kafka的特性(high throughput,low latency,persistency,replication)

1.4 Kafka的功能接口


2. Kafka的应用实例

2.1 数据流水线

2.2 流处理(如果Kafka 0.11在演讲时已发布将会介绍transaction support)

2.3 数据库备份

2.4 CDC


3. Kafka的运维

3.1 如何判断一个Kafka Cluster是否健康(核心指标)

3.2 如何对Kafka Cluster进行性能分析

3.3 LinkedIn的Kafka运维工具


讲师介绍

Jiangjie Qin (linkedin corp)


Jiangjie Qin is from data infrastructure team at LinkedIn. He has been working on Apache Kafka and is a Kafka Committer. Jiangjie graduated from CMU with Master’s degree in Information Networking from INI in 2014. Before that, he worked in IBM for four years, where he managed IBM zSeries platform for banking clients.




Strata Data Conference北京站已经打开注册系统,阅读原文可浏览截止到目前为止的讲师名单和已经确认的议题,最优惠票价期截止到5月5日为止尽快注册以确保留位


阅读全文
0 0