Skip to content

Kafka Beijing Meetup第三次活动(核心开发+资深同行分享)

Photo of Zhun Shen
Hosted By
Zhun S. and Guozhang W.
Kafka Beijing Meetup第三次活动(核心开发+资深同行分享)

Details

签到开始时间: 下午1:45

活动安排:

  1. 开场介绍, 申准, 5miles (https://www.5milesapp.com/) (5min)

  2. Kafka开发:那些年我们踩过的坑,王国璋,Confluent (https://www.confluent.io/) (30min)

  3. Kafka在工业大数据管理中的应用,徐地,昆仑数据 (http://www.k2data.com.cn/)(30min)

4.中场休息&讨论(15min)

  1. Jitney:Airbnb基于Kafka的消息总线,张振, Airbnb (http://nerds.airbnb.com/)(30min)

  2. 大数据流式处理平台上的Kafka实践,胡夕(30min)

非常感谢一下科技和美团的朋友帮忙申请活动场地!

=================

分享人介绍:

王国璋,Apache Kafka PMC 成员。现就职于 Confluent,任 Kafka Streams架构师和技术负责人。此前曾就职于LinkedIn分布式数据平台组软件工程师,主要负责实时数据处理平台,包括 Apache Kafka 和 Apache Samza 系统的开发与维护。

题目:关于Kafka开发,那些年我们踩过的坑

------------------

徐地。2012年毕业于中国科学院计算技术研究所,计算机系统结构专业,获博士学位。2012年加入IBM中国研究院,研究方向为分布式系统和云计算技术。2015年以联合创始人身份加入昆仑数据,任职资深开发工程师和技术经理,从事工业大数据管理和工业云平台研发工作。

题目:Kafka在工业大数据管理中的应用
内容:
1 使用kafka进行工业数据接入
1.1 工业数据接入场景数据特点和接入特点;
1.2 KMX数据接入对Kafka的使用(元数据同步集成、topic划分、分区等);
2 Kafka Streams在工业数据管理场景中的应用案例
2.1 使用流计算做数据etl
2.2 云端协同模式下的端实时计算
3 未来方向

------------------

张振,现就职于Airbnb中国基础构架组软件工程师,负责Airbnb中国产品相关的基础构架和后端服务。此前分别是Airbnb大数据基础构架组和领英分布式数据平台组软件工程师,同时也是Apache Helix项目的初创成员和PMC之一。

题目:

Jitney:基于Kafka的消息总线

在Airbnb,Kafka作为统一的pub-sub系统有着广泛的应用。随着Airbnb业务的快速增长,Kafka的集群规模不断增大,接入的服务系统也越来越多,直接基于Kafka的使用方式逐渐不能满足应用需求。因此,Airbnb的Kafka团队开了基于Kafka的消息总线系统Jitney。Jitney主要提供了标准化的消息格式,不同语言的一致客户端,便捷的使用和配置,以及统一的监控。演讲主要分享Jitney的设计需求和主要模块,以及Jitney在Airbnb的一些应用场景。

------------------

胡夕,8年分布式系统架构和开发经验,曾负责IBM重要产品的研发和技术支持。在搜狗任职期间主导构建了大数据分布式流式处理平台,为实时提供业务决策提供了重要支撑。后在微博带领团队参与构建了微博混合云项目核心模块的设计与研发,成功应对春晚峰值流量。

题目: 大数据流式处理平台上的Kafka实践

------------------

Photo of Beijing Kafka Meetup group
Beijing Kafka Meetup
See more events
北京市朝阳区望京东路6号望京国际研发园FG座一层中华厅 · Beijing