Pulsar来了 | Apache Pulsar Meetup · 上海站预约报名-活动-活动行

活动内容收起 展开

背景

今年十月，我们在北京举办了国内首场Apache Pulsar Meetup，为社区小伙伴讲解了Apache Pulsar的技术细节，以及Pulsar在生产线上的生产实践，现场反响热烈。为了响应上海小伙伴的号召，以及让更多开发者接触和了解Pulsar，Streamlio再次联合智联招聘、示说网，把Apache Pulsar Meetup带到上海。

这次的Meetup，除了整体介绍Apache Pulsar之外，智联招聘的小伙伴们还带来了他们全新的生产经验，以及 Pulsar+Flink在智联搜索推荐中的应用，同时Streamlio的小伙伴将会详细讲述怎么使用Pulsar打造实时数据Pipeline，为大家解构Pulsar强大的生态组件 - Functions/IO, Schema 以及最新发布的Pulsar SQL。

希望这半天，能满足你对Apache Pulsar的所有好奇。期待上海的小伙伴们过来撩。

线上直播

由于网站技术故障，暂时不能提供直播

https://www.itdks.com/liveevent/detail/17686

活动议程

13:00 - 13:30

签到

13:30 - 14:30

Cloud-Native Messaging & Streaming with Apache Pulsar

翟佳 | Streamlio创始团队成员，Apache Pulsar/BookKeeper PMC成员

14:30 - 15:10

Apache Pulsar在智联搜索推荐中的应用

李世明 | 智联招聘平台架构组工程师

15:10 - 15:30 茶歇&交流

15:30 - 16:20

Database Streaming with Apache Pulsar -- Connector, Schema and SQL

郭斯杰 | Streamlio联合创始人，Apache Pulsar/BookKeeper PMC成员

16:20 - 17:00

Apache Pulsar实践经验以及社区参与总结

李鹏辉 | 智联招聘平台架构组工程师,Pulsar Contributor

17:00 - 17:30

自由交流

演讲详情

Cloud-Native Messaging & Streaming with Apache Pulsar

翟佳 | Streamlio创始团队成员，Apache Pulsar/BookKeeper PMC成员

概要

Apache Pulsar 是下一代分布式消息和流数据平台。它于 2016 年由雅虎开源，并于 2018 年成为 Apache 顶级项目。Apache Pulsar 目前已被广泛采用在各大互联网关键业务，比如在线业务服务，流计算，实时交互式分析等。

本次分享将全面介绍 Apache Pulsar，包括Yahoo为什么要创建Pulsar，Pulsar跟其他系统的不同之处，它如何使用云原生技术解决使用和运维过程中碰到的各种痛点，以及Pulsar在2.0之后加入的大量流相关特性，和目前社区的状况以及相应的应用场景。

Apache Pulsar在智联搜索推荐中的应用

李世明 | 智联招聘平台架构组工程师

概要

智联简历职位搜索的数据有上亿条，需要支持所有职位、简历的数据变更实时同步到和搜索和推荐服务。所以需要寻找一个强大的消息系统，来支撑每天大量的职位、简历的更新、刷新，和一些商业事件。

通过Apache Pulsar的租户模式可以方面管理每个业务端的对接。Pulsar的高可用、一致性、签收机制以及其他特性非常便捷的满足了搜索推荐服务的要求。

本次Talk主要分享Pulsar在智联的搜索推荐的应用。

Database Streaming with Apache Pulsar -- Connector, Schema and SQL

郭斯杰 | Streamlio联合创始人, Apache Pulsar/BookKeeper PMC成员

概要

批量模式的ETL Pipelines是将数据从OTLP数据库导入到OLAP数据库的常用方案。但是这种方式并不适合对于实时数据分析有强烈需求的用户场景。因此，针对于有实时数据分析需求的用户场景，越来越多的企业开始使用CDC（Change Data Capature）和消息中间件打造流式的数据Pipeline。

本次演讲将以Apache Pulsar为例，分享一下如何基于Pulsar打造流式的数据Pipeline。这其中将介绍Pulsar的三个生态组件：IO Connectors，Schema，以及Pulsar SQL；以及如何将这三个组件串联在一起：

- 使用Pulsar的CDC Connector将数据库的Changes抓取到Pulsar中；

- 使用Pulsar内嵌的Schema来管理这些CDC数据的Schema；

- 使用Pulsar SQL进行交互式的实时查询。