TiKV internal、 基于 Kafka 的数据处理微服务链 | Meetup No.109 回顾

网友投稿 453 2019-07-31

内容来源:http://mp.weixin.qq.com/s?__biz=MzI3NDIxNTQyOQ==&mid=2247489299&idx=2&sn=89befe4c2db6d8bc2c52cd6e2d20fdf7&chksm=eb163079dc61b96f52f75617cbfa59e45ab0aec376b49c93218369ac77721384daf8f69de483#rd


上周六,我们在成都举办了 Infra meetup No.109,我司 TiKV 研发工程师屈鹏为大家深入介绍了 TiKV 的内部工作原理及当前正在实现的一些新特性;同时来自 LogicMonitor 成都研发中心首席架构师高原分享了如何构建以 Kafka 为中心的数据处理微服务链。以下是视频&文字回顾,enjoy~


Infra Meetup No.109 成都

后台回复“109“获取本期 PPT 链接


1. TiKV internal: How to build a distributed transactional Key-Value storage engine


屈鹏 | TiKV 研发工程师


屈鹏老师的分享主要内容包括:

1. TiKV service 层的主要实现,以及相关的 gRPC 的原理、特性及适用方式;

2. TiKV 分布式冗余复制模块的实现方式及 Raft 算法的基本工作原理及一致性保障;

3. TiKV 分布式事务的实现算法及相关的优化。

同时,介绍了当前正在实现的一些新的特性,方便大家参与到 TiKV 的使用与开发中来。

* 视频回顾:


2. 构建基于 Kafka 的数据处理微服务链


高原 | LogicMonitor 成都研发中心首席架构师

在《构建以 Kafka 为中心的数据处理微服务链》的主题中,高原老师分享了如下内容:
1. logicmonitor 的 SaaS 模式的 IT 监控业务形态与架构特点,以及历史上如何以水平分割的方式达到日 TB 级数据处理能力。
2. 在更高的数据处理能力需求下,如何辨别并定义务实的系统的演化目标,并按照 AKF 扩展矩阵的思路进行顶层设计。
3. 如何利用 Kubernates 及 ingress 组件来保证可伸缩性与数据的时序要求。
4. 如何用 Kafka 来达到消峰,水平扩展,故障切换等架构需求。
在整个分享中,除具体技术要点,也贯穿着如何识别问题,再针对问题研究技术路线的方法论,可供大家作为解决复杂问题的方法借鉴。
* 视频回顾:

PingCAP Infra Meetup


作为一个基础架构领域的前沿技术公司,PingCAP 希望能为国内真正关注技术本身的 Hackers 打造一个自由分享的平台。自 2016 年 3 月 5 日开始,我们定期在周末举办 Infra Meetup,与大家深度探讨基础架构领域的前瞻性技术思考与经验,目前已在北京、上海、广州、成都、杭州、深圳、西安等地举办。在这里,我们希望提供一个高水准的前沿技术讨论空间,让大家真正感受到自由的开源精神魅力。

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:告别「热」情的大武汉,TiDB TechDay 2019 收官站杭州见!
下一篇:微众银行数据库架构演进及 TiDB 实践经验
相关文章