PingCAP 招聘季:挑战数据库的本质难题

这篇文章主要是要介绍 TiDB Architecture Team,这个团队现在需要理论基础好的,数据库方向的应届生(或者毕业时间不长的)倾向于熟悉原理的硕士研究生同学。期望能够获得一些理论上的权威性解释,比如,TPC-C 规范、事务行为的解释等。
有做过数据库研究的同学可以了解一下呀~!

以下为从微信转来的文章,最后的要求其实是对社招的要求,对于在校或应届小伙伴我们是不做这么严格的要求的,我们更期望看到你身上的潜力!

有感兴趣的小伙伴欢迎投递:hire@pingcap.com
---------------------------------------礼貌分割----------------------------------------------------------------------------
互联网时代,从衣食住行到社交娱乐,几乎所有的业务都离不开数据库服务的支撑,可以说关系数据库是信息社会中最无可替代的基础设施。作为一个基石组件,数据库系统之所以有重要的价值,其本质的原因在于数据库系统提供事务支持。

数据库的本质其实就是做三件事:转账,记账,订票。但是天下没有免费的午餐,数据库系统实现之难,也在于实现可靠而高性能的事务引擎。
实现数据库的事务系统,也就意味着郑重承诺,我们系统能够支持:
原子性:转账不能部分成功部分失败;
一致性:系统约束必须保持;
隔离性:并发事务需要保证正确处理;
持久性:数据不能丢。
另外,系统的处理能力、吞吐量,或者说系统的运行成本,都直接决定于事务引擎处理速度和能力。

简而言之,数据库系统需要提供事务保证,而且要高效地处理并发事务。更大的挑战在于,如何在基于不可靠硬件的分布式环境下,实现可靠而高效的分布式事务,提供更强高效的 OLTP 处理能力。

TiDB Architecture Team-我们在做什么?

TiDB 从一开始就定位于分布式的关系数据库,TiDB 架构组一直致力于 TiDB 事务引擎的架构设计和研发工作,不断解决分布式事务的各种挑战和难题,提升 TiDB 稳定性和 OLTP 处理能力,其中包括但不限于:

  1. 实现完整的基于 Percolator 论文的分布式事务引擎,确保分布式语境下事务原子性和一致性。将 TiDB、PD、TiKV 等分布式组件有效整合,实现基本的分布式事务原语,即两阶段提交的各个基本组成部分,对上层提供完整的事务语义接口;

  2. 并发事务的协调和处理,确保快照读取(Snapshot Isolation)的事务隔离级别。支持数据多版本(MVCC),实现数据历史版本的控制和清理;

  3. 协调事务处理资源使用,提升系统吞吐量和资源利用率,支持量级更大的事务处理能力(GB 级别)和并发控制,提供更佳的资源调度策略;

  4. 提供不同的加锁模型适配不同的业务场景,同时支持乐观锁和悲观锁的加锁模型,实现高效的优先级评估,等待唤醒,分布式死锁检测等机制;

  5. 尝试不同的提交策略,获取更好的事务处理性能,实现组提交、并行提交、一阶段提交等优化策略,提升系统响应能力和吞吐量,降低延迟;

  6. 处理分布式环境的各种异常(操作系统,磁盘,网络等),保障事务引擎的正确性和性能,实现分布式的容灾测试和异常测试,覆盖分布式环境下所有可能的异常分支,确保在各种异常情况下,分布式事务的正确推进和执行。

除此之外,架构组致力于探索新的事务和存储技术,包括但不限于:

  1. 更强大的日志模块,在实现分布式一致性协议,提供持久化保证的基础上,实现更好的性能和吞吐能力;

  2. 更强大 TiDB OLTP 处理能力,更好的复用执行计划,支持编译、向量化等执行方式,更友好的 cache 使用和更佳的指令执行效率等;

  3. 更前沿的存储技术,新的 lsm 存储引擎,新的索引结构、缓存策略和算法、新的冻结和合并处理机制等,提供更好的读写性能,以及更优的内存,磁盘空间利用率。

期待你的加入!

如果你对下面描述的任何一项,心有戚戚焉——

对分布式技术充满热情,对于 CAP 理论、一致性协议有独到的理解,热衷于解决相关的挑战和难题;

对于事务处理有较深的认识,对于传统数据库的事务、存储引擎实现有深入探究,对于事务异常,并发控制,隔离级别等有独到的理解;

有存储引擎工作的相关经验,对于索引结构,缓存策略,文件系统等有实践经历;

对于分布式执行,有创新的想法,深谙 OLTP 性能调优之道;

对于操作系统,数据库有浓厚的兴趣,期待加入 NewSQL 的浪潮。

那么, 欢迎加入 TiDB Architecture Team!和我们一起挑战在不可靠的硬件环境下实现可靠的数据库服务的终极难题,打造新一代的海量数据存储系统,实现更低成本更高性能的分布式关系数据库服务。这里是一个数据库技术和分布式技术的爱好者聚集地,高效快乐的工作的同时,你可以收获满满的个人成长,在基础核心技术领域遨游,尽情放飞想象力。

#PingCAP##校招##内推##春招#
全部评论
欢迎来贵司~🤣
1 回复 分享
发布于 2020-02-27 22:44
Java开发有机会进入贵司吗?
点赞 回复 分享
发布于 2020-03-27 13:17
其他城市的小伙伴欢迎等后续其他团队的招聘贴
点赞 回复 分享
发布于 2020-02-27 22:39
实习的话要北京或者成都的小伙伴呀
点赞 回复 分享
发布于 2020-02-27 22:39

相关推荐

评论
点赞
2
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务