巨杉数据库TechDay回顾 | 海量数据下分布式数据库设计实践

╰+哭是因爲堅強的太久メ 2023-01-11 01:17 103阅读 0赞

内容整理自2019年3月30日巨杉TechDay技术沙龙活动。

**演讲概述**

在海量数据管理需求下，数据库的应用实践成为目前数据库领域大家最关注的问题之一。本次分享将带来，原生分布式数据库如何实现SQL兼容以及数据原生分布式，同时原生分布式数据库与分库分表、中间件等方法的对比。点击[链接][Link 1]观看演讲视频

**嘉宾视点**

**Danny**

巨杉数据库北美研发实验室核心技术专家，资深数据库内核工程师、架构师。有超过20年的数据库核心研发经验，曾经作为DB2 内核研发团队成员参与了DB2 ，DPF等产品的架构设计和研发工作。

**>>数据库这样的基础软件，开发的技术难点是什么？**

从技术上来说，在40多年的发展中，数据库软件/平台已经成为一个功能复杂，架构庞大，安全要求很高的庞大软件产品体系。因此，技术上既需要积累，也需要创新。

在业务技术架构上，企业级数据库需要有很强的兼容能力，不但可以保证旧业务的运行，还可以不断地推陈出新。这种创新是必须的，但在技术上却又是最难的。

**>>海内外基础软件研发有什么不同？**

相对来说，海外拥有技术人才的基础，也有像IBM、Oracle这样的体系的沿袭，所以现在北美很多新一代基础软件产品团队其实还是围绕了老一辈的“老司机”构建的。国内基础软件的人才积累还不够，无论是互联网还是科研团队想要自成一派，还需要时间。

目前，我们巨杉的研发团队拥有以王涛为代表的很多来自IBM DB2、华为等团队的核心技术专家，是技术基因和技术创新很好的结合。

**>>作为“老IBM”，您认为数据库核心团队应该是怎么样的？**

我认为数据库核心研发团队的基因很重要，在IBM DB2的十几年里，我感受最深的就是技术底蕴和沉淀。

简单说，数据库基础软件就是创新技术和技术经验积累的融合体，一款优秀的企业级数据库产品，其技术团队必然拥有传统数据库的开发经验，这也是技术老炮儿存在的作用与价值。从技术基因上看，IBM DB2是三大传统关系型数据库中唯一的分布式产品，因此我们团队在分布式技术方面的积累是一脉相承的。

**>>您眼中的数据库发展方向是？**

数据库真正面临的痛点是“微服务”下，数据服务的资源池化。单纯为了分布式的 OLTP 只是解决了不构成刚需的问题（分库分表早可以解决），但是在微服务应用开发的环境下，数据库更是要从资源池化的角度对上层提供服务，同时资源池中的每个数据库实例内部也要支持分布式交易等一系列特性，做到与传统数据库的全兼容。

**演讲PPT**

![图片][d8d28b049da61fd6f4285b46369b96ec.png]

![图片][fb72c8b7f2db71e30d66e70e7808026c.png]

![图片][934cbb035cfc4cbd653f0723404bd410.png]

![图片][b0694badcd8047edd116cb3c6fa9897e.png]

![图片][8a2aa3b1c61ab0a43c80cac566f7d656.png]

![图片][3cd4ea530a84f802969adc4da92f5a15.png]

![图片][f2bec09fd14b13b4e775952fd8d8c6bf.png]

![图片][cb9154d9931ea3940267fd4ec7e34add.png]

**……**

**关注巨杉数据库SequoiaDB公众号**

**回复“****0330****”即可下载****完整PPT**

**![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1NlcXVvaWFEQl9PZmZpY2lhbA_size_16_color_FFFFFF_t_70][]**

[Link 1]: https://v.qq.com/x/page/b0859r2o9da.html
[d8d28b049da61fd6f4285b46369b96ec.png]: /images/20221119/e97bdaf410b24e978dc3c3167689482e.png
[fb72c8b7f2db71e30d66e70e7808026c.png]: /images/20221119/c679979328a14882b8cff2aae5e3bd77.png
[934cbb035cfc4cbd653f0723404bd410.png]: https://img-blog.csdnimg.cn/img_convert/934cbb035cfc4cbd653f0723404bd410.png
[b0694badcd8047edd116cb3c6fa9897e.png]: https://img-blog.csdnimg.cn/img_convert/b0694badcd8047edd116cb3c6fa9897e.png
[8a2aa3b1c61ab0a43c80cac566f7d656.png]: https://img-blog.csdnimg.cn/img_convert/8a2aa3b1c61ab0a43c80cac566f7d656.png
[3cd4ea530a84f802969adc4da92f5a15.png]: https://img-blog.csdnimg.cn/img_convert/3cd4ea530a84f802969adc4da92f5a15.png
[f2bec09fd14b13b4e775952fd8d8c6bf.png]: https://img-blog.csdnimg.cn/img_convert/f2bec09fd14b13b4e775952fd8d8c6bf.png
[cb9154d9931ea3940267fd4ec7e34add.png]: https://img-blog.csdnimg.cn/img_convert/cb9154d9931ea3940267fd4ec7e34add.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1NlcXVvaWFEQl9PZmZpY2lhbA_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20210125162607924.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1NlcXVvaWFEQl9PZmZpY2lhbA==,size_16,color_FFFFFF,t_70