新一代云原生数据库的设计与实践

语言: CN / TW / HK

数据库与操作系统、中间件组成了基础软件的三驾马车,也是企业 IT 系统必不可少的核心技术。从上世纪 60 年代诞生至今,不论是互联网行业还是银行、电信、制造等传统行业,都依赖着数据库技术的演进。

在步入云原生时代以后,传统数据库在服务可用性、数据可靠性、系统安全性、数据库备份、软硬件投入、系统托管、维护成本、部署扩容、资源利用率等关键方面都有所欠缺。在此背景下,分布式数据库系统获得了令人振奋的发展,云基础设施和数据库进一步整合,弥补了传统数据库的痛点,带来了高可扩展性、全面自动化、快速部署、节约成本、管理便捷等优势。关于数据库技术的讨论焦点已经从上云( On Cloud )到如何与云原生真正结合( In Cloud ),这是一种从外向内的转变,对于数据库而言,拥抱云原生似乎是显而易见又十分正确的道路。

业务种类繁多、数据存量大,成本居高不下;业务增速快,诉求不断变化的挑战,对数据库底层技术能力带来了更高的要求,如何设计一个面向未来的、云原生化的数据库系统?数据湖技术带来了怎样的新特性?运维告警如何智能分析与诊断?这些问题都有赖数据库与云原生工程师们的巧思妙手。

7 月 22、23 日即将举办的2022 稀土开发者大会上,由字节跳动数据库技术负责人张雷作为出品人的《新一代云原生数据库》专场演讲, 将诚邀各个大厂的核心业务专家为开发者们带来自身从业云原生数据库使用探索中的宝贵经验分享。本届开发者大会免费报名中,点击报名链接识别海报二维码即可与各位牛人分享交流。

演讲主题:云原生数据库技术趋势与英特尔最佳实践

基于紧耦合的设计方式,传统数据库系统的灵活性和伸缩性受到很大的限制。随着云原生时代的到来,资源池化,计算和存储解耦,可以按需按量使用、弹性调度资源,云原生技术下的数据库系统也成为未来技术的主流方向。云原生与分布式结合的新一代云原生数据库具备了高扩展性、易用性、迭代快速、成本降低等特点。本演讲将分析常用云原生数据库的技术流行趋势和技术架构,同时分享用户的云原生数据库部署的案例分析,包括如何采用英特尔在数据库技术上的从硬件到软件的整体能力,来帮助用户优化其云原生数据库的解决方案。

演讲大纲:

  1. 云原生数据库技术发展趋势
  2. 云原生数据库技术生态
  3. 典型云原生分布式数据库方案及英特尔最佳实践

演讲嘉宾:

任晓蕾 英特尔数据中心与 AI 事业部解决方案架构师

接近 20 年的 IT 工作经验,目前在英特尔公司担任解决方案架构师,主要的技术领域是大数据分析/数据库,在数据库和大数据类软件的架构设计和系统优化方面具有丰富的经验。

演讲主题:Apache Doris 的数据湖分析技术与应用实践

Apache Doris 是一款基于 MPP 架构的开源分析型数据库。依托其强大的并行处理能力和高性能算子,可以在海量数据集上提供亚秒级的交互式查询体验。 而近年来,随着数据湖技术飞速发展,越来越多的企业开始依托数据湖技术构建其基础数据的存储架构,并利用数据湖提供的批流一体,事务隔离和数据更新能力,沉淀了大量企业数据。 本次分享,将介绍如何基于 Apache Doris 对数据湖中的数据进行快速分析,以及 Doris 在多源数据联邦查询方面的功能和进展。帮助听众了解 Apache Doris 的数据湖分析技术细节以及如何快速构建高效的查询分析体系。

演讲大纲:

  1. Apache Doris 简介及核心功能一览
  2. Apache Doris 数据湖分析技术内幕
  3. 基于 Apache Doris 构建统一的多源数据分析系统
  4. Apache Doris 社区及未来规划

演讲嘉宾:

李继炳 SelectDB 高级软件研发专家、Apache Doris Contributor

主要从事 Apache Doris 查询层优化和数据湖相关研发工作,具有超过 10 年的大数据系统和数据库内核领域的设计与研发经验。加入 SelectDB 前,曾任百度大数据部高级研发工程师,负责 Apache Doris 元数据模块的设计与开发。后加入 AWS,负责 AWS Snowmobile EB 级数据迁移服务的设计与实现。

演讲主题:云时代下的数据库自治体系建设与实践

伴随业务的高速扩张,美团私有云数据库出现井喷,伴随而来的是大量的告警。这些告警的根因往往需要运维人员长时间的分析,并带来了不可控的时间成本以及误判风险,由此造成的小故障扩大成大事故的案例数不胜数。因此,本次的主题将会介绍如何利用实时计算能力 (Flink/Spark) 构建海量监控数据的计算和存储、基于海量数据丰富数据库的可观测性、结合专家经验 + AI 实现数据库异常发现和根因定位、让决策和处理联动提升故障自愈的能力。

演讲大纲:

  1. 数据库实例高速增长下,团队面临的主要矛盾
  2. PB 级的海量监控数据实时计算和存储能力建设
  3. 完善数据库可观测性(全量 SQL/Transaction/Lock 等)
  4. 基于 AI 的数据库异常发现、根因定位和故障自愈
  5. 实际场景中的经典案例展示

演讲嘉宾:

蔡金龙 美团基础研发平台数据库研发主管

美团数据库平台研发组负责人,负责过 SRE、KV 和 DBA 相关运维团队,主导了美团关系数据库变更和管控平台 RDS、数据库自治服务 DAS 和数据库安全防火墙 DBSS 相关项目从 0-1 的建设。目前正在构建新一代数据库智能运维平台,借助 AI 实现数据库高度自治。

演讲主题:字节云原生数据库(MySQL)的优秀技术实践

字节云原生数据库(veDB for MySQL)自 2020 年 4 月推出以来,已经在字节内部业务大量上线并即将在火山引擎平台正式公测,但由于内部业务大都从 MySQL + 本地 NVME SSD 迁移而来,使用过程中也碰到了不少的问题。比较突出的是,计算存储拉远后造成的性能问题。如何克服这些问题同时又不影响业务侧体验及口碑非常重要。本次演讲会挑选几个典型的技术案例,深入介绍 veDB (for MySQL)技术上是如何克服这些挑战的。

演讲大纲:

  1. 字节云原生数据库(MySQL)简介
  2. 技术案例一:Fast DDL
  3. 技术案例二:Hot (Extended) Buffer Pool
  4. 技术案例三:Quick Resharding
  5. 技术案例四:Parallel Query
  6. 未来技术发展方向

演讲嘉宾:

聂愿愿 字节跳动基础架构 MySQL 技术负责人

毕业于武汉华中科技大学,有 10 余年的数据库内核开发经历,曾供职于 IBM、Teradata、华为,2019 年加入字节跳动基础架构团队,目前负责 veDB (for MySQL) 技术方向及所在团队。主要关注分布式数据库、分布式存储技术方向。加入字节跳动后,从无到有参与构建了 veDB (for MySQL)产品,并已在字节内部大量上线应用。

演讲主题:Google Cloud 在云原生数据库上的实践和探索

云原生数据库的发展日新月异,“向左走,还是向右走”?Google Cloud 作为全球数据库的领导者,构建了一个日益完整的云原生数据库体系,通过持续创新、引领潮流,协助我们的用户解决诸多数据计算、存储、分析、管理所面临的挑战和问题,激发业务活力。

演讲大纲:

  1. 云原生数据库的概览
  2. Spanner 数据库带来的创新
  3. AlloyDB 在 Log is database 的探索

演讲嘉宾:

郭斌 Google Cloud 数据库架构师

多年数据库技术实践经验,精通主流关系型数据库和 NoSQL 数据库,对各类新的数据库技术有着深入的理解和丰富的实战经验,特别是近两年来和游戏公司合作较多,对游戏公司的数据库需求吃得很准,钻得很深。加入谷歌之前,曾在 Elastic、MongoDB、Oracle 担任架构师、咨询工程师等职位。

本届大会策划的专题除新一代云原生数据库以外,还包括了开源和商业化探索、大前端、低代码、业务背后的架构演进、微服务和 Serverless、云原生技术架构和变革等十数个技术专场,由来自字节、阿里、腾讯、快手等公司具备技术影响力与洞察力的行业专家负责议题把控,目前大会出品人已全部集齐,讲师阵容即将确认完毕。除了为期两天的沉浸式内容体验,稀土开发者大会还为万千开发者朋友们准备了丰厚的奖品,报名参会的开发者将有机会参与抽奖,赢取丰厚大奖, 敬请期待 。