数据库运维

会议室:光大8
出品人:陈长城(天羽)

随着互联网更加广泛的使用,数据库运维也呈现出新的形态,如利用混合云备份服务实现数... 展开 >

专题出品人:陈长城(天羽)

阿里巴巴 资深技术专家

陈长城(天羽),“数据库运维”专场出品人,阿里巴巴资深技术专家,数据库基础架构设计师,创建了阿里数据库运维体系DBFree和异地多活基础设施DRC,实现了数据库去IOE、异地多活、弹性混合云架构,完成数据库全面容器化和计算存储分离架构升级,将阿里沉淀的PaaS能力通过混合云数据库管理HDM产品服务外部,目前正带领团队做下一代架构演进,探索Autonomous Database。

专题出品人:陈长城(天羽)

阿里巴巴 资深技术专家

陈长城(天羽),“数据库运维”专场出品人,阿里巴巴资深技术专家,数据库基础架构设计师,创建了阿里数据库运维体系DBFree和异地多活基础设施DRC,实现了数据库去IOE、异地多活、弹性混合云架构,完成数据库全面容器化和计算存储分离架构升级,将阿里沉淀的PaaS能力通过混合云数据库管理HDM产品服务外部,目前正带领团队做下一代架构演进,探索Autonomous Database。

地点:光大8

专题: 数据库运维

随着互联网更加广泛的使用,数据库运维也呈现出新的形态,如利用混合云备份服务实现数据更快的备份和恢复;以容器化的方式来对数据库进行管理和调度;通过对数据库各项指标的分析和挖掘,提前预知和管控风险等,本专题将逐一探讨。

by 谭宇(茂七)

阿里巴巴 高级技术专家
阿里巴巴数据库运维发展与实践

难度系数:

困难等级star01困难等级star01困难等级star01困难等级star01困难等级star00

阿里巴巴集团拥有超大的数据库实例规模,但这些数据库实例并非一蹴而就,在快速发展的过程中我们在运维管理方面也在不断的面临变化,从物理器到容器、从独占到混布、从本地盘到存储计算分离、从集团内到大促云资源,从开源的MySQL到自研分布式数据库,运维管控进行了自我革新与进化,本次演讲将讲述数据库管控中台发展过程中遇到的问题以及我们的解决方法。

听众受益:

  1. 理解阿里巴巴的数据库管控方法与实现方式;
  2. 理解在不同规模下数据库管控;
  3. 理解容器化、存储计算分离、混部给数据库带来的好处、问题及解决方式。

by 曾国伟

百度 资深数据库架构师
百度云泛数据库管理服务X1设计与实践

难度系数:

困难等级star01困难等级star01困难等级star01困难等级star01困难等级star00

百度云数据库服务的发展经历了几个阶段:公司内部云服务、公有云服务、私有云混合云服务。对于同一类数据库管理产品,其底层技术架构类似,但产品上不同类型客户存在差异,技术上需要对接差异化的认证、资源、监控等第三方服务或平台,这需要很好地抽象技术架构层和产品层。对于不同类型的泛数据库管理服务,其均需要具备部署、灾备、监控、上线、自愈等通用能力,同时也需要对接相同的第三方服务,各数据库团队在开发和运维上重复度高而导致资源浪费。特别对于混合云场景,其需要更灵活的多云支持,快速交付客户。本次演讲将会向各位介绍百度云泛数据库管理服务X1的模型、架构设计和实践,如何通过抽象统一的管控服务来降低数据库服务产品化成本。

听众收益:

  1. 了解百度云数据库管理服务的发展历史及痛点问题;
  2. 学习百度云数据库管理服务的产品化设计思路;
  3. 理解百度云数据库管理服务的模型抽象、架构设计和实践;
  4. 为各位提供数据库管控服务设计提供思路和借鉴。

by 郭忆

网易 数据库平台开发专家,网易云 数据库产品负责人
数据库高可用架构的演进历程

难度系数:

困难等级star01困难等级star01困难等级star01困难等级star01困难等级star00

大规模数据库集群的高可用管理是数据库运维的重要内容,随着数据库技术的快速发展,数据库的高可用架构也经历着快速的演变,技术路线也展现出两个完全不同的方向,以Aurora为代表的Cloud-Native Database 让我们看到share storage 架构的数据库高可用设计;MySQL 5.7.12 发布了MySQL Group Replication 功能,作为基于Paxos协议实现的share nothing数据库架构,它与share storage 架构有着完全不同的高可用设计。


网易早在2012年就自主研发了基于同步复制技术实现的数据完全一致的高可用主从切换,并在网易内部经过了大规模实例的验证。随着MySQL 5.7.12版本的发布,网易探索了基于MGR 的多副本数据一致的高可用集群设计,并形成了自己的实践积累,目前已经在云端提供完整的多副本金融级数据库集群解决方案。

主要内容:

  1. 数据库高可用架构的发展历史;
  2. Aurora 数据库的高可用架构设计;
  3. MGR 高可用架构及实现原理;
  4. 网易基于MGR的金融级多副本数据库高可用设计。

听众受益:

  1. 掌握数据库高可用架构的最新进展;
  2. 为大规模数据库高可用集群管理技术选型提供思路;
  3. 为基于MGR 的高可用架构设计提供实践经验;
  4. 理解网易的数据库高可用架构设计。

by 戴骁雄

美团点评 高级 DBA
美团点评的Redis运营与实践

难度系数:

困难等级star01困难等级star01困难等级star01困难等级star01困难等级star00

主要内容:
·简介
·Redis服务在美团点评的现状(如响应时间、可用性、调用量增长趋势等)
·如何支撑业务的飞速发展呢?

1. 业务接入的规范化管理,包括category以及key命名规范

  • a. category概念,key命名规范
  • b. 面向开发提供了针对category的自助工具,解决日常工作的需求(数据查询、数据清理、数据统计等)

2. 对redis常见的隐患进行持续运营

  • a. 大key治理(大key发现、大key指数定义、自助清理、迁移slot判断大key产生影响)
  • b. 热key(热key发现、一键本地缓存、自动迁移热key、禁流)
  • c. 容量不足(自动扩容、容量优化方面的一些实践)

3. 服务端和客户端的优化改进,以适应美团点评的业务环境

  • a. 服务端 - 支持集群间数据同步
  • b. 服务端 - 新增部分api接口
  • c. 服务端 - slowlog功能扩展
  • d. 客户端 - 多语言client支持
  • e. 客户端 - 多种路由策略及自动更新机制

·未来规划

听众受益:

  1. 了解到redis运营过程的一些常见坑以及优化治理手段;
  2. 了解redis适用于哪些应用场景,以及容量相关的最佳实践;
  3. 了解到一些redis服务端客户端的不足,以及美团点评时如何处理及解决的。
本网站图片存储由七牛云独家支持