【SDCC讲师专访】阿里云数据库技术组数据库专家彭立勋:阴差阳错的走上MySQL之路...

本文主要是介绍【SDCC讲师专访】阿里云数据库技术组数据库专家彭立勋:阴差阳错的走上MySQL之路...,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

2016年3月18日-19日,由CSDN重磅打造的数据库核心技术与实战应用峰会、互联网应用架构实战峰会将在上海举行。在大会召开之际,CSDN将采访一些与会讲师,谈谈他们将在会上分享的内容。


本期我们采访的讲师是彭立勋先生,阿里云数据库技术组数据库专家,负责维护阿里云RDS MySQL版本分支,曾在阿里巴巴B2B担任高级MySQL DBA。Oracle ACE for MySQL。国内唯一的MariaDB源码提交者,为数不多的MySQL源码贡献者。向官方提交了Multi-Source Replication,Thread Memory Usage Monitor等功能补丁。

图片描述

阿里云数据库技术组数据库专家 彭立勋

彭立勋在这次专访中谈到:“越是乐于分享越能够提升自己技术储备的完备性。”届时,他将在数据库核心技术与实战应用峰会中带来《阿里云RDS for MySQL的若干优化》的干货分享。在大会召开前夕,我们CSDN小编有幸请到了他来做了一次简单的专访,以下为专访具体内容:

CSDN:首先请简单介绍下自己、公司以及目前所负责的领域。

彭立勋:我的MySQL之路开始于2009年,那时候我还没毕业,在途牛旅游网实习当MySQL DBA,本来之前我学的是Oracle,但是就这样做起了MySQL。毕业后就到阿里巴巴B2B继续做MySQL相关的工作,本来我也是面Oracle DBA的,阴差阳错又被分去搞MySQL了。当时B2B正好处在从Oracle迁移到MySQL的起步阶段,非常幸运经历了这个阶段,积累了很多MySQL实战的经验,在这个过程中,也开始发现MySQL的一些不足,因为多年编程的底子,于是着手开始研究MySQL的源码,并尽可能做一些符合业务期望的修改,逐渐就走上了MySQL内核开发这条路。

我现在负责阿里云RDS for MySQL产品的MySQL源码开发,阿里云目前是国内最大的云服务商之一,RDS也是阿里云的拳头产品之一。在MySQL云平台的构建过程中,我们遇到了很多挑战,内部使用因为有DBA控制把握风险,所以MySQL的一些缺陷表现并不明显,可以通过审核规避,但是对于外部用户,使用相对随意,所以很多MySQL的缺陷都会暴露无遗,甚至会触发一些非常极限的Bug,这对MySQL源码的把控能力提出了很高的要求,这是挑战也是很大机遇,欢迎对MySQL非常痴迷的同学能加入我们的Team,一起探索。

在业余时间,为了推广MySQL,我也参与了ACMUG(MySQL中国用户组)的组建,担任副主席和杭州地区的组织者,负责组织会议和社区推广。

CSDN:我们知道阿里云数据库技术组云集了国内外顶级专家,您作为其中一员,能否给我们谈谈如何才能成为优秀的数据库专家?与这些优秀的大牛共事给你最大的感悟是什么?

彭立勋:我刚进入阿里 DBA团队时,团队里都是只闻其名未见其人的顶级数据库专家,像童家旺、张瑞、简朝阳这些DBA圈内最著名的专家,他们都很乐于分享,带我这个刚毕业的菜鸟入门,给了我很大的帮助,无论是技术上还是经验上。后来到了阿里云数据库技术组,从DBA转型到专门的MySQL内核开发,从他们身上,我看到了优秀的数据库专家所应该具备的品质,乐于分享,从不以技术作为壁垒,因为给别人讲解的过程,也是自己梳理的过程,可能会发现错误、遗漏,越乐于分享越能提升自己技术储备的完备性。另外一点就是知识全面,一个优秀的数据库专家绝不可能只是一个纯粹的数据库专家,数据库作为系统架构中核心的一环,与硬件、系统、应用都有紧密的结合,要能全面的看待数据库,必须掌握这些相关的知识,只看数据库本身是远远不够的。最后就是要胆大心细,数据库承载着数据,任何一个操作都有可能带来不可挽回的后果,但是也不能故步自封,什么都不做可能不会出问题,但是技术和经验也永远不会积累。每一次操作都是一次积累,每一次架构的升级,都是技术提升的机会,不要怕去做,但是要做好充足的预案,事前做足够的演练,以最仔细的态度做最小的事情。

CSDN:你所负责维护的阿里云RDS MySQL版本分支主要运用在哪些架构层面上?在整个数据库架构中又承担着哪些作用呢?

彭立勋:阿里云RDS售卖的所有MySQL版本都是我们自己构建的分支,直接承载着用户的数据。为了配合RDS的整体架构,我们必须为MySQL做很多适配,以让用户使用起来跟直接用数据库一样感受不到什么区别,透明中间层。

同时为了增强产品的竞争力,我们还对MySQL的性能做了大量的优化,部分优化还被官方采用。

CSDN:那么在你看来,如何构建高并发网站中的数据库?其中有哪些技术难点和挑战?

彭立勋:以我的经验,高并发系统中,绝大部分优化来自于应用端,数据库本身能做的优化其实所占的比例是很小的。所以当数据库遇到瓶颈,首先需要从应用上找优化的点,是否存在不需要的访问可以去掉,是否存在不需要的数据可以删除,还有不常用的非实时的SQL和数据可以和实时数据分开存储,同时在表结构设计上也需要考虑这些问题,大字段和常用字段可以分开存储,添加合适的索引减少SQL访问的行数,优化SQL写法配合优化器做出正确的判断,正确的调整MySQL的参数配置。

最大的难点我觉得就是定位瓶颈的根本原因,例如发现IO占用很大,可能本质问题是内存太小了导致命中率不足,也可能是存在大范围扫描在污染Buffer Pool,定位到正确的原因才能选择正确的解决方式,这是需要很多经验在其中配合分析的。

CSDN: 据我了解,您是国内唯一的MariaDB源码提交者,为数不多的MySQL源码贡献者,那么在日常工作中你是如何保持对这些技术追捧的?

彭立勋:首先要对自己的工作感兴趣,所做的工作不是兴趣所在,肯定是没办法专注的。其次就是要积极参与社区,多看看社区的进展,多跟人交流。自己再牛,不分享出来,不参与社区,也没有人知道这个牛人的存在。

CSDN:除了这些,你还会关注哪些技术热点?

彭立勋:跟数据库上下游相关的技术点都会看一下,但是我不是一个喜欢跟风的人,所以热点我不一定关注。像存储技术的更新换代,SSD的产品迭代,NVMe标准,都会看一看,还有MySQL在非x86架构上的支持,也是比较关注的点。

CSDN:你在本次SDCC数据库峰会上分享的话题是?

彭立勋:我这次分享的话题是阿里云MySQL分支版本的一些改进。会介绍一些我们团队对MySQL安全性,性能,可用性等各个维度上的改进。

CSDN:你最期待在本次SDCC数据库峰会上听到哪些内容呢?

彭立勋:我希望听到业内对数据库应用方面的一些创新观点和应用,是否能对MySQL现有的架构体系提出一些新的思考和探索。


SDCC的精彩正在继续,2016年3月18日-19日,数据库核心技术与实战应用峰会、互联网应用架构实战峰会将在上海召开,我们静候您的到来。大会官网(含购票)

这篇关于【SDCC讲师专访】阿里云数据库技术组数据库专家彭立勋:阴差阳错的走上MySQL之路...的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/730712

相关文章

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

SQL中的外键约束

外键约束用于表示两张表中的指标连接关系。外键约束的作用主要有以下三点: 1.确保子表中的某个字段(外键)只能引用父表中的有效记录2.主表中的列被删除时,子表中的关联列也会被删除3.主表中的列更新时,子表中的关联元素也会被更新 子表中的元素指向主表 以下是一个外键约束的实例展示

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

如何去写一手好SQL

MySQL性能 最大数据量 抛开数据量和并发数,谈性能都是耍流氓。MySQL没有限制单表最大记录数,它取决于操作系统对文件大小的限制。 《阿里巴巴Java开发手册》提出单表行数超过500万行或者单表容量超过2GB,才推荐分库分表。性能由综合因素决定,抛开业务复杂度,影响程度依次是硬件配置、MySQL配置、数据表设计、索引优化。500万这个值仅供参考,并非铁律。 博主曾经操作过超过4亿行数据

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题,本文将一起从代码层去分析为什么没有建立索引? 开源ERP项目地址:https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置

MySQL数据库宕机,启动不起来,教你一招搞定!

作者介绍:老苏,10余年DBA工作运维经验,擅长Oracle、MySQL、PG、Mongodb数据库运维(如安装迁移,性能优化、故障应急处理等)公众号:老苏畅谈运维欢迎关注本人公众号,更多精彩与您分享。 MySQL数据库宕机,数据页损坏问题,启动不起来,该如何排查和解决,本文将为你说明具体的排查过程。 查看MySQL error日志 查看 MySQL error日志,排查哪个表(表空间

阿里开源语音识别SenseVoiceWindows环境部署

SenseVoice介绍 SenseVoice 专注于高精度多语言语音识别、情感辨识和音频事件检测多语言识别: 采用超过 40 万小时数据训练,支持超过 50 种语言,识别效果上优于 Whisper 模型。富文本识别:具备优秀的情感识别,能够在测试数据上达到和超过目前最佳情感识别模型的效果。支持声音事件检测能力,支持音乐、掌声、笑声、哭声、咳嗽、喷嚏等多种常见人机交互事件进行检测。高效推

【专题】2024飞行汽车技术全景报告合集PDF分享(附原数据表)

原文链接: https://tecdat.cn/?p=37628 6月16日,小鹏汇天旅航者X2在北京大兴国际机场临空经济区完成首飞,这也是小鹏汇天的产品在京津冀地区进行的首次飞行。小鹏汇天方面还表示,公司准备量产,并计划今年四季度开启预售小鹏汇天分体式飞行汽车,探索分体式飞行汽车城际通勤。阅读原文,获取专题报告合集全文,解锁文末271份飞行汽车相关行业研究报告。 据悉,业内人士对飞行汽车行业

MySQL高性能优化规范

前言:      笔者最近上班途中突然想丰富下自己的数据库优化技能。于是在查阅了多篇文章后,总结出了这篇! 数据库命令规范 所有数据库对象名称必须使用小写字母并用下划线分割 所有数据库对象名称禁止使用mysql保留关键字(如果表名中包含关键字查询时,需要将其用单引号括起来) 数据库对象的命名要能做到见名识意,并且最后不要超过32个字符 临时库表必须以tmp_为前缀并以日期为后缀,备份

金融业开源技术 术语

金融业开源技术  术语 1  范围 本文件界定了金融业开源技术的常用术语。 本文件适用于金融业中涉及开源技术的相关标准及规范性文件制定和信息沟通等活动。