分布式数据库DDB introduce

2023-10-29 12:31

本文主要是介绍分布式数据库DDB introduce,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

DDB(Distributed database)是网易杭研院立项最早,应用最为广泛的后台产品之一,也是国内最早出现的基于现有database之上开发的分布式数据库中间件,目前依然在为网易易信,云音乐,云阅读等大型互联网产品提供稳定的数据库服务。业界中同类型的产品有阿里集团的TDDL,阿里B2B的cobar等。

DDB主要以两种方式向应用方提供服务:

一种是以JDBC的jar包形式为JAVA应用提供直接依赖,JAVA应用(如tomcat)通过依赖DDB提供的JDBC包实现透明访问分布式数据库集群中的各个分库分表,这种服务方式与淘宝TDDL如出一辙,我们称之为中间件模式。

另一种方式是为应用部署独立的DDBProxy服务来满足应用分库分表的需求,在这种方式下,应用通过标准JDBC访问Proxy,而Proxy则根据MySQL标准通信协议对客户端请求解析,还原应用SQL请求,然后通过本地的DDB JDBC访问数据库集群,最后再将得到的结果根据MySQL标准通信协议编码返回给客户端。这种服务方式与B2B的cobar以及现在阿里云的DRDS类似,不同的是DDB的Proxy与DDB在语法特性上一脉相承,而根据目前已有的资料来看,与TDDL相比DRDS在语法特性和事务支持上是有所阉割的。

DDB的中间件模式概念架构:

dbi architecture

dbi architecture

DDB Proxy概念架构:

proxy architecture

proxy architecture

DDB支持的语法功能:

  1. General Insert(support batch, on duplicate key..), update, delete, replace, select(with alias)
  2. Global group by, order by, limit, having
  3. Global aggregate: max, min, count, avg, concat
  4. Global incremental id
  5. Multiple table join(limited), union
  6. Subquery(need trade off sometimes)

一些语法细节上DDB无法支持,如全局跨表表达式:select A.num + B.num from a, b where …,其中A和B都是跨库的表,这种类似功能我个人认为在中间件层面是难以实现的,或者说即使实现了对实际应用场景也是不可用的。

总体来说,DDB的语法集属于“大而全”的类型,对一些情况如limit一个很大的数据所带来的性能折损,需要DBA帮助应用去优化SQL写法,或者直接在SQL审核中砍掉。对分布式数据库来说,DBA的把关至关重要,尤其在表模式设计和均衡字段选择上,一旦一张表的均衡字段选择和表设计上存在疏漏,会给应用未来的开发造成极大的困扰。

无论是阿里系的各种分布式数据库(TDDL, DRDS, OceanBase)还是DDB,又或是其他公司自研项目如youtube Vitess和google spanner,它们的运维和学习成本要比传统数据库高很多,不同系统在功能,性能以及高可用架构上的取舍体现了不同开发团队的品味。

最后贴一个facebook来交流时给老大写的一个PPT,简单介绍了下DDB中各种概念和整体架构,分享给有兴趣的同学。

DDB-introduce ppt

BTW,DDB目前是网易非开源项目(根据上层的意思,以后可能会开源,或向其他公司提供服务,日期未定),但是欢迎有兴趣的同学多多交流 ~_~


http://www.majin163.com/2014/09/24/ddb-introduce/

这篇关于分布式数据库DDB introduce的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/300658

相关文章

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

MySQL数据库宕机,启动不起来,教你一招搞定!

作者介绍:老苏,10余年DBA工作运维经验,擅长Oracle、MySQL、PG、Mongodb数据库运维(如安装迁移,性能优化、故障应急处理等)公众号:老苏畅谈运维欢迎关注本人公众号,更多精彩与您分享。 MySQL数据库宕机,数据页损坏问题,启动不起来,该如何排查和解决,本文将为你说明具体的排查过程。 查看MySQL error日志 查看 MySQL error日志,排查哪个表(表空间

深入理解数据库的 4NF:多值依赖与消除数据异常

在数据库设计中, "范式" 是一个常常被提到的重要概念。许多初学者在学习数据库设计时,经常听到第一范式(1NF)、第二范式(2NF)、第三范式(3NF)以及 BCNF(Boyce-Codd范式)。这些范式都旨在通过消除数据冗余和异常来优化数据库结构。然而,当我们谈到 4NF(第四范式)时,事情变得更加复杂。本文将带你深入了解 多值依赖 和 4NF,帮助你在数据库设计中消除更高级别的异常。 什么是

DM8数据库安装后配置

1 前言 在上篇文章中,我们已经成功将库装好。在安装完成后,为了能够更好地满足应用需求和保障系统的安全稳定运行,通常需要进行一些基本的配置。下面是一些常见的配置项: 数据库服务注册:默认包含14个功能模块,将这些模块注册成服务后,可以更好的启动和管理这些功能;基本的实例参数配置:契合应用场景和发挥系统的最大性能;备份:有备无患;… 2 注册实例服务 注册了实例服务后,可以使用系统服务管理,

集中式版本控制与分布式版本控制——Git 学习笔记01

什么是版本控制 如果你用 Microsoft Word 写过东西,那你八成会有这样的经历: 想删除一段文字,又怕将来这段文字有用,怎么办呢?有一个办法,先把当前文件“另存为”一个文件,然后继续改,改到某个程度,再“另存为”一个文件。就这样改着、存着……最后你的 Word 文档变成了这样: 过了几天,你想找回被删除的文字,但是已经记不清保存在哪个文件了,只能挨个去找。真麻烦,眼睛都花了。看

速了解MySQL 数据库不同存储引擎

快速了解MySQL 数据库不同存储引擎 MySQL 提供了多种存储引擎,每种存储引擎都有其特定的特性和适用场景。了解这些存储引擎的特性,有助于在设计数据库时做出合理的选择。以下是 MySQL 中几种常用存储引擎的详细介绍。 1. InnoDB 特点: 事务支持:InnoDB 是一个支持 ACID(原子性、一致性、隔离性、持久性)事务的存储引擎。行级锁:使用行级锁来提高并发性,减少锁竞争

开源分布式数据库中间件

转自:https://www.csdn.net/article/2015-07-16/2825228 MyCat:开源分布式数据库中间件 为什么需要MyCat? 虽然云计算时代,传统数据库存在着先天性的弊端,但是NoSQL数据库又无法将其替代。如果传统数据易于扩展,可切分,就可以避免单机(单库)的性能缺陷。 MyCat的目标就是:低成本地将现有的单机数据库和应用平滑迁移到“云”端

ORACLE 11g 创建数据库时 Enterprise Manager配置失败的解决办法 无法打开OEM的解决办法

在win7 64位系统下安装oracle11g,在使用Database configuration Assistant创建数据库时,在创建到85%的时候报错,错误如下: 解决办法: 在listener.ora中增加对BlueAeri-PC或ip地址的侦听,具体步骤如下: 1.启动Net Manager,在“监听程序”--Listener下添加一个地址,主机名写计

MyBatis 切换不同的类型数据库方案

下属案例例当前结合SpringBoot 配置进行讲解。 背景: 实现一个工程里面在部署阶段支持切换不同类型数据库支持。 方案一 数据源配置 关键代码(是什么数据库,该怎么配就怎么配) spring:datasource:name: test# 使用druid数据源type: com.alibaba.druid.pool.DruidDataSource# @需要修改 数据库连接及驱动u

CentOS下mysql数据库data目录迁移

https://my.oschina.net/u/873762/blog/180388        公司新上线一个资讯网站,独立主机,raid5,lamp架构。由于资讯网是面向小行业,初步估计一两年内访问量压力不大,故,在做服务器系统搭建的时候,只是简单分出一个独立的data区作为数据库和网站程序的专区,其他按照linux的默认分区。apache,mysql,php均使用yum安装(也尝试