分布式数据库DDB introduce

2023-10-29 12:31

本文主要是介绍分布式数据库DDB introduce,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

DDB(Distributed database)是网易杭研院立项最早,应用最为广泛的后台产品之一,也是国内最早出现的基于现有database之上开发的分布式数据库中间件,目前依然在为网易易信,云音乐,云阅读等大型互联网产品提供稳定的数据库服务。业界中同类型的产品有阿里集团的TDDL,阿里B2B的cobar等。

DDB主要以两种方式向应用方提供服务:

一种是以JDBC的jar包形式为JAVA应用提供直接依赖,JAVA应用(如tomcat)通过依赖DDB提供的JDBC包实现透明访问分布式数据库集群中的各个分库分表,这种服务方式与淘宝TDDL如出一辙,我们称之为中间件模式。

另一种方式是为应用部署独立的DDBProxy服务来满足应用分库分表的需求,在这种方式下,应用通过标准JDBC访问Proxy,而Proxy则根据MySQL标准通信协议对客户端请求解析,还原应用SQL请求,然后通过本地的DDB JDBC访问数据库集群,最后再将得到的结果根据MySQL标准通信协议编码返回给客户端。这种服务方式与B2B的cobar以及现在阿里云的DRDS类似,不同的是DDB的Proxy与DDB在语法特性上一脉相承,而根据目前已有的资料来看,与TDDL相比DRDS在语法特性和事务支持上是有所阉割的。

DDB的中间件模式概念架构:

dbi architecture

dbi architecture

DDB Proxy概念架构:

proxy architecture

proxy architecture

DDB支持的语法功能:

  1. General Insert(support batch, on duplicate key..), update, delete, replace, select(with alias)
  2. Global group by, order by, limit, having
  3. Global aggregate: max, min, count, avg, concat
  4. Global incremental id
  5. Multiple table join(limited), union
  6. Subquery(need trade off sometimes)

一些语法细节上DDB无法支持,如全局跨表表达式:select A.num + B.num from a, b where …,其中A和B都是跨库的表,这种类似功能我个人认为在中间件层面是难以实现的,或者说即使实现了对实际应用场景也是不可用的。

总体来说,DDB的语法集属于“大而全”的类型,对一些情况如limit一个很大的数据所带来的性能折损,需要DBA帮助应用去优化SQL写法,或者直接在SQL审核中砍掉。对分布式数据库来说,DBA的把关至关重要,尤其在表模式设计和均衡字段选择上,一旦一张表的均衡字段选择和表设计上存在疏漏,会给应用未来的开发造成极大的困扰。

无论是阿里系的各种分布式数据库(TDDL, DRDS, OceanBase)还是DDB,又或是其他公司自研项目如youtube Vitess和google spanner,它们的运维和学习成本要比传统数据库高很多,不同系统在功能,性能以及高可用架构上的取舍体现了不同开发团队的品味。

最后贴一个facebook来交流时给老大写的一个PPT,简单介绍了下DDB中各种概念和整体架构,分享给有兴趣的同学。

DDB-introduce ppt

BTW,DDB目前是网易非开源项目(根据上层的意思,以后可能会开源,或向其他公司提供服务,日期未定),但是欢迎有兴趣的同学多多交流 ~_~


http://www.majin163.com/2014/09/24/ddb-introduce/

这篇关于分布式数据库DDB introduce的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/300658

相关文章

数据库oracle用户密码过期查询及解决方案

《数据库oracle用户密码过期查询及解决方案》:本文主要介绍如何处理ORACLE数据库用户密码过期和修改密码期限的问题,包括创建用户、赋予权限、修改密码、解锁用户和设置密码期限,文中通过代码介绍... 目录前言一、创建用户、赋予权限、修改密码、解锁用户和设置期限二、查询用户密码期限和过期后的修改1.查询用

mysql数据库分区的使用

《mysql数据库分区的使用》MySQL分区技术通过将大表分割成多个较小片段,提高查询性能、管理效率和数据存储效率,本文就来介绍一下mysql数据库分区的使用,感兴趣的可以了解一下... 目录【一】分区的基本概念【1】物理存储与逻辑分割【2】查询性能提升【3】数据管理与维护【4】扩展性与并行处理【二】分区的

IDEA如何切换数据库版本mysql5或mysql8

《IDEA如何切换数据库版本mysql5或mysql8》本文介绍了如何将IntelliJIDEA从MySQL5切换到MySQL8的详细步骤,包括下载MySQL8、安装、配置、停止旧服务、启动新服务以及... 目录问题描述解决方案第一步第二步第三步第四步第五步总结问题描述最近想开发一个新应用,想使用mysq

Oracle数据库使用 listagg去重删除重复数据的方法汇总

《Oracle数据库使用listagg去重删除重复数据的方法汇总》文章介绍了在Oracle数据库中使用LISTAGG和XMLAGG函数进行字符串聚合并去重的方法,包括去重聚合、使用XML解析和CLO... 目录案例表第一种:使用wm_concat() + distinct去重聚合第二种:使用listagg,

Java读取InfluxDB数据库的方法详解

《Java读取InfluxDB数据库的方法详解》本文介绍基于Java语言,读取InfluxDB数据库的方法,包括读取InfluxDB的所有数据库,以及指定数据库中的measurement、field、... 首先,创建一个Java项目,用于撰写代码。接下来,配置所需要的依赖;这里我们就选择可用于与Infl

java如何分布式锁实现和选型

《java如何分布式锁实现和选型》文章介绍了分布式锁的重要性以及在分布式系统中常见的问题和需求,它详细阐述了如何使用分布式锁来确保数据的一致性和系统的高可用性,文章还提供了基于数据库、Redis和Zo... 目录引言:分布式锁的重要性与分布式系统中的常见问题和需求分布式锁的重要性分布式系统中常见的问题和需求

详谈redis跟数据库的数据同步问题

《详谈redis跟数据库的数据同步问题》文章讨论了在Redis和数据库数据一致性问题上的解决方案,主要比较了先更新Redis缓存再更新数据库和先更新数据库再更新Redis缓存两种方案,文章指出,删除R... 目录一、Redis 数据库数据一致性的解决方案1.1、更新Redis缓存、删除Redis缓存的区别二

oracle数据库索引失效的问题及解决

《oracle数据库索引失效的问题及解决》本文总结了在Oracle数据库中索引失效的一些常见场景,包括使用isnull、isnotnull、!=、、、函数处理、like前置%查询以及范围索引和等值索引... 目录oracle数据库索引失效问题场景环境索引失效情况及验证结论一结论二结论三结论四结论五总结ora

Golang使用etcd构建分布式锁的示例分享

《Golang使用etcd构建分布式锁的示例分享》在本教程中,我们将学习如何使用Go和etcd构建分布式锁系统,分布式锁系统对于管理对分布式系统中共享资源的并发访问至关重要,它有助于维护一致性,防止竞... 目录引言环境准备新建Go项目实现加锁和解锁功能测试分布式锁重构实现失败重试总结引言我们将使用Go作

C#实现文件读写到SQLite数据库

《C#实现文件读写到SQLite数据库》这篇文章主要为大家详细介绍了使用C#将文件读写到SQLite数据库的几种方法,文中的示例代码讲解详细,感兴趣的小伙伴可以参考一下... 目录1. 使用 BLOB 存储文件2. 存储文件路径3. 分块存储文件《文件读写到SQLite数据库China编程的方法》博客中,介绍了文