这家“丧心病狂”的IT公司,竟然出了6款数据库~

2024-01-01 20:48

本文主要是介绍这家“丧心病狂”的IT公司,竟然出了6款数据库~,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在谈这家丧心病狂的公司之前,先说说“正常”的IT公司是怎样的:

一家IT公司,一般只会有一款数据库产品。

我们众所周知的Oracle, Microsoft(SQL), MongoDB等等都是这样。

(像Oracle买了拥有MySQL的Sun这样的,不能算了,毕竟MySQL不是Oracle最开始自主研发的。)

 

为什么会这样呢?原因主要有2个:

1. 如果一家公司,能有一款拿得出手的数据库产品,就可以在整个IT业界立足了,实在没有必要开发第二款数据库。

2. 数据库系统的开发成本也比较高,投入很大,很少有公司有能力去开发多款数据库。

所以,反过来说,如果一家IT公司,它开发了很多款不同类型的数据库,那它一定有2个特质:

1. 有野心:一款数据库,不足以实现它独霸整个DBaaS(数据库即服务)的野心,所以它要开发6款;

2. 有钱:数据库的开发不像软件开发,人才很少,重金买人,才能开发数据库。

看来,“丧心病狂”也不是那么容易的!

今天我们要讲的这家“丧心病狂”的开发了6款数据库产品的公司就是亚马逊(Amazon),确切地说是亚马逊的云计算部门,也就是AWS。

AWS有哪6款数据库呢?

确切地说,我认为是7款数据库:

* RDS

* RDS-Aurora

* Redshift

* DynamoDB

* Neptune

* Timestream

* QLDB

(RDS和RDS-Aurora有些人认为是同款数据库。)

这几款数据库真是各有神通,几乎把所有数据库相关的应用场景都捕捉到了。

接下来逐一介绍下:

RDS (Relational Database Service)

RDS顾名思义就是“关系型数据库”。这里其实亚马逊移植了市面上常用的几款数据库,做成了“云”的版本给客户,包括:Oracle,MySQL, MS SQL, MariaDB, PostgreSQL。

这么做的好处,就是客户教育成本低,迁移成本低,用自己熟悉的数据库,又享受了云端的高可用和高性能。

这些好像没啥,很“正常”,还不够“丧心病狂”,但是接下来的几款数据库产品,AWS就要开挂了。

RDS-Aurora

虽然说,Aurora是挂在RDS下面的一个数据库产品,但是我认为它完全是不一样的。不能和其它RDS数据库相提并论。

数据库的一个核心问题就是解决“高并发”,其中包括:高并发的“读”,和高并发的“写”。(比如一个电商平台的网站,对商品的查询都是读,下订单则都是写了。)

你可能会说,高并发的“读”不难处理啊!可多几个数据部分不就行了?比如,一份数据放在10个服务器上--对于读,来说,是这样的。

但是,如果系统里面有很多数据副本的时候,高并发的“写”就不能有效的同步到所有的副本上了--所以,高并发的读写实际上是一对儿矛盾的综合体。

Aurora通过“日志即数据”的概念,把“数据引擎”和“数据存储”进行了有效的分割,从而达到了空前的高并发读写机能。

传统的普通数据库服务,或者普通的自建数据库机构,“写”只能发生在一个“主”数据上,然后“主”再把自己的数据同步给其它副本。Aurora则不同,“写”可以发生在任何一个可用区上。Aurora的架构使用了3个可用区,每个可用区有2个副本,也就是一共6个副本,这6个副本都可以进行读写。极大的弥补了,传统数据库对高并发的瓶颈。这是不是很“丧心病狂”?这是如何做到的?!

细节,在这里就不赘述了,有兴趣的话,可以咨询我们的架构师~

高并发的读写是典型的OLTP(On-Line Transaction Processing联机事务处理过程)中发生的场景。那么对于OLAP (On-Line Analytical Processing 在线分析过程),AWS提出了什么产品呢?

Redshift

和OLTP场景下,数据库需要支持高并发读写不同,OLAP场景下数据库读写频率很低,数据库需要进行大量的聚合计算:数据量大,计算量也大。(比如,一天结束之后,我们需要对今天的用户行为进行分析,所有用户行为数据可能是几个TB。)

这时候,就需要Redshift出场了。Redshift说起来也是关系型数据库,但是它和RDS们有个本质的不同,它不是按“行”来存储数据的,而是按“列”来的。不仅如此,它还按照“列”,对数据进行了排序!基本上这就是为了做“聚合”而诞生的数据库啊!而且按列聚合的数据库很方便压缩,Redshift可以处理PB级数据哦!!!

你说这就可以了吧:传统的关系型数据库,AWS有了;OLTP数据库有了;OLAP数据库也有了。AWS觉得还不够!

DynamoDB

上面的都是关系型数据库。DynamoDB是AWS提供的一款“非关系型数据库”,特别以“键值存储”为核心。可以高效的进行大数据/大文件的快速读取。

如果你是游戏行业/医疗行业/影视娱乐行业有大文件需要读取的话,那么你有福了。:)

Neptune

关系型数据库有了,非关系型也有了!还不够吗?对于亚马逊来说,当然不够!

AWS又推出了“图数据库”。在现在这个社交应用(大数据相关性)横行的年代,没有图数据库,取一个简单的人际关系,用“关系型数据库”真是要累死的。举2个简单的例子:

1. 我们想知道用户A和用户B是几度好友?如果A和B是直接好友也就罢了,用关系型数据库Join一次也就行了。但是,万一是10度好友呢?总不能Join 10次吧。关键是,如果不知道是几度好友,难道要无限的Join下去吗?

2. 我们的物流系统报告,北京到上海的一趟货车延迟了,那有多少用户会受到影响呢?一趟车可能影响10条物流链路?影响50个城市?影响2000个用户?估计我们需要把系统里面所有的数据都关联查询一遍才能有个结论,成本太高了。

在上面的场景里面(也就是不断的大量的Join出现的时候),图数据库就是一个利器了。

这都已经好几款数据库了,还不够吗?AWS觉得还不够。2018年的时候,它居然同时发布了两款新数据库!!!

我真是要给这家公司跪了。

Timestream

顾名思义,Timestream是和时间相关的数据库。因为很多对数据的查新都是以时间段为基础的。Timestream就是针对这个场景的。

QLDB

QLDB的全称是Quantum Ledger Database。它的应用场景也很好理解,最适合的场景是“记账本”。“账本”是不能被更改的,每一笔记录都不能被改动,被忠实的记录下来,已被查询。QLDB就应运而生了。是不是有点儿“区块链”的意思?只不过QLDB是有中心的。

说了这么多~,说到底,AWS的“丧心病狂”,源自于它“对客户的痴迷”,亚马逊绞尽脑汁,把所有用户能提出的业务场景都想到了,无论我们有什么业务需求都可以用某款数据库解决。

这篇关于这家“丧心病狂”的IT公司,竟然出了6款数据库~的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/560475

相关文章

mysql数据库分区的使用

《mysql数据库分区的使用》MySQL分区技术通过将大表分割成多个较小片段,提高查询性能、管理效率和数据存储效率,本文就来介绍一下mysql数据库分区的使用,感兴趣的可以了解一下... 目录【一】分区的基本概念【1】物理存储与逻辑分割【2】查询性能提升【3】数据管理与维护【4】扩展性与并行处理【二】分区的

IDEA如何切换数据库版本mysql5或mysql8

《IDEA如何切换数据库版本mysql5或mysql8》本文介绍了如何将IntelliJIDEA从MySQL5切换到MySQL8的详细步骤,包括下载MySQL8、安装、配置、停止旧服务、启动新服务以及... 目录问题描述解决方案第一步第二步第三步第四步第五步总结问题描述最近想开发一个新应用,想使用mysq

Oracle数据库使用 listagg去重删除重复数据的方法汇总

《Oracle数据库使用listagg去重删除重复数据的方法汇总》文章介绍了在Oracle数据库中使用LISTAGG和XMLAGG函数进行字符串聚合并去重的方法,包括去重聚合、使用XML解析和CLO... 目录案例表第一种:使用wm_concat() + distinct去重聚合第二种:使用listagg,

Java读取InfluxDB数据库的方法详解

《Java读取InfluxDB数据库的方法详解》本文介绍基于Java语言,读取InfluxDB数据库的方法,包括读取InfluxDB的所有数据库,以及指定数据库中的measurement、field、... 首先,创建一个Java项目,用于撰写代码。接下来,配置所需要的依赖;这里我们就选择可用于与Infl

详谈redis跟数据库的数据同步问题

《详谈redis跟数据库的数据同步问题》文章讨论了在Redis和数据库数据一致性问题上的解决方案,主要比较了先更新Redis缓存再更新数据库和先更新数据库再更新Redis缓存两种方案,文章指出,删除R... 目录一、Redis 数据库数据一致性的解决方案1.1、更新Redis缓存、删除Redis缓存的区别二

oracle数据库索引失效的问题及解决

《oracle数据库索引失效的问题及解决》本文总结了在Oracle数据库中索引失效的一些常见场景,包括使用isnull、isnotnull、!=、、、函数处理、like前置%查询以及范围索引和等值索引... 目录oracle数据库索引失效问题场景环境索引失效情况及验证结论一结论二结论三结论四结论五总结ora

C#实现文件读写到SQLite数据库

《C#实现文件读写到SQLite数据库》这篇文章主要为大家详细介绍了使用C#将文件读写到SQLite数据库的几种方法,文中的示例代码讲解详细,感兴趣的小伙伴可以参考一下... 目录1. 使用 BLOB 存储文件2. 存储文件路径3. 分块存储文件《文件读写到SQLite数据库China编程的方法》博客中,介绍了文

Android数据库Room的实际使用过程总结

《Android数据库Room的实际使用过程总结》这篇文章主要给大家介绍了关于Android数据库Room的实际使用过程,详细介绍了如何创建实体类、数据访问对象(DAO)和数据库抽象类,需要的朋友可以... 目录前言一、Room的基本使用1.项目配置2.创建实体类(Entity)3.创建数据访问对象(DAO

SQL Server数据库磁盘满了的解决办法

《SQLServer数据库磁盘满了的解决办法》系统再正常运行,我还在操作中,突然发现接口报错,后续所有接口都报错了,一查日志发现说是数据库磁盘满了,所以本文记录了SQLServer数据库磁盘满了的解... 目录问题解决方法删除数据库日志设置数据库日志大小问题今http://www.chinasem.cn天发

Oracle数据库执行计划的查看与分析技巧

《Oracle数据库执行计划的查看与分析技巧》在Oracle数据库中,执行计划能够帮助我们深入了解SQL语句在数据库内部的执行细节,进而优化查询性能、提升系统效率,执行计划是Oracle数据库优化器为... 目录一、什么是执行计划二、查看执行计划的方法(一)使用 EXPLAIN PLAN 命令(二)通过 S