大型网站技术架构——读后摘要5

2023-10-24 01:48

本文主要是介绍大型网站技术架构——读后摘要5,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

网站的高可用

网站架构分层:

应用层,服务层,数据层。

各层怎么实现高可用:

应用层:主要负责具体的业务逻辑处理,多以集群的方式解决高可用的问题。

服务层:负责提供可以复用的服务,也是以集群的方式解决高可用问题。(原因大多应用层和服务层都是部署在一起)

数据层:负责数据的存储和访问。为了保障宕机导致数据丢失,多台服务器之间进行数据同步复制,将数据写到多台服务器上,实现数据冗余备份。

应用服务器的session管理:

单机情况(单个服务器)下,session可以交给服务器上的web容器管理。如果是集群session该如何管理呢?

    1.session复制:

            在服务器之间同步session。(这种方式适用于用户量小的情况,如果上亿用户,使用session复制实现同步将耗费大量的服务器资源)

    2.session绑定:(很少用)

        可以通过负载均衡原地址的hash算法实现将来源同一台ip的请求分发到同一台服务器上。(负载均衡的回话黏滞机制)

    3.利用cookie记录session

    4.session服务器:利用独立部署的session服务器统一管理session,应用服务器每次读写session时,都要访问session服务器。利用session服务器集成单点登录、用户服务等功能。

高可用的服务:

            1.分级管理:核心应用和服务优先使用更好的硬件。

            2.超时设置:如果服务器宕机或其他原因导致请求长时间得不到响应,设置请求超时,可以将请求转移到相同应用的服务器上,同时还节省应用程序的资源(长时间请求占用的资源)。

            3.异步调用:避免一个服务失败导致整个服务失败;削峰等等

            4.服务降级:当出现大并发量的情况时,可以将一些不重要的服务降级、甚至关闭。比如双十一(可以降低或者关闭评价和确认收货的功能给订单节省服务器资源)

            5.幂等性设计:有的请求请求成功由于网络或者其他原因导致响应没有收到,服务层会再一次发送请求,如果是转账业务那么这样的机制是不成立的,所以牵扯像转账这类业务的时候应该附加特别的校验比如短信验证码,没请求一次发一个。

高可用的数据:

数据的安全主要是备份,高可用则用到失效转移,当这台机器的数据出现问题会转移到其他副本上。

数据的高可用:

高可用的数据具有数据持久性,数据可访问性,数据一致性


1.CAP原理:一个提供数据服务的存储系统无法满足数据一致性,数据可用性、分区耐受性这三个条件。


数据的备份:

冷备份:定期的备份数据(不好,因为备份时到宕机这段时间的数据将永久丢失)

热备份:异步热备方式和同步热备方式。

异步热备份:有主从存储服务器,当数据请求来了后,只访问主存储服务器,数据存入以及响应数据存储成功,然后异步将数据存储到从服务器中。

同步热备份:没有主从数据库之分,读写请求(并发)访问多个存储服务器,响应时间是最慢的一台服务器的响应时间。

失效转移:

        1.失效确认

判断服务器宕机的手段有两种:1.心跳监测2.应用程序访问失败报告。

      

        2.访问转移

        3.数据恢复

            将数据复制到宕机的服务器上,保证集群服务器个数为系统的设定值。

网站运行监控:

对网站进行实时的监控,出了问题就不会像无头苍蝇到处乱转,可以通过监控高效快速使系统正常运转。

1.监控数据的采集

  • 用户行为日志收集:通过服务器端日志收集和客户端浏览日志收集
  • 服务器性能监控:如系统Load、内存占用、磁盘IO、网络IO等做出网络预警往返于未然。
  • 运行数据报告。
2.监控管理

  • 系统报警:服务器的一些性能都设置一些稳定的指标,当不在这段范围就报警,有专业人员处理。
  • 失效转移:访问失败的时候失效转移;系统发生故障时监控系统也可以主动通知应用失效转移。
  • 自动优雅降级:当系统部分功能出现并发访问高峰时,不用的功能可以自动降级甚至关闭。


这篇关于大型网站技术架构——读后摘要5的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/271896

相关文章

SpringBoot3实现Gzip压缩优化的技术指南

《SpringBoot3实现Gzip压缩优化的技术指南》随着Web应用的用户量和数据量增加,网络带宽和页面加载速度逐渐成为瓶颈,为了减少数据传输量,提高用户体验,我们可以使用Gzip压缩HTTP响应,... 目录1、简述2、配置2.1 添加依赖2.2 配置 Gzip 压缩3、服务端应用4、前端应用4.1 N

Java利用JSONPath操作JSON数据的技术指南

《Java利用JSONPath操作JSON数据的技术指南》JSONPath是一种强大的工具,用于查询和操作JSON数据,类似于SQL的语法,它为处理复杂的JSON数据结构提供了简单且高效... 目录1、简述2、什么是 jsONPath?3、Java 示例3.1 基本查询3.2 过滤查询3.3 递归搜索3.4

Python中随机休眠技术原理与应用详解

《Python中随机休眠技术原理与应用详解》在编程中,让程序暂停执行特定时间是常见需求,当需要引入不确定性时,随机休眠就成为关键技巧,下面我们就来看看Python中随机休眠技术的具体实现与应用吧... 目录引言一、实现原理与基础方法1.1 核心函数解析1.2 基础实现模板1.3 整数版实现二、典型应用场景2

Java异常架构Exception(异常)详解

《Java异常架构Exception(异常)详解》:本文主要介绍Java异常架构Exception(异常),具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1. Exception 类的概述Exception的分类2. 受检异常(Checked Exception)

nginx部署https网站的实现步骤(亲测)

《nginx部署https网站的实现步骤(亲测)》本文详细介绍了使用Nginx在保持与http服务兼容的情况下部署HTTPS,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值... 目录步骤 1:安装 Nginx步骤 2:获取 SSL 证书步骤 3:手动配置 Nginx步骤 4:测

MySQL 缓存机制与架构解析(最新推荐)

《MySQL缓存机制与架构解析(最新推荐)》本文详细介绍了MySQL的缓存机制和整体架构,包括一级缓存(InnoDBBufferPool)和二级缓存(QueryCache),文章还探讨了SQL... 目录一、mysql缓存机制概述二、MySQL整体架构三、SQL查询执行全流程四、MySQL 8.0为何移除查

微服务架构之使用RabbitMQ进行异步处理方式

《微服务架构之使用RabbitMQ进行异步处理方式》本文介绍了RabbitMQ的基本概念、异步调用处理逻辑、RabbitMQ的基本使用方法以及在SpringBoot项目中使用RabbitMQ解决高并发... 目录一.什么是RabbitMQ?二.异步调用处理逻辑:三.RabbitMQ的基本使用1.安装2.架构

Python实现高效地读写大型文件

《Python实现高效地读写大型文件》Python如何读写的是大型文件,有没有什么方法来提高效率呢,这篇文章就来和大家聊聊如何在Python中高效地读写大型文件,需要的可以了解下... 目录一、逐行读取大型文件二、分块读取大型文件三、使用 mmap 模块进行内存映射文件操作(适用于大文件)四、使用 pand

mybatis的整体架构

mybatis的整体架构分为三层: 1.基础支持层 该层包括:数据源模块、事务管理模块、缓存模块、Binding模块、反射模块、类型转换模块、日志模块、资源加载模块、解析器模块 2.核心处理层 该层包括:配置解析、参数映射、SQL解析、SQL执行、结果集映射、插件 3.接口层 该层包括:SqlSession 基础支持层 该层保护mybatis的基础模块,它们为核心处理层提供了良好的支撑。

百度/小米/滴滴/京东,中台架构比较

小米中台建设实践 01 小米的三大中台建设:业务+数据+技术 业务中台--从业务说起 在中台建设中,需要规范化的服务接口、一致整合化的数据、容器化的技术组件以及弹性的基础设施。并结合业务情况,判定是否真的需要中台。 小米参考了业界优秀的案例包括移动中台、数据中台、业务中台、技术中台等,再结合其业务发展历程及业务现状,整理了中台架构的核心方法论,一是企业如何共享服务,二是如何为业务提供便利。