大型网站技术架构——读后摘要5

2023-10-24 01:48

本文主要是介绍大型网站技术架构——读后摘要5,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

网站的高可用

网站架构分层:

应用层,服务层,数据层。

各层怎么实现高可用:

应用层:主要负责具体的业务逻辑处理,多以集群的方式解决高可用的问题。

服务层:负责提供可以复用的服务,也是以集群的方式解决高可用问题。(原因大多应用层和服务层都是部署在一起)

数据层:负责数据的存储和访问。为了保障宕机导致数据丢失,多台服务器之间进行数据同步复制,将数据写到多台服务器上,实现数据冗余备份。

应用服务器的session管理:

单机情况(单个服务器)下,session可以交给服务器上的web容器管理。如果是集群session该如何管理呢?

    1.session复制:

            在服务器之间同步session。(这种方式适用于用户量小的情况,如果上亿用户,使用session复制实现同步将耗费大量的服务器资源)

    2.session绑定:(很少用)

        可以通过负载均衡原地址的hash算法实现将来源同一台ip的请求分发到同一台服务器上。(负载均衡的回话黏滞机制)

    3.利用cookie记录session

    4.session服务器:利用独立部署的session服务器统一管理session,应用服务器每次读写session时,都要访问session服务器。利用session服务器集成单点登录、用户服务等功能。

高可用的服务:

            1.分级管理:核心应用和服务优先使用更好的硬件。

            2.超时设置:如果服务器宕机或其他原因导致请求长时间得不到响应,设置请求超时,可以将请求转移到相同应用的服务器上,同时还节省应用程序的资源(长时间请求占用的资源)。

            3.异步调用:避免一个服务失败导致整个服务失败;削峰等等

            4.服务降级:当出现大并发量的情况时,可以将一些不重要的服务降级、甚至关闭。比如双十一(可以降低或者关闭评价和确认收货的功能给订单节省服务器资源)

            5.幂等性设计:有的请求请求成功由于网络或者其他原因导致响应没有收到,服务层会再一次发送请求,如果是转账业务那么这样的机制是不成立的,所以牵扯像转账这类业务的时候应该附加特别的校验比如短信验证码,没请求一次发一个。

高可用的数据:

数据的安全主要是备份,高可用则用到失效转移,当这台机器的数据出现问题会转移到其他副本上。

数据的高可用:

高可用的数据具有数据持久性,数据可访问性,数据一致性


1.CAP原理:一个提供数据服务的存储系统无法满足数据一致性,数据可用性、分区耐受性这三个条件。


数据的备份:

冷备份:定期的备份数据(不好,因为备份时到宕机这段时间的数据将永久丢失)

热备份:异步热备方式和同步热备方式。

异步热备份:有主从存储服务器,当数据请求来了后,只访问主存储服务器,数据存入以及响应数据存储成功,然后异步将数据存储到从服务器中。

同步热备份:没有主从数据库之分,读写请求(并发)访问多个存储服务器,响应时间是最慢的一台服务器的响应时间。

失效转移:

        1.失效确认

判断服务器宕机的手段有两种:1.心跳监测2.应用程序访问失败报告。

      

        2.访问转移

        3.数据恢复

            将数据复制到宕机的服务器上,保证集群服务器个数为系统的设定值。

网站运行监控:

对网站进行实时的监控,出了问题就不会像无头苍蝇到处乱转,可以通过监控高效快速使系统正常运转。

1.监控数据的采集

  • 用户行为日志收集:通过服务器端日志收集和客户端浏览日志收集
  • 服务器性能监控:如系统Load、内存占用、磁盘IO、网络IO等做出网络预警往返于未然。
  • 运行数据报告。
2.监控管理

  • 系统报警:服务器的一些性能都设置一些稳定的指标,当不在这段范围就报警,有专业人员处理。
  • 失效转移:访问失败的时候失效转移;系统发生故障时监控系统也可以主动通知应用失效转移。
  • 自动优雅降级:当系统部分功能出现并发访问高峰时,不用的功能可以自动降级甚至关闭。


这篇关于大型网站技术架构——读后摘要5的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/271896

相关文章

mybatis的整体架构

mybatis的整体架构分为三层: 1.基础支持层 该层包括:数据源模块、事务管理模块、缓存模块、Binding模块、反射模块、类型转换模块、日志模块、资源加载模块、解析器模块 2.核心处理层 该层包括:配置解析、参数映射、SQL解析、SQL执行、结果集映射、插件 3.接口层 该层包括:SqlSession 基础支持层 该层保护mybatis的基础模块,它们为核心处理层提供了良好的支撑。

百度/小米/滴滴/京东,中台架构比较

小米中台建设实践 01 小米的三大中台建设:业务+数据+技术 业务中台--从业务说起 在中台建设中,需要规范化的服务接口、一致整合化的数据、容器化的技术组件以及弹性的基础设施。并结合业务情况,判定是否真的需要中台。 小米参考了业界优秀的案例包括移动中台、数据中台、业务中台、技术中台等,再结合其业务发展历程及业务现状,整理了中台架构的核心方法论,一是企业如何共享服务,二是如何为业务提供便利。

【专题】2024飞行汽车技术全景报告合集PDF分享(附原数据表)

原文链接: https://tecdat.cn/?p=37628 6月16日,小鹏汇天旅航者X2在北京大兴国际机场临空经济区完成首飞,这也是小鹏汇天的产品在京津冀地区进行的首次飞行。小鹏汇天方面还表示,公司准备量产,并计划今年四季度开启预售小鹏汇天分体式飞行汽车,探索分体式飞行汽车城际通勤。阅读原文,获取专题报告合集全文,解锁文末271份飞行汽车相关行业研究报告。 据悉,业内人士对飞行汽车行业

透彻!驯服大型语言模型(LLMs)的五种方法,及具体方法选择思路

引言 随着时间的发展,大型语言模型不再停留在演示阶段而是逐步面向生产系统的应用,随着人们期望的不断增加,目标也发生了巨大的变化。在短短的几个月的时间里,人们对大模型的认识已经从对其zero-shot能力感到惊讶,转变为考虑改进模型质量、提高模型可用性。 「大语言模型(LLMs)其实就是利用高容量的模型架构(例如Transformer)对海量的、多种多样的数据分布进行建模得到,它包含了大量的先验

金融业开源技术 术语

金融业开源技术  术语 1  范围 本文件界定了金融业开源技术的常用术语。 本文件适用于金融业中涉及开源技术的相关标准及规范性文件制定和信息沟通等活动。

AI(文生语音)-TTS 技术线路探索学习:从拼接式参数化方法到Tacotron端到端输出

AI(文生语音)-TTS 技术线路探索学习:从拼接式参数化方法到Tacotron端到端输出 在数字化时代,文本到语音(Text-to-Speech, TTS)技术已成为人机交互的关键桥梁,无论是为视障人士提供辅助阅读,还是为智能助手注入声音的灵魂,TTS 技术都扮演着至关重要的角色。从最初的拼接式方法到参数化技术,再到现今的深度学习解决方案,TTS 技术经历了一段长足的进步。这篇文章将带您穿越时

系统架构设计师: 信息安全技术

简简单单 Online zuozuo: 简简单单 Online zuozuo 简简单单 Online zuozuo 简简单单 Online zuozuo 简简单单 Online zuozuo :本心、输入输出、结果 简简单单 Online zuozuo : 文章目录 系统架构设计师: 信息安全技术前言信息安全的基本要素:信息安全的范围:安全措施的目标:访问控制技术要素:访问控制包括:等保

速盾高防cdn是怎么解决网站攻击的?

速盾高防CDN是一种基于云计算技术的网络安全解决方案,可以有效地保护网站免受各种网络攻击的威胁。它通过在全球多个节点部署服务器,将网站内容缓存到这些服务器上,并通过智能路由技术将用户的请求引导到最近的服务器上,以提供更快的访问速度和更好的网络性能。 速盾高防CDN主要采用以下几种方式来解决网站攻击: 分布式拒绝服务攻击(DDoS)防护:DDoS攻击是一种常见的网络攻击手段,攻击者通过向目标网

前端技术(七)——less 教程

一、less简介 1. less是什么? less是一种动态样式语言,属于css预处理器的范畴,它扩展了CSS语言,增加了变量、Mixin、函数等特性,使CSS 更易维护和扩展LESS 既可以在 客户端 上运行 ,也可以借助Node.js在服务端运行。 less的中文官网:https://lesscss.cn/ 2. less编译工具 koala 官网 http://koala-app.

利用命令模式构建高效的手游后端架构

在现代手游开发中,后端架构的设计对于支持高并发、快速迭代和复杂游戏逻辑至关重要。命令模式作为一种行为设计模式,可以有效地解耦请求的发起者与接收者,提升系统的可维护性和扩展性。本文将深入探讨如何利用命令模式构建一个强大且灵活的手游后端架构。 1. 命令模式的概念与优势 命令模式通过将请求封装为对象,使得请求的发起者和接收者之间的耦合度降低。这种模式的主要优势包括: 解耦请求发起者与处理者