尚硅谷课程的学习笔记


web系统的发展历程

------- 单机mysql的美好年代

最开始(90年代),一个网站的访问量不大,页面多是静态网页,这种情况下,单个数据库是完全可以支撑的 ;



后来随着技术的发展,动态页面的加入,网站访问量上去以后,单个数据库开始出现瓶颈问题了 ;

  1. 系统的数据量太大,一台数据库服务器已经存不下了;

  2. 创建的数据的索引,越来越多,单台数据库服务器的内存已经加载不了全部索引了 ;

  3. 网站做的越来越大,访问量越来越多,读写操作越来越频繁,达到单台数据库实例读写的瓶颈了;

    遇到上面的磁盘、内存、读写瓶颈,伟大的架构师开改变系统架构;


------ Memcached(缓存)+Mysql+垂直拆分

为了缓解上面提到的访问量过多,对数据库服务器造成的压力,架构师选择在数据库服务器之前,架构一个缓存服务器,帮数据库挡掉一部分压力 ;

对有索引和数据量太大,架构选择对数据库进行 垂直拆分,使用多台数据库,构建集群,将不同的 业务 的数据(比如卖家和买家)保存到不同的数据库服务器上;

垂直拆分:(按照业务进行分割,将不同业务的表,分到不同的数据库里面


------ mysql 主从读写分离

主从分离:主库有一条记录,从库也立刻记录一条 ;

读写分离:读和写的操作,放在不同的数据库服务器上 ;

对于之前的架构,已经可以解决大部分的问题了,但是在某些情况下,还是会有问题的,前面 Memcaahe 缓存只会降低对数据库读的压力,但是如果有大量的 读写操作 集中到一台数据库上,数据库还是会达到性能瓶颈,比如大量的买家注册信息,同时又有大量的买家登录系统,读写全聚到一起了,那么保存买家的数据库压力就会很大;

架构师们又想出一个改进,进行 主从读写分离图中的而每一个主、从,都是一个数据库组,里面都进行了垂直拆分 );



继续对数据库进行垂直拆分的,图上没细画出来,并且进行主从读写分离,所有的写操作都由 master 进行,所有的读操作,都由 slave 进行 ,将读写分离,缓解数据库的压力;


------ 分表分库+水平拆分+mysql集群

水平拆分:将同一张表的数据,分到不同的数据库 ;

上面的架构,将读写分离,减轻了数据库的写压力,但是当访问量持续增加,写操作都在 master 服务器上 ;master 时间久也扛不住了。

继续改进,使用如下架构:

进行分表分库操作,将数据表的数据内容,水平分表,按照字段的某些规则,将同一张表的数据进行划分,存到不同的数据库里面,每个 M/S 里面都是这样的一个数据库组 ;

然后进行集群,组成一个大的系统 ,简单说,就是将数据进行了分类,每组 M/S 里面,水平分表,保存在所有的表,但是保存每张表的部分数据;这样,就相当于导流了,试想,当有有人读写数据库,读写的数据不同,就会被分到不同的 M/S 上,这样对 M/S 的主数据库减轻压力 ;


------ 现在的架构

前面当有 负载均衡Nginx),然后打到 服务器集群 ,然后 数据库集群 ,还有 缓存服务器图片服务器音、视频服务器通信服务器 等一大堆 ;

web 系统发展历程的更多相关文章

  1. web技术发展历程--读《大型网站技术架构_核心原理与案例分析》

    1 早期的web服务 2 CGI程序的出现.发展.凋零到MVC的兴起 CGI:通用网关接口技术. 随着CGI技术的出现,web服务端可以通过不同的用户请求产生动态页面内容. web服务器将请求数据交给 ...

  2. web服务发展历程

    PhP发展历史1.php: 开始名字含义:personal home page 个人网页 现在名字含义:HyperText Perprocessor 超文本预处理语言 预处理: 说明PHP是在服务器预 ...

  3. 十年WEB技术发展历程

    一个小分享,知识有限,抛砖引玉. ajax 03年的时候我上六年级,那时候网吧刚在小县城的角落萌生.传奇,大话西游第一代网游一时风靡.我抱着试一试的心态给了网吧老板两块钱想申请个号玩玩,然后接下来的一 ...

  4. web开发发展历程

    cs架构:(软件主要运行在桌面上,数据库软件运行在服务器端) 缺点:如果web应用修改或升级,需要每个客户端逐个升级桌面App,因此Browser/server模式开始流行. bs架构:应用程序的逻辑 ...

  5. 动态 Web Server 技术发展历程

    动态 Web Server 技术发展历程 开始接触 Java Web 方面的技术,此篇文章是以介绍 Web server 相关技术的演变为主来作为了解 Java servlet 的技术背景,目的是更好 ...

  6. Web UI 技术发展历程

    本文内容 纯文本和静态 HTML 页面 服务器端技术 插件技术--ActiveX.Applet 和 Flash Ajax 异步时代和基于 JavaScript 的 UI 技术 RIA--Adobe F ...

  7. Linux实战教学笔记03:操作系统发展历程及系统版本选择

    标签(空格分隔): Linux实战教学笔记-陈思齐 第1章 Linux简介 1.1 什么是操作系统? 简单讲:操作系统就是一个人与计算机硬件的中介. 操作系统,英文名称Operating System ...

  8. 从故纸堆里,回顾下Web技术的发展历程

    通过对比这些年的计算机图书来让大家感受下前些年Web技术的发展历程. Web开发框架,目前是Spring Boot+JPA,我正好出过本书,从中大家能感受到现在的技术. <Spring Boot ...

  9. 使用C/C++发展Web系统开源

    下载 见 C++开发的论坛系统 - BBS 下载地址:Fetch_source_code_release_vse2008_v1.2.1.7z 眼下先暂存在百度云上,最近会放入github 当前版本号的 ...

随机推荐

  1. Ubuntu14.04系统显示器不自动休眠修改

    -----设置Ubuntu14.04不自动锁屏,常亮 右上角的菜单打开system setting ----- brightness&lock按钮 1. 2. 参考: https://blog ...

  2. 结构体与C++sort()函数的用法

    C++sort()函数的用法 先看道题(本题来自http://codeup.cn/第26099): 题目描述 [问题描述] 高三全省联合模拟考试刚刚结束,经过各科老师的努力,各个学科的改卷工作终于结束 ...

  3. 从java字节码角度看线程安全性问题

    先看代码: package com.roocon.thread.t3; public class Sequence { private int value; public int getNext(){ ...

  4. elasticsearch alias

    索引别名API允许使用一个名字来作为一个索引的别名,所有API会自动将别名转换为实际的索引名称. 别名也可以映射到多个索引,别名不能与索引具有相同的名称.别名可以用来做索引迁移和多个索引的查询统一,还 ...

  5. Java-JVM 锁优化

    synchronized 的实现方式是用 Monitor 进行加锁,这是一种互斥锁,为了表示他对性能的影响我们称之为重量级锁. Java 的线程是映射到操作系统原生线程之上的,要阻塞或唤醒一个线程就需 ...

  6. oracle之按表名查询表字段结构

    工作中查看oracle表结构, 1,pl/sql或其他开发工具可以输入表名然后ctr+点击表名就可以看见表结构: 2,表字段过多,如果给第三方截图看比较麻烦,得截好几次,容易看眼花,可以查询如下sql ...

  7. new HttpClient().PostAsync封装参数

    var data = Encoding.UTF8.GetBytes("{ \"y\": 5, \"x\": 3}"); var conten ...

  8. 安装navicat后C盘多了好多链接文件夹

      安装完最新的navicat后C盘多了好多连接文件夹 多了一堆链接的文件夹,里面就是 这些文件,但是吧强迫症怎么能让C盘那么多没有用的文件夹存在呢 最起码是这样的吧: 怎么办呢?找navicat的设 ...

  9. 转:android DownloadManager: java.lang.SecurityException: Invalid value for visibility: 2

    1.问题描述 今天使用Android系统的DownloadManager进行下载操作时,爆了如下所示的错误: java.lang.RuntimeException: Unable to start s ...

  10. Assertion failure in -[UISectionRowData refreshWithSection:tableView:tableViewRowData:]

    最近在项目中遇到了 Assertion failure in -[UISectionRowData refreshWithSection:tableView:tableViewRowData:] 这个 ...