上传文件服务器与web内容服务分离
现在难点在:
1\单击表单提交按钮后,图片上传到图片服务器,文字内容上传web服务器数据库,这两个服务器分别在两个城市.
2\图片不能通过web服务器中转.
3\web服务器内容可以登录认证,但是怎么保证"upload"的提交图片表单是合法的用户?
分析一下:
1. WEB服务器和图片服务器分隔两地,这决定了肯定有图片文件传递到远处的图片服务器上。那么可能有2种方式:1是先上传到WEB服务器,然后它在转到图片服务器;2是用户上传图片时直接上传到图片服务器上,不中转(这是我建议的)
2. 前面几楼朋友介绍了各种技术,不管哪种,底层其实都有数据传输的,即不管什么同步软件,都是要先让用户上传图片到WEB服务器,然后那个同步系统自动把图片传递到图片服务器。所以,我上面建议采用用户直接上传的方式。在图片服务器上建立个专门处理文件上传的应用(当然最好弄个web服务器),用户在页面提交上传时,检查如果是图片,则上传到图片服务器,其他内容传到WEB服务器。
具体实现我就不细说了,有人说图片服务器建立WEB程序了会影响图片服务器的,但是那些同步软件或者FTP方式不一样吗,和apache/tomcat之类底层都是socket通信;与其先socket到WEB服务器然后再socket图片服务器,不如一步到位,前者影响了2个服务器性能,后者只影响一个。如果怕图片服务器效果降低,今后可以把图片服务器扩充为2台,它们之间可以搞个同步系统,然后用负载均衡来搞定压力问题。 至于,怎么在一个页面上将一个form的东西分传到2个服务器,这个就不用说了吧,好多方法可用,比如图片单独一个form,用javascript来让用户点一个提交,同时执行2个form等等......
评论:
(1) 用到了SSO 单点登陆
(2) 远程mount过来
(3) 硬盘映射 吧B服务器的一个文件夹 映射到 A服务器的一个文件夹下! 操作系统自己会吧文件写到B服务器
(4) 我们公司是通过监控数据库服务器上的对应目录,只要该目录文件存在改变,马上自动同步到文件服务器上,你需要解决几个问题:找到对对应的windows API、编写网络传输程序(可以用FTP实现,效率比较低。)
WEB框架实现动静分离:
HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理,支持虚拟主机,它是免费、快速并且可靠的一种解决方案。
HAProxy特别 适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上,完全可以支持数以万计的并发连接。并且它的 运行模式使得它可以很简单安全的整合进您当前的架构中,同时可以保护你的web服务器不被暴露到网络上。
HAProxy实现了一种事件驱动,单一进程模型,此模型支持非常大的并发连接数。多进程或多线程模型受内存限制、系统调度器限制以及无处不在的锁限 制,很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User-Space) 实现所有这些任务,所以没有这些问题。此模型的弊端是,在多核系统上,这些程序通常扩展性较差。这就是为什么他们必须进行优化以 使每个CPU时间片(Cycle)做更多的工作。

第一步:安装httpd、php以及haproxy,这里我们直接用yum来安装即可,这里我们使用三台虚拟机来做测试,前端一台haproxy做调度,后端两台httpd服务器提供web服务,在做动静分离时时前端haproxy来判断动态和静态内容分别调度到哪台服务器上;
1.[root@node0 ~]# yum -y install httpd php haproxy第二步:安装好之后给这三台虚拟配置好相关的网络设备以及提供相关的测试页面等,在eth3这张网卡上选择相同的一个通信通道,node0这台虚拟机上haproxy的主机,node1和node2是不同的两台后端提供web服务器的虚拟主机;

01.[root@node0 ~]# ifconfig eth3 192.168.27.10/24 up # 给eth3配置ip地址02.[root@node0 ~]# ifconfig03.eth0 Link encap:Ethernet HWaddr 00:0C:29:B2:AD:BA 04.inet addr:172.16.27.88 Bcast:172.16.255.255 Mask:255.255.0.005.inet6 addr: fe80::20c:29ff:feb2:adba/64 Scope:Link06.UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:107.RX packets:11122303 errors:0 dropped:0 overruns:0 frame:008.TX packets:1193136 errors:0 dropped:0 overruns:0 carrier:009.collisions:0 txqueuelen:100010.RX bytes:697850934 (665.5 MiB) TX bytes:74549101 (71.0 MiB)11. 12.eth3 Link encap:Ethernet HWaddr 00:0C:29:B2:AD:C4 13.inet addr:192.168.27.10 Bcast:192.168.27.255 Mask:255.255.255.014.inet6 addr: fe80::20c:29ff:feb2:adc4/64 Scope:Link15.UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:116.RX packets:0 errors:0 dropped:0 overruns:0 frame:017.TX packets:6 errors:0 dropped:0 overruns:0 carrier:018.collisions:0 txqueuelen:100019.RX bytes:0 (0.0 b) TX bytes:468 (468.0 b)20.[root@node0 ~]#[root@node1 ~]# ifconfig eth0 192.168.27.18/24 up在node1和node2上设置好相关配置,选择虚拟机上的VMnet2与haproxy上的eth3的同一通信通道,再配置IP地址和默认网关接口,而后再提供不同的页面以便测试用;
1.[root@node1 ~]# route add defaulte gw 192.168.27.18 # 网关指向haproxy主机的eth3地址2.[root@node1 ~]# ping 192.168.27.10 # ping一下haproxy的节点看是否ping通3.[root@node1 ~]# vim /var/www/html/index.html4.<h3>node1.tanxw.com</h3>5.[root@node1 ~]# service httpd start # 配置好之后就把web服务启动起来,再访问测试一下,测试的连接改为桥接方式 01.[root@node2 ~]# ifconfig eth0 192.168.27.19/24 up02.[root@node2 ~]# route add defaulte gw 192.168.27.18 # 网关指向haproxy主机的eth3地址03.[root@node2 ~]# ping 192.168.27.10 # ping一下haproxy的节点看是否ping通04.[root@node2 ~]# vim /var/www/html/index.php05.<h3>node2.tanxw.com</h3>06.<?php07.phpinfo();08.?>09.[root@node2 ~]# service httpd start # 配置好之后就把web服务启动起来,再访问测试一下,测试的连接改为桥接方式01.############## 以上的使用默认配置就可以了 #######################02. 03.frontend web *:80 # *表示haproxy监听所有地址,监听的端口为8004.# 定义访问控制,表示以url以.css .js .html .php结尾的分别调度到哪台服务器上访问05.acl url_static path_end -i .css .js .html 06.acl url_dynamic path_end -i .php07. 08.# usr_backend表示使用backend服务,if表示如果满足url_static这个条件就调度到这台服务器上09.use_backend static if url_static 10.default_backend dynamic11. 12.backend static # 定义调用后端的静态页面的服务器上13.server node1 192.168.27.18:80 check inter 3000 rise 2 fall 2 maxconn 500014.backend dynamic # 定义调用后端的动态页面的服务器上15.server node2 192.168.27.19:80 check inter 3000 rise 2 fall 2 maxconn 5000 16.listen statspage # 定义监控管理接口的界面17.bind *:8888 # 定义访问页面端口18.stats enable # 启用管理界面19.stats hide-version # 隐藏版本20.stats uri /admin?stats # 访问路径21.stats auth xiao:linux # 访问时需要验证登录22.stats admin if TRUE # 如果登录成功就可以管理在线服务器第三步:配置haproxy的相关配置信息;
第四步:登录到我们配置好的管理界面:


第五步:配置好相关的配置之后就可以测试一下了,


最后我们再分别对这两个页面的请求做一下压力测试看看:


总结:
HAProxy是一款比较轻量级的负载均衡服务器,特别适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理。HAProxy运行在 当前的硬件上,完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中,同时可以保护你的web服务器不被暴露到 网络上。
上传文件服务器与web内容服务分离的更多相关文章
- element ui 上传文件,读取内容乱码解决
element ui 上传文件,读取内容乱码解决: 加第二个参数 reader.readAsText(file.raw,'gb2312'); <el-upload class="upl ...
- Salesforce LWC学习(三十二)实现上传 Excel解析其内容
本篇参考:salesforce lightning零基础学习(十七) 实现上传 Excel解析其内容 上一篇我们写了aura方式上传excel解析其内容.lwc作为salesforce的新宠儿,逐渐的 ...
- SpringBoot实现本地存储文件上传及提供HTTP访问服务
笔者计划为大家介绍分布式文件系统,用于存储应用的图片.word.excel.pdf等文件.在开始介绍分布式文件系统之前,为大家介绍一下使用本机存储来存放文件资源. 二者的核心实现过程是一样的: 上传文 ...
- VC++ Post 方法 上传数据到web服务器
最近在做一个项目,需要与WEB服务器交互一些信息.其中一项就是文件的上传与下载.现来一个上传的代码 #include "stdio.h" #include "WinSoc ...
- Java客户端通过Http发送POST请求上传文件到web服务器
http://www.cnblogs.com/WilliamJiang/archive/2012/04/29/2475883.html 1.朋友的一个需求,让我给他实现,需求是这样的,需要用ASP.n ...
- FTP上传文件服务器python实现
总结 使用Python的socket和socketserver模块实现ftp文件服务器.不是很难,但在粘包的问题上纠缠了不少时间.解决办法是发送文件信息之后等待一段时间. #!/usr/bin/pyt ...
- PHP代码篇(五)--如何将图片文件上传到另外一台服务上
说,我有一个需求,就是一个临时功能.由于工作开发问题,我们有一个B项目,需要有一个商品添加的功能,涉及到添加商品内容,比如商品名字,商品描述,商品库存,商品图片等.后台商品添加的接口已经写完了,但是问 ...
- ubuntu 16 搭建只能上传不可下载删除ftp服务
安装 VSFTPD,(建议使用FileZill测试,报错能看到原因) 如果使用window文件管理连接,要注意下图的设置 使用 apt-get 安装 vsftpd sudo apt-get insta ...
- salesforce lightning零基础学习(十七) 实现上传 Excel解析其内容
本篇参考: https://developer.mozilla.org/zh-CN/docs/Web/API/FileReader https://github.com/SheetJS/sheetjs ...
随机推荐
- 一个简单的修改 iis默认页面的方法..
1. IIS 默认打开的是欢迎页面 2. 然后找到了一个比较简单的修改默认界面的方法: 找到这个文件的默认路径 C:\inetpub\wwwroot 然后修改 iisstart.htm 文件 在hea ...
- children()与find()区别
1.children() 返回被选元素的所有直接子元素,该方法只会向下一级对 DOM 树进行遍历: 2.find() 返回被选元素的后代元素,一路向下直到最后一个后代.
- hive web界面管理
老版本使用 访问<Hive Server Address>:9999/hwi 1.首先下载对应版本的src文件,本机使用apache-hive-1.2.2-src.tar.gz 2.解压缩 ...
- C#中查看当前Request是否使用代理的一种方法
在程序中设置了代理,但是不知道如何判断是否真的使用了该代理, 在Visual Studio中可以使用以下方式来查看: 设置了代理 -> 在代码中WebRequest的实例处设置断点 -> ...
- maven dependcymanage作用在父类里面定义依赖包 子类不会自动继承需要主动使用 这样解决了父类引用任意包 子类就会引用的问题
maven dependcymanage作用在父类里面定义依赖包 子类不会自动继承需要主动使用 这样解决了父类引用任意包 子类就会引用的问题 子类在引用时候 不需要加上版本号
- BZOJ2553[BeiJing2011]禁忌——AC自动机+概率DP+矩阵乘法
题目描述 Magic Land上的人们总是提起那个传说:他们的祖先John在那个东方岛屿帮助Koishi与其姐姐Satori最终战平.而后,Koishi恢复了读心的能力…… 如今,在John已经成为传 ...
- 一个开启多个事务导致OptimisticLockException异常的问题
异常信息:org.eclipse.persistence.exceptions.OptimisticLockException 对象在其他的事物中被修改,而造成这一个问题的原因是:同时开启了两个事务, ...
- MT【234】正方形染色(二)
有$n$个正方形排成一行,今用红,白,黑三种颜色给这$n$个正方形染色,每个正方形只能染一种颜色.如果要求染这三种颜色的正方形都是偶数个,问有多少种不同的染色方法. 解答: 设有$a_n$种不同的染法 ...
- Android Studio中Git和GitHub使用详解
一.Git和GitHub简述 1.Git 分布式版本控制系统,最先使用于Linux社区,是一个开源免费的版本控制系统,功能类似于SVN和CVS.Git与其他版本管理工具最大的区别点和优点就是分布式: ...
- 【BZOJ2003】[HNOI2010]矩阵(搜索)
[BZOJ2003][HNOI2010]矩阵(搜索) 题面 懒得粘了,不难找吧. 题解 看的学长写的题解,也懒得写了 大概是这样的. 不难发现只需要确定第一行和第一列就能确定答案,而确定第一行之后每确 ...