3.1 硬件要求 一般选择 2U 机型,磁盘 SATA 盘 4TB,如果 IO 要求比较高,可以采购 SSD 固态硬盘.为了充分保证系统的稳定性和性能,要求所有 glusterfs 服务器硬件配置尽量一致,尤其是硬盘数量和大小.机器的 RAID 卡需要带电池,缓存越大,性能越好.一般情况下,建议做 RAID 10,如果出于空间要求的考虑,需要做 RAID 5,建议最好能有 1-2 块硬盘的热备盘. 3.2 系统要求和分区划分 系统可以使用 CentOS 6.x x86_64,安装完成后升级到最新…

今天分享一篇从0到1搭建Spark集群的步骤,企业中大家亦可以参照次集群搭建自己的Spark集群. 一.下载Spark安装包 可以从官网下载,本集群选择的版本是spark-1.6.0-bin-hadoop2.6 在官网中找到对应的链接即可http://spark.apache.org/downloads.html 或者用本人云盘下载地址 附上链接如下链接:https://pan.baidu.com/s/1o7Vrkue 密码:sc2z 二.部署和规划Spark集群 提前准备好四台虚拟主机,三台主…

Centos7下 GlusterFS 环境搭建准备工作glusterfs-3.6.9.tar.gzuserspace-rcu-master.zip三台服务器:192.168.133.53.192.168.133.54.192.168.133.55如果您的环境没有网络,请先阅读centos7 配置本地yum源以下出现的简写 含义53 192.168.133.53:主节点54 192.168.133.54:从节点55 192.168.133.55:客户端(53) 仅在53节点操作(53&54) 53…

部署企业LNMP架构 1===============部署Nginx 2===============安装及部署Mysql数据库 3===============安装PHP解析环境 4===============配置Nginx支持PHP环境 5===============LNMP平台部署web应用 关闭相关安全机制 [root@nginx~]#systemctl stop firewalld [root@nginx~]#iptables-F [root@nginx~]#setenforce…

     …

准备工作 1.安装IBA yum install libradmacm librdmacm-devel libmlx4 infiniband-diags 2.配置IPOIB /etc/sysconfig/network-scripts/ifconfig-ib0    DEVICE=ib0    TYPE=InfiniBand    BOOTPROTO=static    ONBOOT=yes    IPADDR=17.0.31.3    NETMASK=255.255.0.0 修改完配置之后,需…

      简言   本人在博客园注册也2年多了,一直没有写自己的博客,因为才疏学浅一直跟着园子里的大哥们学习这.net技术.一年之前跳槽到现在的公司工作,由于公司没有自己一套的开发框架,每次都要重新搭建,于是本人就用业余时间写了一个简单开发框架,我也不知道叫“框架”是否符合,大家对付着看吧,希望可以帮助一些新人学习,当然也可以用于开发,公司已经有一个项目使用了,效果还算不错.框架重头到尾都是我一个人完成,程序多少有些bug 没被发现.希望园子里的伙伴见谅并反馈给我,你们的支持就是我最大的动力.…

0)环境准备 GlusterFS至少需要两台服务器搭建,服务器配置最好相同,每个服务器两块磁盘,一块是用于安装系统,一块是用于GlusterFS. 192.168.10.239 GlusterFS-master(主节点) Centos7.4192.168.10.212 GlusterFS-slave (从节点) Centos7.4192.168.10.213 Client (客户端)---------------------------------------------------------…

一,分布式文件系统理论基础 1.1 分布式文件系统出现 计算机通过文件系统管理,存储数据,而现在数据信息爆炸的时代中人们可以获取的数据成指数倍的增长,单纯通过增加硬盘个数来扩展计算机文件系统的存储容量的方式,已经不能满足目前的需求. 分布式文件系统可以有效解决数据的存储和管理难题,将固定于某个地点的某个文件系统,扩展到任意多个地点/多个文件系统,众多的节点组成一个文件系统网络.每个节点可以分布在不同的地点,通过网络进行节点间的通信和数据传输.人们在使用分布式文件系统时,无需关心数据是存储在哪个节…

企业内部WIKI搭建 本文所使用的是Screwturn 基于asp.net webform和Sql server的. 仅仅要把本文资源下载下来,直接用IIS部署,然后更改web.config的connectionString就能够使用. 资源页: http://download.csdn.net/detail/lglgsy456/7932149 部署好之后更改connectionString.然后注冊一个用户,到数据库里面把这个用户变为administrator(做程序的应该都懂吧,表结构非常e…