最近偶尔发现一个比较奇怪的现象,netstat 查看监听的服务端口时,却只显示了 tcp6 的监控, 但是服务明明是可以通过 tcp4 的 ipv4 地址访问的,那为什么没有显示 tcp4 的监听呢? 以 sshd 监听的 22 端口为例: # netstat -tlnp | grep :22 tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 1444/sshd tcp6 0 0 :::22 :::* LISTEN 1444/sshd 可以看到,netstat 显示表示 s

引言 在之前的大数据学习系列中,搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试.其实要说的话,我开始学习大数据的时候,搭建的就是集群,并不是单机模式和伪分布式.至于为什么先写单机的搭建,是因为作为个人学习的话,单机已足以,好吧,说实话是自己的电脑不行,使用虚拟机实在太卡了... 整个的集群搭建是在公司的测试服务搭建的,在搭建的时候遇到各种各样的坑,当然也收获颇多.在成功搭建大数据集群之后,零零散散的做了写笔记,然后重新将这些笔记整理了下来.于是就有了本篇博文. 其实我在搭

原文地址:https://www.cnblogs.com/hanzhi/articles/8794984.html 目录 引言 目录 一环境选择 1集群机器安装图 2配置说明 3下载地址 二集群的相关配置 1主机名更改以及主机和IP做相关映射 更改主机名 做主机和IP的关系映射 2ssh免登录 3防火墙关闭 4时间配置 5快捷键设置可选 6整体环境变量设置 二Hadoop的环境搭建 1JDK配置 2hadoop配置 21 文件准备 22 环境配置 23 修改配置文件 231 修改 core-si

关于使用netstat -lantup查看的SSHD 6010端口解释: 1.使用netstat -lantup查看当前系统开启的服务端口 tcp6       0      0 ::1:6010                :::*                    LISTEN      1663/sshd: root@pts 发现 [root@server ~]# netstat -lantupActive Internet connections (servers and esta

第1章 Tomcat 1.1 Tomcat简介 Tomcat是一个免开放源代码的Web应用服务器,属于轻量级应用服务器,在中小型系统和并发访问用户不多的场合下被普遍使用,是开发调试JSP程序的首选,另外它还是Servlet和JSP容器,独立的Servlet容器是Tomcat的默认模式 其类似Nginx.Apache(httpd).lighttpd等Web服务器 nginx和http只能处理html等静态文件(jpg),配合php就能够处理动态的网页(以.php结尾): tomcat也能够处理静态

1.下载与项目对应的django版本pip3 install django==1.11.16 -i https://pypi.douban.com/simple/2.用django内置的wsgi模块测试项目是否可以正常运行python manage.py runserver 0.0.0.0:80803.下载uwsgi--此文所用版本:2.0.17.1pip install uwsgi4.测试uwsgi是否可以正常使用 1>测试文件test.py def application(env, star

使用二进制安装包的方式单机部署MySQL8.0.13 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 关于MySQL的介绍我这里就不多做赘述了,如何下载MySQL详情请参考:MySQL入门介绍(mysql-8.0.13).本篇博客默认你已经将MySQL二进制tar包下载好并上传到服务器上了. 一.使用默认的安装路径部署MySQL服务 1>.安装上传工具 [root@node101 ~]# yum -y install lrzsz 2>.上传MySQL的二进制安装包到服务器上

大数据开发的学习,组件还是很多的,都需要掌握并多加练习. 最好的参考文档当然是官方的了. 因为Hadoop生态圈组件很多,所以,在建设之初一定要检查好各版本的兼容性.避免后期麻烦. 我的练习使用Hadoop-2.7.5  以及Hbase-1.4.2 看了Hbase 手册Chapter4 兼容性没有问题. # 行存储 优点:写入一次性完成,保持数据完整性 缺点:数据读取过程中产生冗余数据,若有少量数据可以忽略 # 列存储 优点:读取过程,不会产生冗余数据,特别适合对数据完整性要求不高的大数据领域

部署kubernetes node节点 kubernetes node 节点包含如下组件: Flanneld: 省略,参照之前部署的文档 Docker1.12.5: 省略,参照之前部署的文档 kubelet kube-proxy 目录和文件 我们再检查一下三个节点上,经过前几步操作已经生成的配置文件 # #master节点: # ls /etc/kubernetes/ssl admin-key.pem admin.pem ca-key.pem ca.pem kube-proxy-key.pem

这篇文章介绍一下在微服务(springboot开发)的项目中使用pintpoint监控的过程及效果展示. 背景 随着项目微服务的进行,微服务数量逐渐增加,服务间的调用也越来越复杂,我们急切需要一个APM工具帮我们监控各个服务的性能及对服务间的调用进行跟踪,而通过调研多个开源APM工具后,最终我们选择了pintpoint.github地址是:pinpoint, 选择它有4个方面原因: pinpoint是基于java开发的,利于项目后期对源代码的修改 集成pinpoint不需要修改一行代码 pinp

hbase的完全分布式建立起来了, 可以试下好使不 1, 导包, {HBASE_HOME}/lib 下所有的jar包, 导入 2, 使用junit测试, 会报错, 因为缺少一个jar 3, 获取链接, 只需要提供zookeeper的地址即可 /** * 获取链接, 只需要zookeeper的链接就可了 */ @Before public void beforeTest() throws IOException { Configuration conf = HBaseConfiguration.c

安装环境 Red Hat Enterprise Linux Server release 7.3 (Maipo) jdk1.7.0_80 httpd-2.4.35.tar.gz apr-1.6.5.tar.gz.apr-util-1.6.1.tar.gz.apr-iconv-1.2.2.tar.gz pcre-8.42.tar.gz 安装依赖gcc,gcc-c++,uuid-devel,libuuid-devel Apache HTTP Server是Web服务器,支持http.SSL协议,Su

1.http 2.4新特性 新特性: (1) 在编译时可以将多个MPM构建为可加载模块,可以在运行时通过LoadModule指令配置所选的MPM: (2) 2.2版本的event MPM在实验阶段,到了2.4版本已经完全支持event MPM: (3)更好地支持异步读写以支持MPM和各类平台: (4) 支持每模块及每个目录分别使用各自的日志级别: (5) 按请求配置:<If>,<ElseIf>和<Else>部分可用于根据每个请求标准设置配置: (6) 增强版的表达式分析

一.HTTPD特性 (1)高度模块化:core(核心) + modules(模块) = apache(2)动态模块加载DSO机制: Dynamic Shared Object(动态共享对象)(3)MPM:Multipath Processing Modules(多路处理模块)多种不同的IO处理模型 Aapche的三种工作模型: prefork:2.2版本默认的模型,多进程模型,每个进程响应一个请求:进程之间彼此独立,每个子进程只有一个线程,最稳定.缺点:内存消耗较大一个主进程:负责生成n个子进程

安装多实例之前首先需要先安装mysql,这里就不介绍如何安装mysql了,参考前面的博客:https://www.cnblogs.com/hei-ma/p/9505509.html 安装多实例之前需要将之前安装好的mysql停掉. # /etc/init.d/mysqld stop 开始正式安装mysql-5.7.19多实例 1.创建多实例目录 # ,}/data 2.编辑多实例配置文件 3308端口的需要将3307修改为3308,server-id也需要改 # cat /data/mysql3

jenkins大多数情况下都是用来部署Java项目,Java项目有一个特点是需要编译和打包的,一般情况下编译和打包都是用maven完成,所以系统环境中需要安装maven. 实验环境: 10.0.0.12 作为项目的线上服务器,具有JDK1.8+Tomcat8.5环境,本地gitlab仓库 10.0.0.13 Jenkins服务器 一.配置tomcat 1.1.线上服务器安装tomcat 安装 rpm -ivh jdk-8u131-linux-x64.rpm 配置环境变量 JAVA_HOME=/u

ZooKeeper集群的一些基本概念 zookeeper集群搭建: zk集群,主从节点,心跳机制(选举模式) 配置数据文件 myid 1/2/3 对应 server.1/2/3 通过 zkCli.sh -server [ip]:[port] 命令检测集群是否配置成功 和其他大多数集群结构一样,zookeeper集群也是主从结构.搭建集群时,机器数量最低也是三台,因为小于三台就无法进行选举.选举就是当集群中的master节点挂掉之后,剩余的两台机器会进行选举,在这两台机器中选举出一台来做maste

关闭防火墙和selinux,配置yum源配置21 .22 数据库(这里以21为例)[root@host21 ~]# tar -xf mysql-5.7.17.tar[root@host21 ~]# yum -y install mysql-community-*.rpm[root@host21 ~]# systemctl restart mysqld[root@host21 ~]# grep password /var/log/mysqld.log2019-05-27T14:45:14.6473

笔记内容:搭建ELK日志分析平台(上)-- ELK介绍及搭建 Elasticsearch 分布式集群笔记日期:2018-03-02 27.1 ELK介绍 27.2 ELK安装准备工作 27.3 安装es 27.4 配置es 27.5 curl查看es集群情况 ELK介绍 需求背景: 业务发展越来越庞大,服务器越来越多 各种访问日志.应用日志.错误日志量越来越多,导致运维人员无法很好的去管理日志 开发人员排查问题,需要到服务器上查日志,不方便 运营人员需要一些数据,需要我们运维到服务器上分析日志

Kubernetes的核心对象 API Server提供了RESTful风格的编程接口,其管理的资源是Kubernetes API中的端点,用于存储某种API对象的集合,例如,内置Pod资源是包含了所有Pod对象的集合.资源对象是用于表现集群状态的实体,常用于描述应于哪个节点进行容器化应用.需要为其配置什么资源以及应用程序的管理策略等,例如,重启.升级及容错机制.另外,一个对象也是一种“意向记录“——一旦创建,Kubernetes就需要一直确保对象始终存在.Pod.Deployment和Serv

(1).CA认证 CA全称Certificate Authority,通常翻译成认证权威或者认证中心,主要用途是为用户发放数字证书.认证中心(CA)的功能:证书发放.证书更新.证书撤销和证书验证.CA证书的作用:身份认证,实现数据的不可否认性. CSR全称Cerificate Signing Request,中文名证书请求文件,是证书申请者在申请数字证书时由CSP(加密服务提供者)在生成私钥的同时也生成证书请求文件,证书申请者只要把CSR文件提交给证书颁发机构后,证书颁发机构使用其根证书的私钥签