-- 图片来自 <国家地理中文网>-- 往期推荐: Flink深入浅出:部署模式 Flink深入浅出:内存模型 Flink深入浅出:JDBC Source从理论到实战 Flink深入浅出:Sql Gateway源码分析 Flink深入浅出:JDBC Connector源码分析 什么是Flink 之 架构篇 什么是Flink 之 应用篇 Flink在资源管理上可以分为两层:集群资源和自身资源.集群资源支持主流的资源管理系统,如yarn.mesos.k8s等,也支持独立启动的standalone集…

往期推荐: Flink深入浅出:内存模型 Flink深入浅出:JDBC Source从理论到实战 Flink深入浅出:Sql Gateway源码分析 Flink深入浅出:JDBC Connector源码分析 什么是Flink 之 架构篇 什么是Flink 之 应用篇 Flink在1.11版本新增了一种部署模式,目前支持三种:Session 模式.Per job 模式.Application 模式,这三种模式主要在集群管理.资源隔离.用户main方法执行位置几个方面有所不同. 本篇会按照下面几个步…

官方文档:Docker Machine 官方文档:Docker Toolbox boot2docker安装包官网下载链接:Docker Toolbox-1.11.1b.exe 此安装包包含的“boot2docker.iso”文件版本为v1.11.1. 安装完Docker Toolbox,运行“Docker Quickstart Terminal”,很可能提示需要更新“boot2docker.iso”文件到v1.11.2,那么你可以从下面提供的地址进行下载. 下载“boot2docker.iso”…

kubernetes v1.11已经发布了一段时间,和以前相比,一个显著亮点是更新了高可用方案: https://kubernetes.io/docs/setup/independent/high-availability/ 新的方案和以前相比,更容易操作:不需要创建独立的etcd集群(默认自动创建基于容器的etcd集群),也不需要手动创建集群证书:用户只需要额外建立一个负载均衡服务器,比如:lvs.haproxy,然后根据上述文档操作,就能创建一个三个master共存的高可用集群.…

1. 写在前面 在大数据实时计算方向,天猫双11的实时交易额是最具权威性的,当然技术架构也是相当复杂的,不是本篇博客的简单实现,因为天猫双11的数据是多维度多系统,实时粒度更微小的.当然在技术的总体架构上是相近的,主要的组件都是用到大数据实时计算组件Flink(当然阿里是用了基于Flink深度定制和优化改装的Blink).下图是天猫双11实时交易额的大体架构模型及数据流向(参照https://baijiahao.baidu.com/s?id=1588506573420812062&wfr=spi…

在Ubuntu上使用离线方式快速安装K8S v1.11.1 0.安装包文件下载 https://pan.baidu.com/s/1nmC94Uh-lIl0slLFeA1-qw v1.11.1 文件大小 630M左右 1.系统环境 系统版本 Ubuntu 18.04 LTS kubernete v1.11.1 机器数量 x3 配置 1核 2G 20G硬盘 k8s-master001 192.168.113.5 k8s-node001 192.168.113.3 k8s-node002 192.16…

0.引言 最近打算将现有项目的 Docker 部署到阿里云上面,但是之前是单机部署,现在阿里云上面有 3 台机器,所以想做一个 Docker 集群.之前考虑是用 Docker Swarm 来做这个事情的,不过后面看了一下现在 K8S 用的比较多,进而想在这三台机器上部署 K8S 集群. 下面附上 Kubernetes 介绍: Kubernetes 是 Google 团队发起的开源项目,它的目标是管理跨多个主机的容器,提供基本的部署,维护以及运用伸缩,主要实现语言为 Go 语言.Kubernete…

说明:部署的过程中请保证每个命令都有在相应的节点执行,并且执行成功,此文档已经帮助几十人(仅包含和我取得联系的)快速部署k8s高可用集群,文档不足之处也已更改,在部署过程中遇到问题请先检查是否遗忘某个步骤,文档中每个步骤都是必须的. 经测验此文档也适合高可用部署k8s v.12,只需修改对应版本号就可. 1.部署架构 详细架构: 2.基本配置 主机名 IP地址 说明 组件 k8s-master01 ~ 03 192.168.20.20 ~ 22 master节点 * 3 keepalived.n…

kubernetes 版本 v1.11.1 系统版本:Centos 7.4 3.10.0-693.el7.x86_64 master: 192.168.0.205 node1: 192.168.0.206 node2: 192.168.0.207 pod 地址段:10.244.0.0/16 service 地址段:10.96.0.0/12 因为某种原因,国内无法直接获取k8s的镜像,这里列出需要用到的镜像.已在百度云盘共享,需要的自行下载: 链接: https://pan.baidu.com/s…

之前测试了离线环境下使用二进制方法安装配置Kubernetes集群的方法,安装的过程中听说 kubeadm 安装配置集群更加方便,因此试着折腾了一下.安装过程中,也有一些坑,相对来说操作上要比二进制方便一点,毕竟不用手工创建那么多的配置文件,但是对于了解Kubernetes的运作方式,可能不如二进制方式好.同时,因为kubeadm方式,很多集群依赖的组件都是以容器方式运行在Master节点上,感觉对于虚拟机资源的消耗要比二进制方式厉害. 0. kubeadm 介绍与准备工作 kubeadm is…