Cassandra简介 Cassandra是一个开源分布式NoSQL数据库系统. 它最初由Facebook开发,用于储存收件箱等简单格式数据,集GoogleBigTable的数据模型与Amazon Dynamo的完全分布式的架构于一身.Facebook于2008将 Cassandra 开源,此后,由于Cassandra良好的可扩展性,被Digg.Twitter等知名Web 2.0网站所采纳,成为了一种流行的分布式结构化数据存储方案. 不过国内并未流行起来,除了最早的淘宝和360在用,加上阿里巴巴…

最近两周优化了我们持续部署的程序,收效显著,记录下来分享给大家 背景介绍 那年公司快速成长,频繁上线新项目,每上线一个项目,就需要新申请一批机器,初始化,部署依赖的服务环境,一个脚本行天下 那年项目发展如火如荼,A项目流量暴增马上给A扩机器,B项目上线新功能又要扩容B,上线新项目没资源了,就先下线处于流量低峰的C项目主机 每天日夜加班,疲于奔命 那年得知了Docker能拯救我于水火,遂决定为了荣誉(发际线)而战. 为了快速落地以及尽量降低引入Docker对整个CICD流程的影响,用最小的改动把D…

操作环境 操作系统:CentOS7.2 内存:1GB CPU:2核 Docker服务常用命令 docker服务操作命令如下 service docker start #启动服务 service docker stop  #停止服务 service docker restart #重启服务 service docker status   #查看服务状态 启动Docker服务 docker是一个CS模型,需要先启动服务端,直接执行 sudo service docker start 启动docker…

docker简易实践 实验环境 操作系统:deepin 15.4 安装步骤 1.安装docker sudo apt-get install docker.io 2.启动docker服务 sudo service docker restart 3.运行hello world sudo docker run hello-world 出现以下信息则代表成功 Hello from Docker! This message shows that your installation appears to b…

部分涉及到Linux.Nginx.tomcat.MySQL等的点滴操作记录,时间长了,就忘掉了,偶尔整理一下操作的history,就此简要备份一下: [原][BG]-一次虚拟化环境实践简要记录: https://www.cnblogs.com/haochuang/p/8862640.htmll [原][BG]KVM虚拟化管理 virt manager常用操作:https://www.cnblogs.com/haochuang/p/9540812.html [原][BG]三块SAS新磁盘RAID扩…

前言 其实接触 docker 也有一段时间了,但是一直没有做下总结,现在网上关于 docker 的介绍也有很多了,本着好记性不如烂笔头的原则,还是自己再记录一波吧. 实现目标 安装 docker ce 探索 docker 基本概念及用法 环境准备 Centos7 64位,内核版本不低于 3.10 安装 docker ce 以下命令均需在 root 权限下执行. 先卸载旧版本docker: 1sudo yum remove docker \ 2                  docker-cl…

美团点评容器平台简介 本文介绍美团点评的Docker容器集群管理平台(以下简称“容器平台”).该平台始于2015年,是基于美团云的基础架构和组件而开发的Docker容器集群管理平台.目前该平台为美团点评的外卖.酒店.到店.猫眼等十几个事业部提供容器计算服务,承载线上业务数百个,日均线上请求超过45亿次,业务类型涵盖Web.数据库.缓存.消息队列等. 为什么要开发容器管理平台 作为国内大型的O2O互联网公司,美团点评业务发展极为迅速,每天线上发生海量的搜索.推广和在线交易.在容器平台实施之前,美团…

前言 很早就听说微软有个基于Ubuntu的子系统,一直也没机会尝试一下,之前也只是用VMware安装,但是还要单独安装软件,安装镜像,一点都不fit,所以就瞎折腾下(也是因为最近有空). 搭建Ubuntu子系统 wsl是什么 适用于 Linux 的 Windows 子系统(英语:Windows Subsystem for Linux,简称WSL)是一个为在Windows 10和Windows Server 2019上能够原生运行Linux二进制可执行文件(ELF格式)的兼容层. 简单的说,就是在…

1.背景 开发部门决定在Apache Ranger开源社区贡献代码,目标是个人国内排名Top1,世界排名Top2,并且在已经成为Ranger项目的Committer情况下,争取成为Ranger项目的PMC.同时部门投入的开发人员人力非常有限,开发人员的水平也无法和国外开发人员相比肩,大部分开发人员对于Ranger的熟悉程度也有限,在这种情况下我们不仅要提交自己的issue,还要积极review别人的issue,为了在提高效率达到目标的同时,尽量减少错误的发生,比如提交的issue补丁有问题,re…

上篇(spring mvc+ELK从头开始搭建日志平台)分享了从头开始搭建基于spring mvc+redis+logback+logstash+elasticsearch+kibana的分布式日志平台,是在windows平台下操作的,这篇主要是将这些软件环境全部在linux+docker折腾一遍. 我们的目的是需要在docker中安装像resis,elk这些软件环境,由于我是windows平台,搜索一把找到了boot2docker,但在安装时提示需要用dockermachine来安装,dock…

相关的代码都在Github上,请参见我的Github,https://github.com/lijingpeng/deep-learning-notes 敬请多多关注哈~~~ All in one docker 如果你不想单独安装每个深度学习组件,并且厌倦于安装过程中的各种依赖冲突等问题,那么推荐你使用Docker来搭建深度学习工作环境.下面是一个可以参考的 All in one docker 环境.几乎包含了所有的流行的深度学习框架,并且分别有CPU版本和GPU版本,与虚拟机不同的是,Dock…

docker环境 快速使用elasticsearch-head插件 #elasticsearch配置 #进入elk容器 docker exec -it elk /bin/bash #head插件访问配置 echo '#head插件访问# http.cors.enabled: true http.cors.allow-origin: "*" '>>/etc/elasticsearch/elasticsearch.yml #重启elasticsearch service ela…

Docker环境 ELK快速部署 环境 Centos 7.4 , Docker version 17.12 Docker至少3GB内存: #内核配置 echo ' vm.max_map_count = 262144 net.core.somaxconn=65535 '>>/etc/sysctl.conf sysctl -p #创建elk #下载elk镜像 docker pull sebp/elk #创建volume(推荐) docker volume create elk-es docker…

docker环境部署 1 查看当前系统版本 只支持CentOS7版本的系统,如果不是的话,可以让项目方进行重装或者系统内核升级. [root@bogon bin]# cat /etc/redhat-release CentOS Linux release 7.3.1611 (Core) 2 安装docker-engine yum install -y container-selinux yum install -y docker systemctl enable docker systemctl…

运行环境: VMware Workstation Pro 在虚拟机中安装centos7系统, 选择最小安装, 网络连接方式选择的桥接(与宿主机在同一IP段)centos7一定要安装64位, docker目前不支持32位内核 ##看准了, 是在centos7系统下, centos6填了很多坑, 最终还是选择了用centos7系统 ## 准备工作因为是最小安装, 默认没有wget, 安装wget yum install wget 打开阿里云的开源镜像站http://mirrors.aliyun.co…

前端开发过程中,少不了自己封装一些通用的包,但又不想放在公共的平台,所以搭建一个npm私有的仓库是很有必要的. 在这里简单介绍如何使用 verdoccio 在docker环境下的配置.verdoccio,轻量级私有npm代理注册表.加上docker,那就真的无敌方便了,搭建一个私有仓库轻轻松松几分钟搞定. 首先要有nodejs 已经 npm 都已经安装好了. 1.拉取verdaccio的docker镜像 docker pull verdaccio/verdaccio 2.在根目录下创建docke…

[前言] DevOps方面的文章很早之前就想分享了,挤出一点时间把前段时间搭建的一些提高开发效率的东西给大家分享一下吧. 本文介绍了一个.netcore mvc web项目,从项目push到github开始 自动从github上拉取代码 编译,生成,发布 停止docker容器,删除docker镜像 通过项目的dockerfile新建docker镜像 Run容器,自动绑定ip,站点启动 整个过程只需要在jenkins这个自动化工具上点一个按钮.下面我们按顺序来简单介绍一下. 使用的内容都很基础,重…

一:docker的定义和使用场景: Docker是一个开源的引擎,可以轻松的为任何应用创建一个轻量级的.可移植的.自给自足的容器.开发者在笔记本上编译测试通过的容器可以批量地在生产环境中部署,包括VMs(虚拟机).bare metal.OpenStack 集群和其他的基础应用平台. Docker通常用于如下场景: web应用的自动化打包和发布: 自动化测试和持续集成.发布: 在服务型环境中部署和调整数据库或其他的后台应用: 从头编译或者扩展现有的OpenShift或Cloud Foundry平台…

本文记录下通过MySQL Replication在Docker环境下,通过多个容器 实现数据库主从配置. MySQL Replication就不多解释了,简单说就是MySQL非常出色的一个功能,该功能将一个MySQL实例中的数据复制到另一个MySQL实例中.整个过程是异步进行的,但由于其高效的性能设计,复制的延时非常小.MySQL复制功能在实际的应用场景中被广泛的应用于保证数据系统数据的安全性和可扩展设计中.想了解更多可从网上找更多的资料. 首先当然是准备好一台安装好docker的linux环境…

前言:这篇文章是基于之前的“linux环境下配置solr5.3详细步骤”(http://www.cnblogs.com/zhangyuan0532/p/4826740.html)进行扩展的.本篇的步骤是后来记录的,所以没有细节的命令代码,也没有截图,谅解. 原先是solr5.3部署在linux环境下,本篇是solr6.0部署在docker环境下.大概是半年前2016年8月进行配置的,solr现在有小版本变化. 一.docker创建镜像和容器 (由于dockerfile里默认用户为“solr",从…

前言:两个月前的16年11月份完成的配置,使用的solr6.1和zookeeper3.4,刚刚写成blog,目前版本可能有小版本的变化. 本例完成结果为:在docker环境下部署solrcloud集群,同时使用zookeeper集群做配置管理. 一.部署zookeeper集群 1.加载images,(两种方式:A下载offical版本zookeeper,B加载导出的tar包.A方式为新部署的情况,B方式为从测试环境部署到正式环境的情况) A下载 #下载 docker pull zookeeper…

0x00 描述 宿主机是 mac mini,构建的项目在 docker 中,所以需要在 PHPStorm 上配置 Xdebug 进行远程代码调试. 0x01 环境 宿主机:macOS High Sierra Docker:Docker version -ce, build e68fc7a 容器环境:CentOS Linux release (Core) + PHP + nginx/ + Xdebug PhpStorm: 0x03 下载安装 Xdebug 下载 Xdebug 首先要确定 Xdebu…

需求 我前一篇是在window环境下做的测试,实际情况现在的生成环境程序都部署在了docker环境下,此环境对arthas可能会缺失很多必要组件 目前的基础环境是在docker容器中,只存在基本的tomcat容器运行的必要环境 步骤 首先进入容器docker exec -it xxx bash 我的tomcat目录在/usr/local/tomcat 因此我在/usr/local/tool建立了个工具目录,在里面执行curl -L https://alibaba.github.io/arthas…

本文转自:https://www.cnblogs.com/52fhy/p/8413029.html Docker轻量级的特性使得我们可以快速打包开发环境:一处编译,到处使用.我们可以在第一次编译好需要的开发环境,然后把镜像导出打包,只有有docker环境,便可以快速还原原来的开发环境. 很常用的一个场景:换了电脑后,每次都需要重新安装PHP开发环境,浪费了很多时间.使用Docker,只需要预先编译一次,后续无需再次编译,就算从Windows换到了Mac.Linux,我们编译好的环境依然可以使用:…

由于容器化的需要,前几天我本地也换成了docker环境.就研究了一下docker环境下phpstorm和xdebug的配置. http://www.mmfei.com/?p=453 这个博客给出了一个常规的解决思路.这里需要注意的是,在docker环境下phpstorm的CLI Interpreter需要配置容器镜像和目录映射. mac环境下docker中的Xdebug不能使用127.0.0.1左右remote_host.而是要使用docker的宿主IP. 由于办公环境的复杂,导致我得本机IP,…

Elasticsearch Docker环境下安装 Daemon镜像配置的是https://registry.docker-cn.com Linux:vi /etc/docker/daemon.json 也就是 "registry-mirrors": ["https://registry.docker-cn.com"] 下载镜像: docker pull elasticsearch:5.6.8 创建容器 docker run -di --name=elasticse…

Docker轻量级的特性使得我们可以快速打包开发环境:一处编译,到处使用.我们可以在第一次编译好需要的开发环境,然后把镜像导出打包,只有有docker环境,便可以快速还原原来的开发环境. 很常用的一个场景:换了电脑后,每次都需要重新安装PHP开发环境,浪费了很多时间.使用Docker,只需要预先编译一次,后续无需再次编译,就算从Windows换到了Mac.Linux,我们编译好的环境依然可以使用:只需要导入或者pull下来就行. 在Ubuntu等环境,我们可以一键安装Docker(服务端.客户端…

Docker环境描述 主机名 部署服务 备注 MySQL Route MySQL Route 部署在宿主机上的MySQL Route服务 MySQL Master1 MySQL 5.7.16 Docker环境与MySQL Master2互为主从 MySQL Master2 MySQL 5.7.16 Docker环境与MySQL Master1互为主从 MySQL Slave1 MySQL 5.7.16 Docker环境是MySQL Master1的从服务器 MySQL Slave2 MySQL…

win7环境基础在上一篇win7下docker环境搭建nginx+php-fpm+easyswoole开发环境中已经详细叙述搭建完成 本篇文章将叙述如何在上述基础上搭建laravel开发环境,这个其实安装跟easyswoole有点类似: 1.先配置nginx, 详细代码如下 server { listen ; listen [::]:; server_name laravel.test; root /var/www/locallaravel/public; index index.php ind…

前言 (1)写在前面的话,鉴于在linux或类unix系统中安装jdk+tomcat等环境,没有什么经验,所以选择在docker容器中安装之,以防止安装失败无法恢复系统 (2)需要下载对应的系统的docker镜像,如:centos.Ubuntu等 (3)本文并未没有docker安装所需的相关环境说明,可自行查看官网并安装之,此处略 1.下载CENTOS的docker镜像 镜像下载地址DaoCloud [root@izwz99jhv6u546yu27nrwdz downloads]# docker…