一.实验目的 (1)掌握在 Linux 虚拟机中安装 Hadoop 和 Spark 的方法: (2)熟悉 HDFS 的基本使用方法: (3)掌握使用 Spark 访问本地文件和 HDFS 文件的方法. 二.实验平台 操作系统:centos6.4: Spark 版本:1.5.0: Hadoop 版本:2.7.3. 三.内容 实验一: 1．安装 Hadoop 和 Spark 进入 Linux 系统,参照本教程官网“实验指南”栏目的“Hadoop 的安装和使用”,完 成 Hadoop 伪分布式模式的安

前言 在国内编译Spark项目需要从Maven源下载很多依赖包,官方源在国内大环境下的下载速度大家都懂得,那个煎熬啊,简直是浪费生命. 如果你的下载速度很快,你现在就可以无视这篇文章了. 阿里云给国内开发者提供了一个非常的良心的服务:提供了一个国内Maven镜像,可以让我们拜托这种煎熬. 地址信息 阿里云的Maven也是基于nexus构建. 地址:http://maven.aliyun.com/ 仓库地址:http://maven.aliyun.com/nexus/content/groups/

阿里云服务器安装Docker并部署nginx.jdk.redis.mysql 一.安装Docker 1.安装Docker的依赖库 yum install -y yum-utils device-mapper-persistent-data lvm2 2.添加Docker CE的软件源信息 yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo 3.安装Docker

新买的阿里云服务器,安装上sqlserver2012,本机连接测试没有问题,但是回到本地,使用ip远程连接报错. 尝试了网上各种办法,都是失败.最后找到原因,原来在阿里云的控制台上有设置: 首先进入安全组 点击配置规则 点击克隆,克隆出如下规则: 再用本机连接数据库,成功连接! 之后IIS发布网站,端口也需要在这里配置.

一. 环境 centos7 阿里云服务器, httpd服务, 阿里云免费的Symantec证书 阿里云Symantec 有个免费版的证书, 具体怎么申请可以去百度解决 二. 网上大部分的经验贴都是要Apache 安装mod_ssl.so 在 /etc/httpd/conf 下httpd.conf 也就是大部分人都看到的 # LoadModule ssl_module modules/mod_ssl.so # Include conf.d/*.conf 我本地也是没有的, 于是只能自行安装了, y

下载安装服务器版shadowsocks yum install epel-release yum update yum install python-setuptools m2crypto supervisor easy_install pip pip install shadowsocks 文件配置 编辑/etc/shadowsocks.json文件(这个文件本身是没有的,需要新增): vim /etc/shadowsocks.json { "server":"172.**

1.下载mongodb curl -O https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.2.9.tgz 2.解压 tar zxvf mongodb-linux-x86_64-3.2.9.tgz 3.创建数据文件夹和日志文件等 mkdir -p /usr/local/mongodb/data touch /usr/local/mongodb/mongod.log touch /usr/local/mongodb/mongodb.con

下载安装包 sudo wget http://nginx.org/download/nginx-1.15.5.tar.gz 解压缩 tar zxvf nginx-1.15.5.tar.gz 打开目录 cd nginx-1.15.5/ 配置安装目录sudo ./configure --prefix=/usr/local/nginx (后面的路径即安装路径) 编译安装 sudo make && make install 为了能在本地访问,需配置阿里云服务器安全组规则(见文章后) 启动nginx

在阿里云服务器上安装Docker,服务器的系统是CentOS 7.6, 所以可以看官方Docker安装文档:https://docs.docker.com/install/linux/docker-ce/centos/ 从阅读官网来看,首先若是没有较旧的Docker版本只需3步就可以完成Dockers的安装:但是有旧版本的话,需要先卸载旧版本 $ sudo yum remove docker \ docker-client \ docker-client-latest \ docker-comm

先用netstat -tlunp查看80端口是否打开,再关闭服务器的防火墙,可以用 systemctl status firewalld 查看防火墙状态  systemctl stop firewalld关闭防火墙 ,systemctl start firewalld 开启防火墙  但是上面的两个只是单次登录服务器有效,开机禁用 用 systemctl disable firewalld , 永久开启用systemctl enable firewalld ,接下来就是最重要的一步,因为是买的阿里

第一步:安装mysql 我个人是申请的阿里云ecs服务器CentOs操作系统,由于是初装咱们直接进行安装 1.首先从官网下载安装mysql-serve  # wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm # rpm -ivh mysql-community-release-el7-5.noarch.rpm # yum install mysql-community-server 2.安装成功后,重启m

系统:CentOS Linux release 8.1.1911 配置主机名 [root@iZwz9e3t4tj14jzewdtvj8Z ~]# hostnamectl set-hostname lan [root@iZwz9e3t4tj14jzewdtvj8Z ~]# cat /etc/hosts ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 127.0.0.1 localhost localhos

系统:CentOS Linux release 8.1.1911 配置主机名 [root@iZwz9e3t4tj14jzewdtvj8Z ~]# hostnamectl set-hostname lan [root@iZwz9e3t4tj14jzewdtvj8Z ~]# cat /etc/hosts ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 127.0.0.1 localhost localhos

服务器: 阿里云 Alibaba Cloud Linux 下载 进入到预计存放nginx的目录,比如:/usr/local/ 下载nginx压缩包,并解压 cd /usr/local wget http://nginx.org/download/nginx-1.18.0.tar.gz tar -zxvf nginx-1.18.0.tar.gz 安装 进入到解压的文件夹并安装 cd /usr/local/nginx-1.18.0 ./configure make -j2 make install

首先,此篇文章是有原因的. 刚开始也和大家一样来学习安装zabbix 奈何网上的教程和现实出现不一样的情况 在安装zabbix过程中,因为zabbix下载源是在国外,下载途中会出现终止下载的情况 transfer closed with 333939 bytes remaining to read 导致后面安装情况中出现失败的情况.现在这篇文章就是解决这个问题的. 安装过程中 有参考以下文档  CentOS7 配置阿里云yum源 Zabbix如何更换成国内下载源 阿里云Zabbix安装实践过程

https://blog.csdn.net/wlwlwlwl015/article/details/52399739 安装oracle http://www.cnblogs.com/vesaa/p/9213749.html

1.先更新软件 输入 yum -y update 2.下载MySql安装包 rpm -ivh http://dev.mysql.com/get/mysql57-community-release-el7-8.noarch.rpm 3.安装MySql yum install -y mysql-server 安装成功最后出现complete! 4.设置开机启动 systemctl enable mysqld.service 5.检查是否设置开机启动成功 systemctl list-unit-fil

1.提供一个离线mysql下载路径:http://mirrors.163.com/mysql/Downloads/MySQL-8.0/ 2.在线mysql8安装: 2.1 下载mysql: wget https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm yum -y localinstall mysql80-community-release-el7-1.noarch.rpm 2.2 启动mysql: systemc

centos6.8,没有安装svn的情况: 1.安装: yum install subversion (这一步一般不会错) 2.创建svn版本库: cd /root mkdir -p svn/project //创建目录 svnadmin create /root/svn/project //svn创建版本库 3.配置svn版本库: cd /root/svn/project/conf vi passwd ---->test=123456 // 在里面添加svn用户名(test)和密码(12345

1.操作系统: CentOS 7.4 64位 2.下载python安装包 wget https://www.python.org/ftp/python/3.8.0/Python-3.8.0.tar.xz 2.解压.配置.编译安装 yum install gcc-c++ gcc make cmake zlib-devel bzip2-devel openssl-devel ncurse-devel libffi-devel -y #安装编译工具 tar -xvf Python-3.8.0.tar.

1. 安装mysql https://www.jianshu.com/p/ce53320dcfbd 2. 获取mysql 5.7随机生成的密码 https://www.yanning.wang/archives/379.html 使用 grep "temporary password" /var/log/mysqld.log获取mysql的初始化密码. 3. 在使用数据库之前需要初始化密码,否则无法使用 重新设置密码:alter USER `用户名`@`localhost` ident