Linux 下搭建 Spark3 + Jupyter 环境】的更多相关文章

前言 在 linux 下搭建 python 机器学习环境还是比较容易的,考虑到包依赖的问题,最好建立一个虚拟环境作为机器学习工作环境,在建立的虚拟环境中,再安装各种需要的包,主要有以下6个(这是看这个慕课网视频的第一节概述的时候老师讲的,外加一点自己的理解): Numpy:数据结构基础(存储数据集) Scipy:强大的科学计算方法(矩阵分析.信号分析.数理分析--) Matplotlib:丰富的可视化套件(画图用的) Pandas:基础数据分析套件(在Numpy上又封装了一层) Scikit-l…
先决条件:开发机器需要联网 已安装java 已安装Desktop组 1.上传安装软件到linux上: 2.安装maven,用于管理项目依赖包:以hadoop用户安装apache-maven-3.0.5-bin.zip. --解压安装文件到相应目录下: [root@db07 opt]# chown -R hadoop:hadoop /opt/* [hadoop@db07 opt]# mkdir bd_dev [hadoop@db07 opt]# cd software/ [hadoop@db07…
J2SDK 作为jsp系统配置中必不可少的组件,越来越多的得到应用.下来是我整理的以往工作时搜集的资料.使用时方便查询,希望对广大的工程师有帮助. windows服务器环境下 j2sdk 的安装和环境设置 第一步:进入SUN公司JAVA的JDK 1.4版本免费安装程序,下载主页地址: http://java.sun.com/j2se/1.4/download.html 单击download,进入下载协议,选择接受协议. 第二步:JDK安装程序: j2sdk-1_4_1_04-windows-i5…
1 下载jdk包 这里下载.gz格式的,通过ftp上传到服务器 2 解压到指定目录,如/usr/java/ tar -xvf XXX.tar.gz 解压后会在/usr/java下生成一个目录,如jdk.1.8.0_161 3 修改环境变量 vi /etc/profile 在文件末尾添加(注意大小写): JAVA_HOME=/usr/java/jdk1.8.0_161 PATH=$JAVA_HOME/bin:$PATH CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA…
LAMP:Linux+Apache+Mysql/MariaDB+Perl/PHP/Python 一键安装方法如下: 注:Ubuntu下可使用sudo su 命名切换到root用户. 开始安装之前,先执行EZHTTP安装前的准备工作. 一.使用screen(可选) 由于编译安装Nginx Apache PHP MySQL等软件会花费比较长的时间,难免会出现由于网络意外中断而导致安装也中断了,所以为了避免此问题,可以使用screen来安装. screen的使用方法如下: 1.安装screen ubu…
================================================== ================================================== 个人电脑环境是这样的,虚拟机Wmware 15.0的, Linux-> Ubuntu 16.04================================================== =================================================…
下载安装所需包 openssl-1.0.1i.tar.gz zlib-1.2.8.tar.gz pcre-8.35.tar.gz nginx-1.7.4.tar.gz 以上为nginx依赖文件 libmcrypt-2.5.7.tar.gz php-5.3.28.tar.gz 以上为php依赖文件 依次安装 1.安装openssl-1.0.1i.tar.gz [root@localhost mrms]# tar -zxvf openssl-1.0.1i.tar.gz [root@localhost…
下载python3,进行编译安装,运行django程序 在 /opt目录中安装 cd /opt 1.解决python编译安装所需的软件依赖 yum install gcc patch libffi-devel python-devel zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel…
在 Linux 下搭建 Git 服务器 环境: 服务器 CentOS6.6 + git(version 1.7.1)客户端 Windows10 + git(version 2.8.4.windows.1) ① 安装 Git Linux 做为服务器端系统,Windows 作为客户端系统,分别安装 Git 服务器端: #yum install -y git 安装完后,查看 Git 版本 [root@localhost ~]# git --version git version 客户端: 下载 Git…