前言 作为一个数据工程师,最喜欢的事情就是不停的在现实的服务端环境调试代码的参数.我们在本地的环境与生产的状况决然不同,我们一开始在本地写代码测试再部署到服务端的三板斧就不适用了. 最好的方式可以直接在linux环境下的服务端直接写代码,分步调试.之前我在银行都是使用集成在CDSW的环境IDE,但是如今我们需要自己拼凑一个可用类似的工具. 这样我们就要用到远程jupyter,即服务端提供jupyter server,而我们只需要直接在本地环境直接使用server暴露的web接口上直接写代码,分步…

Ubuntu 远程 Jupyter 配置 每次上课都要重新部署环境,最近看到阿里云的大学生优惠活动,就着手了一台云服务器,于是就把环境部署在上面了. 环境:阿里云 Ubuntu 16.04 64位 新建普通用户 su root # 切换到管理员用户 useradd -r -m -s /bin/bash 新用户名 # 新建用户 passwd 新用户名 # 设置新用户密码 su 新用户名 # 切换使用新用户 云主机添加安全组 云服务器默认只开启了几个端口,我们要手动增加开放的端口,Jupyter 默…

配置过程 本机环境 操作系统:win10 IDE:Pycharm 远程服务器 操作系统:ubuntu14.04 配置了ssh,可以使用ssh进行远程登陆 配置Deployment 首先,在pycharm的菜单栏依次找到:Tools > Deployment > Configuration. 然后可以看到如下的配置页面,具体各配置在图片中说明: 然后打开Deployment的Mapping选项卡: 这样,Deployment的配置就完成了.这个配置完成了之后,其实是相当于配置了一个ftp工具可以…

PyCharm 配置远程python解释器和在本地修改服务器代码 最近在学习机器学习的过程中,常常需要将本地写的代码传到GPU服务器中,然后在服务器上运行.之前的做法一直是先在本地写好代码,然后通过FileZilla这样的文件传输工具来将写好的文件传到服务器,再通过ssh工具远程连接到服务器,执行相应的python脚本.这样的方式十分繁琐,效率很低.今天听到朋友提到了配置远程解释器 使用场景 先说说自己的使用场景,我是在什么情况下,需要将IDE配置成这样的环境来方便我的工作. 首先,我需要在本地…

在一个团队里,编码不能是闭门造车,git学起来: 1. GIT的基本介绍.安装及使用教程- @廖雪峰 2. pycharm配置github远程仓储- @谢小小XH…

1. docker 配置 使用-p参数暴露一个端口用于ssh连接. docker run -itd --name wangchao_paddle --gpus all -p 8899:8888 -p 8822:22 -v /data:/root/data registry.baidubce.com/paddlepaddle/paddle:2.3.0-gpu-cuda10.2-cudnn7 /bin/bash 如果镜像没有ssh则需要先安装.(paddle-gpu镜像已有ssh可忽略之后的步骤):…

出于数据库安全性,数据库管理员会给数据库配置SSH,也就是为数据库增加一个安全协议(通信加密),加大外部用户对该数据库远程连接的难度. 利用SSH通道来连接远程数据库时需要以下信息:远程数据库服务器IP.mysql端口号(默认3306).数据库账号和密码.SSH通道IP.SSH端口号(默认为22,SSH端口号可修改).服务器管理员账号.服务器验证类型(支持RAS秘钥或密码,通常若连接的是局域网测试服务器则使用密码连接,若连接远程服务器,则推荐使用RAS秘钥进行验证,本文使用秘钥) [pychar…

在很多情况下,默认的中央仓库无法满足项目的需求,可能项目需要的构件存在于另外一个远程仓库中,如JBoss Maven仓库.这时,可以在POM中配置该仓库,见代码如下: <!-- 远程仓库的配置 --> <!-- 配置POM使用JBOSS Maven仓库 --> <repositories> <!-- 申明一个远程仓库 --> <repository> <!-- 任何一个仓库的ID必须是唯一的 --> <id>jboss&l…

1. 关于PEP 8 PEP 8,Style Guide for Python Code,是Python官方推出编码约定,主要是为了保证 Python 编码的风格一致,提高代码的可读性. 官网地址:https://www.python.org/dev/peps/pep-0008/ 2. 关于Autopep8 Autopep8是自动将Python代码格式化为符合PEP 8风格的工具.它使用pycodestyle工具来确定代码的哪些部分需要被格式化.Autopep8能够修复大部分pycodestyl…

Android源码浅析(六)--SecureCRT远程连接Linux,配置端点和字节码 需要编译源码的同学,一般都是win+虚拟机吧,但是再虚拟机里体验并不是很好,所有市面上有很多的软件能够做到在win端直接调用linux的终端,比如今天说的SecureCRT或者XShell等软件,我们先来看下SecureCRT的一些简单的介绍: "SecureCRT是一款用于连接运行包括Windows.UNIX和VMS的理想工具.通过使用内含的VCP命令行程序可以进行加密文件的传输.有流行CRTTelnet客…