终端命令 创建一个项目: scrapy startproject name 利用蜘蛛名创建一个py文件: scrapy genspider name domain.name 在终端运行:scrapy shell url 得到response 利用蜘蛛名进行相对应的运行: scrapy crawl name 利用py文件进行运行: scrapy 将爬区下来的数据存储到csv文件: scrapy crawl name -o file.csv 将爬区下来的数据存储到JSON lines文件:scrap…
ADB无线连接手机的方法1)手机与PC有线相连 - 检查是否连接正常: adb devices - 执行以下命令:adb tcpip 5555 # 当前9001       - 成功提示:restarting in TCP mode port 5555 - 然后断开USB       - 查看手机USB调试是否打开:PC端是否安装手机驱动. 2)接着执行adb connect (ip):5555,这时候应该就能连接成功了 - 成功提示:connected to (ip):5555 3) 断开连接…
以下命令都是在CMD中运行,首先把路径定位到项目文件夹 ------------------------------------------------------------------------------------------ 1. 创建一个scrapy project scrapy startproject project_name ----------------------------------------------------------------------------…
----------------------------------------------------------------------------------------------------- 列出当前python环境下的所有modules 在python shell/prompt.环境下 help('modules') -----------------------------------------------------------------------------------…
查看所有命令 scrapy -h 查看帮助信息 scapy --help 查看版本信息 (venv)ql@ql:~$ scrapy version Scrapy 1.1.2 (venv)ql@ql:~$ (venv)ql@ql:~$ scrapy version -v Scrapy : 1.1.2 lxml : 3.6.4.0 libxml2 : 2.9.4 Twisted : 16.4.0 Python : 2.7.12 (default, Jul 1 2016, 15:12:24) - [G…
CentOS常用到的查看系统命令 uname -a cat /etc/issue /sbin/ifconfig # 查看内核/操作系统/CPU信息 head -n 1 /etc/issue # 查看操作系统版本 cat /proc/cpuinfo # 查看CPU信息 hostname # 查看计算机名 lspci -tv # 列出所有PCI设备 lsusb -tv # 列出所有USB设备 lsmod # 列出加载的内核模块 env # 查看环境变量 #资源 free -m # 查看内存使用量和交…
cd 目录名 :进入某个目录 ls :列出当前目录的内容 locate 文件名/目录名:寻找文件.目录 find 目录名1 -name 文件名/目录名2 :在目录1中寻找目录2 whereis  文件名/目录名:寻找文件名/目录名 cat 文件名:正序显示文件内容 tac 文件名:倒序显示文件内容 tail -n m 文件名:显示文件后m行 head -n m 文件名:显示文件前m行 more 文件名:显示文件内容 可以向后翻页 less 文件名:显示文件内容 可以向前后翻页 /  向下搜索  …
此命令默认是在centos环境下执行,除非特殊标明. 1.查看ip: ifconfig 2.创建指定用户并分配到某个组:创建用户user并分配到root组 useradd -g root user 3.修改指定用户的密码:修改用户名为user的密码 passwd user 4.查看当前用户所属的组: groups 5.查看某个用户所属的组:查看用户名为user所属的组 groups user 6.查看系统版本信息: cat /etc/os-release 7.查看系统内核的版本信息: uname…
1.cp -r  源文件夹  目的文件夹   // -r 可递归所有子目录及文件 2.grep -r 查找内容 ./*    //递归查找当前目录下所有文件指定内容 3. 查看系统运行时间 who -b 查看最后一次系统启动的时间. who -r 查看当前系统运行时间 4.定位进程被kill auditctl -a exit,always -S kill tail -f /var/log/audit/audit.log   OBJ_PID的opid=**** 表示这个进程被kill了. 5.压缩…
build 构建或重建服务 help 命令帮助 kill 杀掉容器 logs 显示容器的输出内容 port 打印绑定的开放端口 ps 显示容器 pull 拉取服务镜像 restart 重启服务 rm 删除停止的容器 run 运行一个一次性命令 scale 设置服务的容器数目 start 开启服务 stop 停止服务 up 创建并启动容器  …