Docker 使用杂记 - 最佳实践尝试 - 实战
Docker 使用杂记 - 最佳实践尝试 - 实战
本文记录了一个项目中使用docker构建环境的过程
Docker简介
Docker NB!好了 其他简介自己看网上吧

项目背景
内在原因
这次的代码基于一个特定的tensorflow版本构建(才不是tf2跑不起来呢!
外在原因
与别人分享代码的时候就可以不用告诉他怎么一步步配置环境了
并且基于GPU的Docker镜像可以由nvidia-docker直接运行
基础镜像
FROM
需求
Tensorflow==1.14
CUDA==10.0
cuDNN==7.4
openCV==3.4.2.16
俗话说好的开始是成功的一半
这次的基础镜像就由tensorflow官方搭的镜像为基础
看了一圈选择了tensorflow/tensorflow:1.14.0-gpu-py3
挺不错 自带GPU支持 要构建其他镜像的同学也可以在tags里面搜索即可 全都有
镜像维护者
LABEL
这里是说的MAINTAINER这个标签 但是我刚敲出来 就发现 过期了(deprecated
上网一搜发现解决方案是用LABEL
最佳实践:
LABEL maintainer="Licsber <Licsber@njit.edu.cn>"
工作文件夹
WORKDIR
顾名思义 制定容器内默认的文件夹
不指定的话默认就是/根目录
WORKDIR /home
文件
ADD
ADD的好处是tar.gz文件可以自动解压
并且ADD可以从网络路径拷贝文件
任何情况下尽量不使用ADD(因为各种奇怪行为
COPY
顾名思义 COPY:拷贝文件
语义明确 推荐使用
注意目标地址一定要是一个目录(不然报错
源地址拷贝会自动相当于有一个 /*的拷贝
于是乎造成的特性就是只拷贝文件夹内的内容
COPY sources.list /etc/apt/
COPY model /home/model/
COPY *.py /home/
另外的特性就是可以使用通配符(符合Go语法即可(GoNB
宗卷
VOLUME
设置宗卷之后可以使用外置环境的内容了
VOLUME /data
挂载的方式:在docker run后面带上参数
-v $源路径:$宗卷名称切记别反了(我第一次就反了 debug半天
例如:
sudo docker run -v /Users/licsber/Download:/data $项目名称
这样在镜像内/data就能访问到外置环境了 方便保存结果 读取文件
命令
RUN
RUN用于运行命令
最佳实践:
RUN apt update && apt install libsm6 libxrender1 libxext-dev ffmpeg -y && \
pip install -U -i https://pypi.tuna.tsinghua.edu.cn/simple pip && \
pip install matplotlib scipy ffmpy opencv-python==3.4.2.16 opencv-contrib-python==3.4.2.16 tqdm -i https://pypi.tuna.tsinghua.edu.cn/simple
新手会把RUN命令写多个 但是每一个Docker命令都会新建一层
这样会让层数特别多 于是 如果只是为了构建环境 一句话就够
入口点
ENTRYPORT
和CMD命令差不多
区别就是不会被默认替换
如果只定义CMD 空参数运行默认执行CMD里的内容
如果只定义CMD 带参数运行会覆盖CMD定义的命令
ENTRYPOINT ["python", "main.py"]
这样镜像名:tag后面的参数就会默认追加到入口点了
CMD
另外需要注意的就是Docker没有后台的概念
如果在里面写这样:
CMD service nginx start
会发现容器秒退 因为Docker是容器 具体解释参见CMD容器启动命令
Dockerfile
okk 看完了前面 终于到了重点
把这些命令一行行码好 放到一个Dockerfile里
就可以build了
build之后 run push 之类的操作岂不是顺手拈来
另外可以看看阿里天池的Docker训练 也能摸索tag的使用方法
还有关于tag的一个小坑 latest 这个自己谷歌吧
完整的Dockerfile贴在这:
FROM tensorflow/tensorflow:1.14.0-gpu-py3
LABEL maintainer="Licsber <Licsber@njit.edu.cn>"
WORKDIR /home
VOLUME /data
COPY sources.list /etc/apt/
RUN apt update && apt install libsm6 libxrender1 libxext-dev ffmpeg -y && \
pip install -U -i https://pypi.tuna.tsinghua.edu.cn/simple pip && \
pip install matplotlib scipy ffmpy opencv-python==3.4.2.16 opencv-contrib-python==3.4.2.16 tqdm -i https://pypi.tuna.tsinghua.edu.cn/simple
COPY model /home/model/
COPY *.py /home/
ENTRYPOINT ["python", "Retargeting.py"]
后记
话说loop: 改代码 -> build同一个tag -> 运行是不是最佳实践呀?
实测产生大量<none> 需要手动删除
这里贴出来一键代码:清理无用的docker镜像
alias dclean='sudo docker rmi $(sudo docker images -f "dangling=true" -q)'
没错 我就是电脑里定义了100+alias的小天才(逃
本文环境
Docker engine==19.03.5

参考
Docker 使用杂记 - 最佳实践尝试 - 实战的更多相关文章
- Java 服务 Docker 容器化最佳实践
转载自:https://mp.weixin.qq.com/s/d2PFISYUy6X6ZAOGu0-Kig 1. 概述 当我们在容器中运行 Java 应用程序时,可能希望对其进行调整参数以充分利用资源 ...
- Docker监控:最佳实践以及cAdvisor和Prometheus监控工具的对比
在DockerCon EU 2015上,Brian Christner阐述了“Docker监控”的概况,分享了这方面的最佳实践和Docker stats API的指南,并对比了三个流行的监控方案:cA ...
- Docker 跟 NodeJs 最佳实践
Level-1 简单实现 需求:简单的构建一个app应用并且用docker部署.Dockerfile编写为: FROM node:7.3.0 RUN mkdir -p /usr/src/app COP ...
- Docker Daemon 参数最佳实践
1. Docker Daemon 配置参数 限制容器之间网络通信 在同一台主机上若不限制容器之间通信,容器之间就会暴露些隐私的信息,所以推荐关闭 docker daemon –icc=false 使用 ...
- Docker日志收集最佳实践
传统日志处理 说到日志,我们以前处理日志的方式如下: · 日志写到本机磁盘上 · 通常仅用于排查线上问题,很少用于数据分析 ·需要时登录到机器上,用grep.awk等工具分析 那么,这种方式有什么缺点 ...
- Docker 日志管理最佳实践
开源Linux 回复"读书",挑选书籍资料~ Docker-CE Server Version: 18.09.6 Storage Driver: overlay2 Kernel V ...
- Docker笔记(十一):Dockerfile详解与最佳实践
Dockerfile是一个文本文件,包含了一条条指令,每条指令对应构建一层镜像,Docker基于它来构建一个完整镜像.本文介绍Dockerfile的常用指令及相应的最佳实践建议. 1. 理解构建上下文 ...
- 8.云原生之Docker容器镜像构建最佳实践浅析
转载自:https://www.bilibili.com/read/cv15220861/?from=readlist 本章目录 0x02 Docker 镜像构建最佳实践浅析 1.Dockerfile ...
- 【原创】Docker实战 Dockerfile最佳实践&&容器之间通信
官方最佳实践文档 https://docs.docker.com/develop/develop-images/dockerfile_best-practices/#from Docker实战(三十) ...
随机推荐
- deeplearning.ai 神经网络和深度学习 week2 神经网络基础
1. Logistic回归是用于二分分类的算法. 对于m个样本的训练集,我们可能会习惯于使用for循环一个个处理,但在机器学习中,是把每一个样本写成一个列向量x,然后把m个列向量拼成一个矩阵X.这个矩 ...
- ajax 接受后台中文数据出现"?"(疑问号)解决方案
把后端要返回的数据转成一个JSONObject类型返回,返回String 类型数据使用JSONObject来封装然后返回,绝对不会出现???了, 要是返回的是一个实体类的话,需要在前端或者后端做转换成 ...
- PO设计模式-实现移动端自动化测试
开发环境:python 3.6.5 + selenium 2.48.0 + pytest框架 + Android 5.1 工具:pycharm + Appium + Genymotion 测试机型:S ...
- PHP 错误与异常的日志记录
提到 Nginx + PHP 服务的错误日志,我们通常能想到的有 Nginx 的 access 日志.error 日志以及 PHP 的 error 日志.虽然看起来是个很简单的问题,但里面其实又牵扯到 ...
- 吴裕雄--天生自然python编程:turtle模块绘图(3)
turtle(海龟)是Python重要的标准库之一,它能够进行基本的图形绘制.turtle图形绘制的概念诞生于1969年,成功应用于LOGO编程语言. turtle库绘制图形有一个基本框架:一个小海龟 ...
- (五)mybatis-spring的集成
mybatis-spring的集成 源码下载(数据库使用derby,具体数据库结构参考这里) 在src下新建applicationContext.xml 配置内容:数据源.SqlSessionFact ...
- bzoj1432_[ZJOI2009]Function
题目描述 有n 个连续函数fi (x),其中1 ≤ i ≤ n.对于任何两个函数fi (x) 和fj (x),(i != j),恰好存在一个x 使得fi (x) = fj (x),并且存在无穷多的x ...
- python多重逻辑排序
python有自带的排序sorted函数,而且用reverse =True or False,来控制降序还是升序.但是如果有多个条件需要排序应该如何办呢? L = [(12, 12), (34, 13 ...
- [PHP] 报错和“@” - 工作
以下几点关于报错和@的关系理解 在PHP中使用@加在某个语句前面,可以抑制错误在脚本的执行过程中输出到IO: 如果在某个语句上使用了@,则可以将语句内的各种嵌套的脚本可能存在的报错都会被抑制住: 如果 ...
- 使用Xshell进行vi编辑时,按下end、home和Delete不能使用,解决解决办法
使用Xshell连接到Linux进行vi编辑时,进入编辑模式,按下end键,光标无法移到行位,home也不能到行首,其它的Delete键也是不能使用,如何解决? Xshell选项设置如下: 文件→属性 ...