作为NLP领域的著名框架,Huggingface(HF)为社区提供了众多好用的预训练模型和数据集.本文介绍了如何在矩池云使用Huggingface快速加载预训练模型和数据集. 1.环境 HF支持Pytorch,TensorFlow和Flax.您可以根据HF官方文档安装对应版本,也可以使用矩池云HuggingFace镜像(基于Pytorch),快速启动. 矩池云租用机器入门手册 如果使用其他镜像,你需要手动安装 transformers 和 datasets 两个包: pip install tr…
这里我是用PyTorch 1.8.1来安装的 拉取仓库 官方仓库 git clone https://github.com/AlexeyAB/darknet 镜像仓库 git clone https://github.com.cnpmjs.org/AlexeyAB/darknet.git 安装opencv apt-get update apt-get install libopencv-dev -y 修改Makefile 在 /darknet/ 目录下找到 Makefile 进行修改 GPU=1…
https://github.com/kinfkong/ikatago-resources/tree/master/dockerfiles 从作者的库中可以看到,该程序支持cuda9.2.cuda10.cuda10.1.cuda10.2.cuda11.1等镜像,矩池云上的镜像基本上都可以满足他的要求,可以任意选用. 案例:用的cuda10.2的镜像 利用脚本安装 cd ~; /bin/bash -c "$(curl -fsSL https://ikatago-resources.oss-cn-b…
选择cuda10.1的镜像 更新源及拷贝文件到本地 apt-get update cp -r /public/database/milvus/ / cd /milvus/ cp ./lib/* /usr/lib/ 安装mysql等必备的包 apt-get install mysql-server dpkg -i libmysqlclient-dev_5.6.25-0ubuntu1_amd64.deb libmysqlclient18_5.6.25-0ubuntu1_amd64.deb 安装lib…
使用的是P100,cuda11.1base镜像 创建虚拟环境 conda create -n py36 python=3.6 conda deactivate conda activate py36 安装依赖包 apt update apt-get install libopencv-dev libopenblas-dev libopenblas-base libhdf5-dev protobuf-compiler libgoogle-glog-dev libgflags-dev libprot…
选用CUDA10.0镜像 添加nvidia-cuda和修改apt源 curl -fsSL https://mirrors.aliyun.com/nvidia-cuda/ubuntu1804/x86_64/7fa2af80.pub | apt-key add - && \ echo "deb https://mirrors.aliyun.com/nvidia-cuda/ubuntu1804/x86_64/ /" > /etc/apt/sources.list.d/c…
官方仓库:https://github.com/ultralytics/yolov5 官方文档:https://docs.ultralytics.com/quick-start/ 此案例我是租用了k80 镜像选择的是pytorch1.8.1 克隆仓库 git clone https://github.com/ultralytics/yolov5.git 这个地方我用了国内的镜像加速 https://github.com.cnpmjs.org/ultralytics/yolov5.git 安装需要…
在 Disco Diffusion 官方说明的第一段,其对自身是这样定义: AI Image generating technique called CLIP-Guided Diffusion.DD 是通过 CLIP 来进行图文匹配,引导 AI 进行图像生成的技术,通过 Diffusion 持续去噪去生成图像的,而在整个过程中,CLIP 不断地评估图像和文本之间的距离,来为生成图像的整体方向进行指导,最终就体现为"输入文字-生成图画",因此我们便可以通过文字来引导AI生成艺术风格图片.…
方法一(简单) 矩池云上的k80因为内存问题,请用其他版本的GPU去进行编译,保存环境后再在k80上用. 准备工作 下载dlib的源文件 进入python的官网,点击PyPi选项,搜索dilb,再点击release,便可以下载dlib的任何版本的源文件. 下载网站:https://pypi.org/project/dlib/#history 下载后上传到矩池云的网盘,可以查看矩池云怎么上传文件夹? 切换源 sh /public/script/switch_apt_source.sh 安装依赖 a…
在整个机器学习的过程中,配置环境一直是一个比较复杂的事情,今天介绍几种根据英伟达官方文档来配置环境的方法. 安装方案 https://gitlab.com/nvidia/container-images/cuda/ 国内同步镜像:https://gitee.com/zionfuo/cuda 安装脚本在dist目录下 选择cuda的版本号 矩池云上cuda8/cuda9使用的是ubuntu16.04,cuda10及以上都是ubuntu18.04 base:cuda安装方式 devel:nvcc等安…