以图搜图功能实现(windows10版)
1,原理
存储:通过Core项目调取python接口,python通过使用towhee把图片转成向量存在milvus向量数据库中。
查询:通过Core项目调取python接口,python根据查询的图片,转成向量数据,再在向量数据库中根据L2模式进行相近查询
2,安装
2.1安装docker
2.1.1 在windows功能中打开Hyper-V 和 容器
2.1.2 进入https://www.docker.com/ ,下载windows版本进行安装
2.2安装Milvus
milvus官网地址:https://milvus.io/
2.2.1 在任意一个盘符下创建一个文件夹(可以任意起名,例如dockermilvus),在dockermilvus中创建五个文件夹,分别为conf,db,logs,pic,wal。在conf中存放docker-compose.yml和server_config.yaml文件。
注:docker-compose.yml是在https://github.com/milvus-io/milvus/releases/download/v2.0.2/milvus-standalone-docker-compose.yml 这个路径下下载,并改名为docker-compose.yml.
2.2.2 使用命令提示符进入dockermilvus/conf文件夹中,执行docker-compose up -d 命令,执行安装。安装成功后再次执行此docker-compose up -d命令,查看安装文件运行状态。
2.2.3 在命令提示符中执行 docker run -p 3000:3000 -e HOST_URL=http://192.168.10.171:3000 -e MILVUS_URL=192.168.10.171:19530 milvusdb/milvus-insight:latest 命令(运行数据库进入界面,数据库网页界面须通过3000接口进入19530接口界面)。
2.2.4 milvus数据库迁移部署:
1》把docker中运行的milvus镜像打包成.tar文件
2》在命令提示符中进入个空文件夹中,执行命令
docker save -o minio.tar minio/minio
docker save -o etcd.tar quay.io/coreos/etcd
docker save -o milvus-insight.tar milvusdb/milvus-insight
docker save -o milvus.tar milvusdb/milvus
3》在另一台电脑安装docker,在创建个文件夹(dockermilvus),文件中创建conf,db,logs,pic,wal五个文件夹,conf文件夹中放docker-compose.yml和server_config.yaml文件。
4》minio.tar,etcd.tar,milvus-insight.tar,milvus.tar 这四个文件放到dockermilvus文件夹中
5》执行docker load -i minio.tar
docker load -i etcd.tar
docker load -i milvus-insight.tar
docker load -i milvus.tar
docker load -i minio.tar
6》在命令提示符中进入conf中执行docker-compose up -d
7》再进入dockermilvus文件夹中执行命令:docker load -i milvusdb/milvus-insight.tar
8》在命令提示符中执行 docker run -p 3000:3000 -e HOST_URL=http://192.168.10.171:3000 -e MILVUS_URL=192.168.10.171:19530 milvusdb/milvus-insight:latest 命令
2.3 docker搭建python运行环境容器
Python版本3.8.6
2.3.1,创建个新的文件夹pyContainer,pyContainer文件夹中创建ty文件夹(这里放python代码),
2.3.2,pyContainer文件夹中创建Dockerfile文件,没有后缀。
文件内容:
# 建立 python3.7 环境
FROM python:3.8
# 镜像作者
MAINTAINER LALALA
# 设置 python 环境变量
ENV PYTHONUNBUFFERED 1
# 设置pip源为国内源
COPY pip.conf /root/.pip/pip.conf
# 在容器内创建mysite文件夹
RUN mkdir -p /var/www/html/mysite
# 设置容器内工作目录
WORKDIR /var/www/html/mysite
# 将当前目录文件加入到容器工作目录中(. 表示当前宿主机目录)
ADD . /var/www/html/mysite
RUN pip install towhee
# pip安装依赖
RUN pip install -r requirements.txt
RUN mkdir -p /app/
ADD /ty /app
WORKDIR /app/
EXPOSE 8000 #对外端口
CMD ["python", "manage.py", "runserver", "0.0.0.0:8000"] 对内端口
2.3.3 pyContainer文件夹中创建pip.conf文件
文件内容:
[global]
index-url = https://pypi.tuna.tsinghua.edu.cn/simple
[install]
trusted-host=mirrors.aliyun.com
2.3.4 pyContainer文件夹中创建requirements.txt
文件内容:
Django==3.2.12
towhee==0.9.0
pymilvus==2.2.1
2.3.5 在命令提示符中进入pyContainer文件夹,执行命令docker build -t mm_python .
2.3.6 在命令提示符中执行命令docker run -it -d- p 9111:8000 mm_python启动容器。
注意:启动容器后,通过9111端口请求python接口,这时容器会在git上下载容器内缺少的环境依赖(如CV2,resnet50_a1_0-14fe96d1.pth等,这个大概需要下载9G左右的环境包)
2.3.7 把容器生成镜像,再打包
在命令提示符中执行命令
docker commit -a "镜像作者" -m "说明" a404c6c174a2 pycontainer:v1
a404c6c174a2 --- 容器Id
pycontainer:v1 --- 镜像名称
2.3.8 打包镜像
docker save -o pycontainer.tar pycontainer
2.3.9 在其他docker中打开镜像包
docker load -i pycontainer.tar
2.3.10 运行镜像
docker run -it -d -p 9111:8000 pycontainer
以图搜图功能实现(windows10版)的更多相关文章
- 以图搜图(一):Python实现dHash算法(转)
近期研究了一下以图搜图这个炫酷的东西.百度和谷歌都有提供以图搜图的功能,有兴趣可以找一下.当然,不是很深入.深入的话,得运用到深度学习这货.Python深度学习当然不在话下. 这个功能最核心的东西就是 ...
- Google 以图搜图 - 相似图片搜索原理 - Java实现
前阵子在阮一峰的博客上看到了这篇<相似图片搜索原理>博客,就有一种冲动要将这些原理实现出来了. Google "相似图片搜索":你可以用一张图片,搜索互联网上所有与它相 ...
- Google 以图搜图 - 相似图片搜索原理 - Java实现 (转)
前阵子在阮一峰的博客上看到了这篇<相似图片搜索原理>博客,就有一种冲动要将这些原理实现出来了. Google "相似图片搜索":你可以用一张图片,搜索互联网上所有与它相 ...
- 以图搜图之模型篇: 基于 InceptionV3 的模型 finetune
在以图搜图的过程中,需要以来模型提取特征,通过特征之间的欧式距离来找到相似的图形. 本次我们主要讲诉以图搜图模型创建的方法. 图片预处理方法,看这里:https://keras.io/zh/prepr ...
- 使用 selenium 实现谷歌以图搜图爬虫
使用selenium实现谷歌以图搜图 实现思路 原理非常简单,就是利用selenium去操作浏览器,获取到想要的链接,然后进行图片的下载,和一般的爬虫无异. 用到的技术:multiprocessing ...
- [No000007]搜索引擎以图搜图的原理
之前,Google把"相似图片搜索"正式放上了首页. 你可以用一张图片,搜索互联网上所有与它相似的图片.点击搜索框中照相机的图标. 一个对话框会出现. 你输入网片的网址,或者直接上 ...
- php 以图搜图
感知哈希算法count < =5 匹配最相似count > 10 两张不同的图片var_dump(ImageHash::run('1.jpg’, '2.jpg’)); <?php c ...
- 谷歌百度以图搜图 "感知哈希算法" C#简单实现
/// <summary> /// 感知哈希算法 /// </summary> public class ImageComparer { /// <summary> ...
- iOS去广告最简单方案!+以图搜漫
iOS去广告 ️推荐 | 通过下载.安装.启用(一般默认启用)描述文件,即可实现通过私人dns来达到全系统的广告拦截.隐私保护功能 ️注意: 限 iOS 14 及以上版本系统使用 复制链接需在 saf ...
- protel DXP的类矢量图功能
一.概述 在写论文的过程中,我们经常需要将protel DXP上的原理图贴入到WORD中.我们可以选择使用截图工具,然后再导入到WORD中.但是由于普通截图图形文件都是位图文件,当我们将图形文件导入W ...
随机推荐
- 从Spring中学到的【2】--容器类
容器类 我们在实际编码中,常常会遇到各种容器类,他们有时叫做POJO,有时又叫做DTO,VO, DO等,这些类只具有容器的作用,具有完全的get,set方法,作为信息载体,作数据传输用. 其实,很多地 ...
- Google分布式文件系统GFS论文学习
GFS作为最著名的分布式文件系统,首先具备了大规模.可扩展.适配大文件.自动运维等高级特性.虽然是比较早期的分布式文件系统,但是它里面的设计思想还是值得现代分布式系统设计参考的,并且还有很多后期著名的 ...
- node设置下载源
// 设置镜像源 npm config set registry https://registry.npm.taobao.org // 查看当前源 npm config get registry
- 算法竞赛向 C++ Standard Library 使用速查
因网络上 STL 教程大多零散且缺乏严谨性,本文对算法竞赛所需 C++ Standard Library 做了一个较为全面的总结. 全文主要参考以下文档: Containers library - c ...
- 线上代码已变更,客户没有刷新浏览器,导致点击菜单后找不到相对路由js文件无法加载XXX路由,解决办法如下
1,reload 方法,该方法强迫浏览器刷新当前页面. 语法:location.reload([bForceGet]) 参数: bForceGet, 可选参数, 默认为 false,从客户端缓存里取当 ...
- 被iframe页面更改顶层的跳转链接
界面被其他网页Iframe,需要修改顶层链接---方法如下 <!DOCTYPE html> <html lang="en"> <head> &l ...
- PHP转Go实践:xjson解析神器「开源工具集」
前言 近期会更新一系列开源项目的文章,新的一年会和大家做更多的开源项目,也欢迎大家加入进来. xutil 今天分享的文章源自于开源项目jinzaigo/xutil的封装. 在封装过程中,劲仔将实现原理 ...
- 性能浪费的日志案例-使用Lambda优化日志案例
性能浪费的日志案例 注:日志可以帮助我们快速的定位问题,记录程序运行过程中的情况,以便项目的监控和优化.一种典型的场景就是对参数进行有条件使用,例如对日志消息进行拼接后,在满足条件的情况下进行打印输出 ...
- Docker修改已有容器的端口映射
Docker修改已有容器的端口映射 背景 拉取了jenkins的镜像,启动容器的时候端口就映射了8080,但这个演示环境要用到jenkins node,其中默认的代理端口是50000.漏了,就想着能否 ...
- java helloworld demo
大二的时候写过 web 仅限于 idea 配合 springboot, 学习的时候需要写个 java demo 或者算法, 居然不知道怎么写了 首先创建一个文件夹, 写上你的代码, 因为是demo, ...