【328】Python 控制鼠标/键盘+图片识别综合应用

　　本文是基于【267】实现跨网络传数据的基础上的，由于在弹出 putty 之后，需要手动输入命令（pass.sh、get.sh）来实现数据的传递，另外就是处理完之后需要手动关闭 putty，本文解决的两个问题就是在 putty 上自动输入命令以及推出（exit）。

　　解决方法：

　　1. 系统在调用 putty 之后，利用【321】python进程监控：psutil 中的知识点，可以判断 putty 是否运行，如果运行了，则可以通过【322】python控制键盘鼠标：pynput 中的知识点自动输入【pass.sh 或 get.sh】，从而实现putty的命令自动输入（根据经验判断鼠标的位置落在 putty 界面上，因此需要 putty 始终保持最上面显示）；

　　2. putty 命令执行完之后，需要执行【exit】命令关闭窗体，问题在于什么时候 putty 执行完毕，是通过【326】Python 截图及图片识别中截取 putty 所在界面，然后通过图片识别技术判断里面是否含有某些文字，如果有的话，可以知道 putty 已经处理完毕。如上，此处也要保证 putty 最上显示，另外截图的区域是按照经验设置的。截图如下所示：
　　

　　代码实现：

　　文件夹设置如下：

【328】Python 控制鼠标/键盘+图片识别综合应用的更多相关文章
1. Python——控制鼠标键盘
  一.安装包 pip install pynput 二.引用包 from pynput import mouse,keyboard 三.控制鼠标 from pynput.mouse import But ...
2. python控制鼠标键盘
  1.安装类库 pip install pyautogui 2.代码: import pyautogui,time,random pyautogui.PAUSE = pyautogui.FAILSAFE ...
3. python如何直接控制鼠标键盘
  一.简介我们知道在windows下输入:win + r,会弹出下面的窗口,而在下面的窗口出现后我们接着按下esc键,下面的窗口会消失现在设想我们想在python代码里控制键盘,想通过运行代码-&g ...
4. Python直接控制鼠标键盘
  Python直接控制鼠标键盘之前因为期末的原因已经很久没写博客了,今天博主发现一个好玩的模块PyAutoGUI,借助它可以使用Python脚本直接控制键盘鼠标,感觉可以解决很多无聊的机械运动.这里记 ...
5. Python 3 实现色情图片识别
  Python 3 实现色情图片识别项目简介项目内容本实验将使用 Python3 去识别图片是否为色情图片,我们会使用到 PIL 这个图片处理库,会编写算法来划分图像的皮肤区域. 项目知识点 Py ...
6. Python使用pyautogui控制鼠标键盘
  官方文档:https://pyautogui.readthedocs.io/en/latest/# 安装pyautogui模块在 Windows 上,不需要安装其他模块. 在 OS X 上,运行 s ...
7. 安利下PyAUtoGUI这个库，可自动化控制鼠标键盘
  PyAutoGUI 不知道你有没有用过,它是一款用Python自动化控制键盘.鼠标的库.但凡是你不想手动重复操作的工作都可以用这个库来解决. 比如,我想半夜时候定时给发个微信,或者每天自动刷页面等操作 ...
8. python模拟鼠标键盘操作 GhostMouse tinytask 调用外部脚本或程序 autopy右键另存为
  0.关键实现:程序窗口前置 python 通过js控制滚动条拉取全文通过psutil获取pid窗口句柄,通过win32gui使程序窗口前置通过pyauto实现右键菜单和另存为操作 1.参考 aut ...
9. python selenium2 - 鼠标键盘操作
  文件路径:Python27\Lib\site-packages\selenium\webdriver\common\action_chains.py action_chains[鼠标键盘动作] 方法说 ...
随机推荐
1. Day41 openstack基础
  参考博客: http://www.cnblogs.com/linhaifeng/p/6264636.html
2. sql 时间段内没有的数据等于0
  如何实现没有的时间段中使用0来填充?? if object_id('[A]') is not null drop table [A] go create table [A]([日期] datetime ...
3. 『转』三星推出Android智能手表Galaxy Gear
  苹果定下来本月10日召开新品发布会,而它的竞争对手三星却抢先一步.今天凌晨,三星在德国柏林一口气发布了三款重量级产品.三星智能手表Galaxy Gear最引人关注,其将于9月25日陆续在全球上市,售价 ...
4. ANSI的Escape序列屏幕控制码
  http://blog.csdn.net/lano2088/article/details/51985563 https://www.cnblogs.com/pied/p/4175641.html h ...
5. SQL优化：使用explain
  前文说了EXPLAIN的输出的含义,本文实战一下. Database Schema DROP DATABASE dbTest; CREATE DATABASE dbTest; USE dbTest; ...
6. Hadoop和HBase中出现 ssh登录　The authenticity of host 192.168.0.xxx can't be established.
  用ssh登录一个机器(换过ip地址),提示输入yes后,屏幕不断出现y,只有按ctrl + c结束错误是:The authenticity of host 192.168.0.xxx can't b ...
7. c++ istringstream的用法
  一.测试代码 istringstream 是将字符串变成字符串迭代器一样,将字符串流在依次拿出,比较好的是,它不会将空格作为流.这样就实现了字符串的空格切割. #include<iostream ...
8. A Simple Makefile Tutorial
  A Simple Makefile Tutorial A Simple Makefile Tutorial: http://www.cs.colby.edu/maxwell/courses/tutor ...
9. Jmeter-Critical Section Controller（临界区控制器）
  The Critical Section Controller ensures that its children elements (samplers/controllers, etc.) will ...
10. 自动化工具 Python 调 Jmeter 执行参数化 jmx 脚本
  烦透了jmeter输入如下鬼命令: Jmeter -n -t {tmpjmxfile} -l {csvfilename} -e -o {htmlreportpath} 尤其是{htmlreportpa ...

【328】Python 控制鼠标/键盘+图片识别 综合应用

解决方法：

代码实现：