云中树莓派(2):将传感器数据上传到 AWS IoT 并利用Kibana进行展示
云中树莓派(2):将传感器数据上传到AWS IoT 并利用Kibana进行展示
1. 传感器安装及配置
1.1 DHT22 安装
DHT22 是一款温度与湿度传感器,它有3个针脚,左边的第一个引脚(#1)为3-5V电源,第二个引脚(#2)连接到数据输入引脚,最右边的引脚(#4)接地。

而树莓派3B 一共有40个针脚(GPIO,General Purpose I/O Ports,通用输入/输出端口),只需要将传感器的3个引脚接入板子上的合适引脚即可。我的连接是 1 - 01,2 - 07, 4 - 09。注意 DHT22的数据引脚连接的GPIO编号为 07名称为 GPIO04。下面的代码中会用到。

1.2 简单测试
安装代码库:
git clonehttps://github.com/adafruit/Adafruit_Python_DHT.git
cd Adafruit_Python_DHT
sudo apt-get update
sudo apt-get install build-essential python-dev
sudo python setup.py install
简单的python测试代码:
import Adafruit_DHT as dht
import time while True:
time.sleep(2.5)
h,t = dht.read_retry(dht.DHT22, ) #这里的 4 就指的是 GPIO04
print 'Temp = %.1f"C, Humidity = %.1f%%RH' % (t, h)
测试结果:

2. AWS IoT 实现
要实现的效果如下:

2.1 AWS IoT 配置
在 https://ap-southeast-1.console.aws.amazon.com/iot/home?region=ap-southeast-1#/thinghub 上做如下操作。
(1)创建 thing

(2)创建 thing 的证书,并下载


(3)创建 policy

policy 负责授权,上面的配置表示对所有资源都允许所有 aws iot 操作。
(4)将 policy 附加给第二步中创建的证书,将 thing 也附加给证书。
(5)创建一个 AWS ElasticSearch domain

(6)创建一条 rule,将树莓派传上来的数据导入 ElasticSearch

操作的具体配置:

几个配置项:
- ID:ES 中每个文档的_id,这里使用自动生成的uuid
- 索引:保存树莓派文档的索引,取名为 homepi,它是一个逻辑命名空间
- 类型:索引下面的一个 type,表示对应树莓派的数据
2.2 树莓派中的配置
(1)安装 AWS IoT device python SDK
git clone https://github.com/aws/aws-iot-device-sdk-python
cd aws-iot-device-sdk-python/
python setup.py install
(2)将 2.1 中下载到的四个证书上传到树莓派中
root@raspberrypi:/home/pi/awsiot# ls -lt
total
-rw-r--r-- pi pi Aug : VeriSign-Class3-Public-Primary-Certification-Authority-G5.pem
-rw-r--r-- pi pi Aug : aec2731afd-certificate.pem.crt
-rw-r--r-- pi pi Aug : aec2731afd-private.pem.key
-rw-r--r-- pi pi Aug : aec2731afd-public.pem.key
(3)编写代码
import RPi.GPIO as GPIO
import Adafruit_DHT as dht
from AWSIoTPythonSDK.MQTTLib import AWSIoTMQTTClient
from time import sleep
from datetime import date, datetime # initialize GPIO
GPIO.setwarnings(False)
GPIO.setmode(GPIO.BCM)
GPIO.cleanup() # AWS IoT certificate based connection
myMQTTClient = AWSIoTMQTTClient("123afhlss411")
myMQTTClient.configureEndpoint("*************.iot.ap-southeast-1.amazonaws.com", )
myMQTTClient.configureCredentials("/home/pi/awsiot/VeriSign-Class3-Public-Primary-Certification-Authority-G5.pem", "/home/pi/awsiot/aec2731afd-private.pem.key", "/home/pi/awsiot/aec2731afd-certificate.pem.crt")
myMQTTClient.configureOfflinePublishQueueing(-) # Infinite offline Publish queueing
myMQTTClient.configureDrainingFrequency() # Draining: Hz
myMQTTClient.configureConnectDisconnectTimeout() # sec
myMQTTClient.configureMQTTOperationTimeout() # sec #connect and publish
myMQTTClient.connect()
myMQTTClient.publish("homepi/dht22", "connected", ) #loop and publish sensor reading
while :
now = datetime.utcnow()
now_str = now.strftime('%Y-%m-%dT%H:%M:%SZ') #e.g. --18T06::.877Z
h,t = dht.read_retry(dht.DHT22, ) #07 引脚的名称是 GPIO04
print 'Temp = %.1f"C, Humidity = %.1f%%RH' % (t, h)
payload = '{ "timestamp": "' + now_str + '","temperature": ' + "{:.2f}".format(t)+ ',"humidity": '+ "{:.2f}".format(h) + ' }'
print payload
myMQTTClient.publish("homepi/dht22", payload, )
sleep()
代码很简单,稍微解释一下:
- 利用 AWS IoT device sdk 创建和 AWS IoT Core 的 MQTT 连接
- 利用 DHT22 sdk 每隔10秒从传感器获取温度和湿度数据
- 利用 AWS IoT device sdk 将数据发到 MQTT topic
(4)运行代码,在 AWS IoT 中进行测试,能够收到传上来的树莓派传感器数据

(5)在 ElasticSearch 中也能看到数据统计

2.3 配置 Kibana
AWS ElasticSearch 默认内置了一个 Kibana,可以在 ES 的界面上看到其链接。打开该链接,然后做以下配置:
(1)配置 index pattern
配置的目的是让 Kibana 定位到 ES 中的某个或者某几个 index。这里就是用 homepi 这个index。

(2)配置 Virsualize,然后就可以看到图了

话说最近家里气温一直都在30度以上,本来以为晚上会低点的。湿度倒是有一些变化。
3. 一点感受
- github 是个好地方,大家分享的东西避免了大量重复造轮子的劳动
- AWS free tier 是个好东西,做一些PoC测试基本上不用花钱,但是要注意得看清楚免费提供的资源的内容,否则钱不小心就花出去了,另外就是定期看看账单
- AWS 文档实在太丰富了,一个文件动辄两三百页
- AWS IoT 平台应该归类为 应用支持平台AEP(Application Enablement Platform),提供了设备接入(MQTT)、与AWS服务对接、数据分析、安全等内容。
- AWS ElasticSearch 功能感觉还不是太全面,界面上能做的事情不多,权限管理有些复杂
- 动手做,做了之后再分享,是一件蛮有意思的事情
参考链接:
- http://techblog.calvinboey.com/raspberrypi-aws-iot-python/
- https://cloudncode.blog/2017/11/07/make-your-first-iot-device-via-aws-iot-service-and-raspberry-pi/
- https://www.jianshu.com/p/f31b90cc756f
- https://docs.aws.amazon.com/zh_cn/iot/latest/developerguide/iot-sdk-setup.html
欢迎大家关注我的个人公众号:

云中树莓派(2):将传感器数据上传到 AWS IoT 并利用Kibana进行展示的更多相关文章
- 【AllJoyn专题】基于AllJoyn和Yeelink的传感器数据上传与指令下行的研究
接触高通物联网框架AllJoyn不太久,但确是被深深地吸引了.在我看来,促进我深入学习的原因有三点:一.AllJoyn开源,对开源的软硬件总会有种莫名的喜爱,虽然或许不会都深入下去:二.顺应潮流,物联 ...
- C#工业物联网和集成系统解决方案的技术路线(数据源、数据采集、数据上传与接收、ActiveMQ、Mongodb、WebApi、手机App)
目 录 工业物联网和集成系统解决方案的技术路线... 1 前言... 1 第一章 系统架构... 3 1.1 硬件构架图... 3 1.2 ...
- Arduino UNO +ESP8266采集数据上传到贝壳网
集成电路设计大赛赛程将至,我现在还是毫无头绪,然后又报了一个互联网+,比赛报了,东西就必须出来,时间很紧的情况下,所以选择了开源的arduino的进行完成.从开始接触Arduino到完成工程,前前后后 ...
- OneNET麒麟座应用开发之四:数据上传测试
已经测试过OneNET麒麟座开发板了,这次来尝试与OneNET的连接和数据上传.这也是我们测试这块开发办的主要原因,因为在十几种我们有这种将分散的采集点数据上传到后台的需求. 先看看麒麟座这块开发板, ...
- PDA手持扫描资产标签,盘点完成后将数据上传到PC端,固定资产系统查看盘点结果
固定资产管理系统介绍: 致力于研发条码技术.集成条码系统的专业性公司,针对客户的不同需求,提供一站式的企业条码系统解决方案:包括功能强大的软件系统.安全可靠的无线网络.坚固耐用的硬件系统.灵活易用的管 ...
- 如何优化 FineUI 控件库的性能,减少 80% 的数据上传量!
在开始正文之前,请帮忙为当前排名前 10 唯一的 .Net 开源软件 FineUI 投一票: 投票地址: https://code.csdn.net/2013OSSurvey/gitop/codevo ...
- Octopus系列之数据上传格式要求说明
各个数据列要求 价格列:字符串类型[美元价格] 产品名字:可以支持"/"等字符 分类名字:去空格处理 不得包含"&"符号 主图:一定要有主图列 不为空 ...
- 重新想象 Windows 8.1 Store Apps (89) - 通信的新特性: 下载数据, 上传数据, 上传文件
[源码下载] 重新想象 Windows 8.1 Store Apps (89) - 通信的新特性: 下载数据, 上传数据, 上传文件 作者:webabcd 介绍重新想象 Windows 8.1 Sto ...
- C#数据上传方法
/// <summary> /// 连接成功后开始调用数据上传程序 /// </summary> public void CallDataUpload() { //指定上传日期 ...
随机推荐
- 《DSP using MATLAB》Problem 6.20
先放子函数: function [C, B, A, rM] = dir2fs_r(h, r); % DIRECT-form to Frequency Sampling form conversion ...
- css中的margin(外边框)、border(边框)、padding(填充)的区别
Margin(外边距) - 清除边框外的区域,外边距是透明的. Border(边框) - 围绕在内边距和内容外的边框. Padding(内边距) - 清除内容周围的区域,内边距是透明的. Conten ...
- Python知识点整理,基础1 - 基本语法
- 【BZOJ3527】【ZJOI2014】力
"FFT还不是随手写?"我终于能说这样的话了இwஇ 原题: 给出n个数qi,给出Fj的定义如下: 令Ei=Fi/qi,求Ei. FFT嘛,直接推公式 然后就变成俩卷积了,FFT ...
- vi常用操作
什么是vi: vi是Linux/Unix底下最常用的文本编辑器,可以理解为和Windows下的txt一样,咱们一般操作linux服务器的时候都是没有图形化界面的, 怎么移动光标,到哪个位置,替换修改什 ...
- yum和编译两种方式升级or降级Centos内核
http://blog.51cto.com/renzhiyuan/1882599 今天探讨用yum和编译两种方式升级或者降级内核版本: 升级:比如玩kvm,docker等虚拟化,centos内核则升级 ...
- ASP.NET AJAX入门系列(4):使用UpdatePanel控件(一)
UpdatePanel可以用来创建丰富的局部更新Web应用程序,它是ASP.NET 2.0 AJAX Extensions中很重要的一个控件,其强大之处在于不用编写任何客户端脚本,只要在一个页面上添加 ...
- golang interface判断为空nil
要判断interface 空的问题,首先看下其底层实现. interface 底层结构 根据 interface 是否包含有 method,底层实现上用两种 struct 来表示:iface 和 ef ...
- 单机RedHat6.5+JDK1.8+Hadoop2.7.3+Spark2.1.1+zookeeper3.4.6+kafka2.11+flume1.6环境搭建步骤
1.RHEL 6.5系统安装配置图解教程(rhel-server-6.5) 2.在Linux下安装JDK图文解析 3.RedHat6.5上安装Hadoop单机 4.RedHat6.5安装Spark单机 ...
- RedHat如何关闭防火墙
1.查看防火墙是否已开启 #可以查看到iptables服务的当前状态. service iptables status 上图表示防火墙已关闭. 2.关闭防火墙 关闭防火墙的方法为: 1)永久性生 ...