Boto3
https://boto3.amazonaws.com/v1/documentation/api/latest/guide/quickstart.htmlboto3 安装pip install boto3 指定相应版本pip install boto3 The latest development version can always be found on GitHub.最新的开发版本
Configuration 配置
在开始使用Boto 3之前,应该设置身份验证凭据。您的AWS帐户的凭据可以在IAM控制台中找到。您可以创建或使用现有用户。转到管理访问键并生成一组新的键。
如果您已经安装了AWS CLI,那么您可以使用它来配置您的凭据文件:
aws configure
或者,您可以自己创建凭据文件。默认情况下,它的位置在 ~/.aws/credentials:
[default] aws_access_key_id = YOUR_ACCESS_KEY aws_secret_access_key = YOUR_SECRET_KEY
您可能还需要设置一个默认区域。这可以在配置文件中完成。默认情况下,它的位置在~/.aws/config:
[default] region=us-east-1 或者,您可以在创建客户机和资源时传递region_name。这将为创建连接时使用的默认配置文件和默认区域设置凭据。有关深入配置源和选项,请参见凭据。See Credentials
使用Boto 3
import boto3
s3 = boto3.resource('s3')#使用Amazon S3
现在您有了s3资源,就可以发出请求并处理来自服务的响应。下面使用bucket集合打印出所有桶名:
for bucket in s3.buckets.all():
print(bucket.name)
上传和下载二进制数据也很容易。例如,下面将一个新文件上传到S3。它假设bucket my-bucket已经存在:
# Upload a new file
data = open('test.jpg', 'rb')
s3.Bucket('my-bucket').put_object(Key='test.jpg', Body=data)
Resources and Collections will be covered in more detail in the following sections, so don't worry if you do not completely understand the examples.
资源和集合将在下面的部分中更详细地介绍,所以如果您没有完全理解这些示例,也不必担心。
A Sample Tutorial# 一个示例教程本教程将向您展示如何在AWS服务中使用Boto3。在本示例教程中,您将了解如何在Amazon Simple Queue Service (SQS)中使用Boto3This tutorial will show you how to use Boto3 with an AWS service. In this sample tutorial, you will learn how to use Boto3 with Amazon Simple Queue Service (SQS) SQS允许您排队,然后处理消息。本教程介绍如何创建新队列、获取和使用现有队列、将新消息推送到队列以及通过使用资源和集合处理来自队列的消息。SQS allows you to queue and then process messages. This tutorial covers how to create a new queue, get and use an existing queue, push new messages onto the queue, and process messages from the queue by using Resources and Collections. Creating a Queue创建一个队列 队列是用名称创建的。您还可以选择设置队列属性,例如在处理某项之前等待的秒数。下面的示例将使用队列名称测试。在创建队列之前,您必须首先获取SQS服务资源:
# Get the service resource
sqs = boto3.resource('sqs')
# Create the queue. This returns an SQS.Queue instance#创建队列。它返回一个SQS。队列实例
queue = sqs.create_queue(QueueName='test', Attributes={'DelaySeconds': '5'})
# You can now access identifiers and attributes
print(queue.url)
print(queue.attributes.get('DelaySeconds'))
Reference: SQS.ServiceResource.create_queue()
Warning
The code above may throw an exception if you already have a queue named test.
如果您已经有一个名为test的队列,那么上面的代码可能会抛出一个异常。
Using an Existing Queue# 使用现有队列
:可以根据队列的名称查找队列。如果队列不存在,则抛出异常:
# Get the service resource
sqs = boto3.resource('sqs')
# Get the queue. This returns an SQS.Queue instance
queue = sqs.get_queue_by_name(QueueName='test')
# You can now access identifiers and attributes
print(queue.url)
print(queue.attributes.get('DelaySeconds'))
It is also possible to list all of your existing queues:
#也可以列出所有现有的队列:
# Print out each queue name, which is part of its ARN#打印出每个队列名称,它是其ARN的一部分
for queue in sqs.queues.all():
print(queue.url)
Note
To get the name from a queue, you must use its ARN, which is available in the queue's attributesattribute.
要从队列中获取名称,必须使用它的ARN,该ARN在队列的attributes属性中可用。
Using queue.attributes['QueueArn'].split(':')[-1] will return its name.
Reference: SQS.ServiceResource.get_queue_by_name(), SQS.ServiceResource.queues
Sending Messages
发送消息将它添加到队列的末尾
# Get the service resource
sqs = boto3.resource('sqs')
# Get the queue
queue = sqs.get_queue_by_name(QueueName='test')
# Create a new message
response = queue.send_message(MessageBody='world')
# The response is NOT a resource, but gives you a message ID and MD5
print(response.get('MessageId'))
print(response.get('MD5OfMessageBody'))
You can also create messages with custom attributes:你可以创建带有自定义属性的消息
queue.send_message(MessageBody='boto3', MessageAttributes={
'Author': {
'StringValue': 'Daniel',
'DataType': 'String'
}
})消息也可以分批发送。例如,在一个请求中发送上面描述的两条消息如下所示:
response = queue.send_messages(Entries=[
{
'Id': '1',
'MessageBody': 'world'
},
{
'Id': '2',
'MessageBody': 'boto3',
'MessageAttributes': {
'Author': {
'StringValue': 'Daniel',
'DataType': 'String'
}
}
}
])
# Print out any failures
print(response.get('Failed'))
在这种情况下,响应包含成功和失败消息的列表,因此如果需要,您可以重试失败。
In this case, the response contains lists of Successful and Failed messages, so you can retry failures if needed.
Reference: SQS.Queue.send_message(), SQS.Queue.send_messages()
Processing Messages 消息处理
Messages are processed in batches: 分批处理消息
# Get the service resource
sqs = boto3.resource('sqs')
# Get the queue
queue = sqs.get_queue_by_name(QueueName='test')
# Process messages by printing out body and optional author name#通过打印正文和可选作者名来处理消息
for message in queue.receive_messages(MessageAttributeNames=['Author']):
# Get the custom author message attribute if it was set#让队列知道消息已被处理
author_text = ''
if message.message_attributes is not None:
author_name = message.message_attributes.get('Author').get('StringValue')
if author_name:
author_text = ' ({0})'.format(author_name)
# Print out the body and author (if set)打印正文和作者(如果设置)
print('Hello, {0}!{1}'.format(message.body, author_text))
# Let the queue know that the message is processed 让队列知道消息已被处理
message.delete()
Given only the messages that were sent in a batch with SQS.Queue.send_messages() in the previous section, the above code will print out:
Hello, world! Hello, boto3! (Daniel)
Reference: SQS.Queue.receive_messages(), SQS.Message.delete()
Code Examples This section provides code examples that demonstrate common Amazon Web Services scenarios using the Amazon Web Services (AWS) SDK for Python.本节提供的代码示例演示了使用Python的Amazon Web Services (AWS) SDK的常见Amazon Web服务场景。
User Guides用户指南
Migration Guides#迁移向导
General Feature Guides# 一般功能指南
Service Feature Guides#service 服务指南
Boto3的更多相关文章
- AWS Python SDK boto3中的基本概念与使用方法
最近在用boto3编写AWS的lamda函数,学习到了boto3中的一些基本概念与使用方法.在此进行总结. 1. boto3提供了两个级别的接口来访问AWS服务:High Level的Resource ...
- AWS 命令行界面 + Python 的 AWS 开发工具包 (Boto3)
安装AWS CLI $ pip install awscli 安装Boto3 $ pip install boto3 设置AWS CLI $ aws configure AWS Access Key ...
- 基于python2.7通过boto3实现ec2表格化
#!/usr/bin/env python import xlwt,xlrd,datetime,json,os,xlutils.copy a={ 'VpcPeeringConnection': { ' ...
- boto3库限速
# -*- coding: utf-8 -*- import boto3 from boto3.s3.transfer import TransferConfig # from s3transfer. ...
- 封装boto3 api用于服务器端与AWS S3交互
由于使用AWS的时候,需要S3来存储重要的数据. 使用Python的boto3时候,很多重要的参数设置有点繁琐. 重新写了一个类来封装操作S3的api.分享一下: https://github.com ...
- Python使用boto3操作AWS S3中踩过的坑
最近在AWS上开发部署应用. 看了这篇关于AWS中国区填坑的文章,结合自己使用AWS的经历,补充两个我自己填的坑. http://www.jianshu.com/p/0d0fd39a40c9?utm_ ...
- boto3用法
aws是Amazon Web Service的简写,它包括众多服务,其中最有名的两个是EC2和S3. S3是Simple Storage Service的简写,它是一种对象存储的实现. 安装和配置 安 ...
- rgw使用boto3生成可以访问的预签名url
前言 如果想访问一个ceph里面的s3地址,但是又不想直接提供secrect key的时候,可以通过预签名的方式生成url 生成方法 下载boto3 脚本如下 cat s3.py import bot ...
- Boto3访问AWS资源操作总结(1)
最近在工作中需要对AWS上的部分资源进行查询和交叉分析,虽然场景都比较简单,但是这种半机械的工作当然还是交给Python来搞比较合适.AWS为Python提供的SDK库叫做boto3,所以我们建立一个 ...
随机推荐
- ABAP其实也是挺好的语言
目前工作当中使用的编程语言是SAP平台的ABPA语言,出于好奇心,我想把之前用JAVA(用C++也写过,事实上,我每学一个新的语言,就会尝试去实现这个小程序)写过的计算一个正整数的因子的程序用ABAP ...
- 【Appium自学】Appium [安装包] Appium 官方文档(转发)
转发地址:https://blog.csdn.net/panyu881024/article/details/80149190 Appium国内下载地址 : http://pan.baidu.com/ ...
- supergridcontrol记录,分页
sqlserver分页记录 select top 50 DengJiBH,sSuoYouQuanShenQingRen,sZuoLuo,sQiuHao,sQuanHao,ChaXun_BianHao, ...
- python-day7-静态方法、类方法、属性方法、特殊成员方法、反射、异常处理、socket
@特殊方法.异常处理.反射.socket @类 属性 实例变量 类变量 私有属性__var 方法 构造方法, 析构函数(python自带,不写也有,写了相当与重构) 私有方法 继承 继承 组合 @7. ...
- js自执行事件
let a = document.createElement("a");let event = new MouseEvent("click");a.downlo ...
- 微信授权获取用户openId等信息
在我们开发小程序的时候,需要通过授权获取用户的信息. 第一种使用wx.getUserInfo直接获取微信头像,昵称 // 必须是在用户已经授权的情况下调用 wx.getUserInfo({ succe ...
- Linux 内核的 Makefile
Linux内核的配置系统的基本结构 Linux内核的配置系统由三个部分组成,分别是: 1.Makefile:分布在 Linux 内核源代码根目录及各层目录中,定义 Linux 内核的编译规则: 2.配 ...
- 微信小程序页面导航功能
页面导航功能无论是在app和web中都是一个极其常见的功能,如首字母导航,tabs导航等等.但是由于微信小程序无法都dom节点进行操作,所以怎么才能在小程序中快速的导航到用户的想要到达的地方呢. 那么 ...
- Angular开发环境构筑
今天按照下面的顺序构筑了Angular的开发环境.很简单. -- 系统:win7, 64位 1.安装Note 从<https://nodejs.org/ja/>下载安装文件,安装. Not ...
- 把一个syn报文给rst掉
下面展示一个极其简单的例子,看如何使用netfilter来将一个指定端口的syn报文给rst掉. //************************************************* ...