对象存储服务的Lambda特性

AWS S3提供了Lambda服务，详见Amazon S3 Object Lambda。

技术方案

作为兼容AWS S3能力的对象存储服务，交付Lambda特性时，关注点有：

实现方式
- SDK
- 独立进程
部署位置
- SDK，与客户应用集成在同一个进程内。
- 独立进程
  - 与客户应用同机部署。
  - 独立部署，占用一套服务器。
- 集成在对象存储集群内部。
扩容方案
- 自动扩容
- 人工扩容
升级方案
调试手段
- 日志
- 远程调试
- 本地调试
运算业务的特征
- CPU计算密集型
- I/O密集型
- CPU计算和I/O密集型
- GPU计算密集型
- GPU计算和I/O密集型
支持的开发语言
- Python
- Java
- C/C++
运行环境技术
- 容器技术
  - Docker
  - 软件仓库
  - 可用镜像
- 虚拟机技术
  - 操作系统
  - 内核
  - 基础软件
- 通用服务器
  - 操作系统
  - 内核
  - 基础软件
- 沙箱环境
运算资源的配额
- CPU
- GPU
- 内存
- 存储
  - 容量
  - IOPS
- 扩容和缩容
运算业务的类型
- 同步
  - 实时任务
- 异步
  - 离线任务
  - 回调结果

技术规格

可用的运算环境
- 初始化配额
- 运行期上限
运算资源的配额
- CPU
- GPU
- 内存
- 存储
  - 账户
  - 桶
  - 桶的容量
  - 允许执行的操作
  - IOPS
业务并发度
运算超时
- 实时任务等待时延
- 实时任务运算时长
- 离线任务等待时延
- 离线任务运算时长
- 重试策略
  - 不重试
  - 重试，重试间隔，重试次数
  - 重试失败的通知

参考资料

对象存储服务的Lambda特性的更多相关文章

使用 HDFS 协议访问对象存储服务
背景介绍原生对象存储服务的索引是扁平化的组织形式,在传统文件语义下的 List 和 Rename 操作性能表现上存在短板.腾讯云对象存储服务 COS 通过元数据加速功能,为上层计算业务提供了等效于 ...
COS对象存储服务的使用
---------------------------------------------------------------------------------------------[版权申明:本 ...
对象存储服务（Object Storage Service，简称 OSS）
阿里云对象存储服务(Object Storage Service,简称 OSS),是阿里云提供的海量.安全.低成本.高可靠的云存储服务.它具有与平台无关的RESTful API接口,能够提供99.99 ...
轻量对象存储服务——minio
minio Minio是一个非常轻量的对象存储服务. Github: minio 它本身不支持文件的版本管理.如果有这个需求,可以用 s3git 搭配使用. Github: s3git 安装 mini ...
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务四
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务一 openstack-r版(rocky)搭建基于centos7.4 的openstac ...
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务三
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务一 openstack-r版(rocky)搭建基于centos7.4 的openstac ...
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务二
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务一 openstack-r版(rocky)搭建基于centos7.4 的openstac ...
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务一
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务一 openstack-r版(rocky)搭建基于centos7.4 的openstac ...
swift(Object Storage对象存储服务)(单节点)
# 在部署对象存储服务(swift)之前,你的环境必须包含身份验证服务(keystone); # keystone需要MySQL数据库,Rabbitmq服务,Memcached服务; # 内存:4G ...
阿里云对象存储服务，OSS使用经验总结，图片存储，分页查询
阿里云OSS-使用经验总结,存储,账号-权限,分页,缩略图,账号切换最近项目中,需要使用云存储,最后选择了阿里云-对象存储服务OSS.总的来说,比较简单,但是仍然遇到了几个问题,需要总结下. 1.O ...

随机推荐

Shiro反序列化分析
前言 Shiro,一个流行的web框架,养活了一大批web狗,现在来对它分析分析.Shiro的gadget是CB链,其实是CC4改过来的,因为Shiro框架是自带Commoncollections的, ...
Linux下配置node环境与failed to create symbolic link ‘/usr/bin/utserver’: File exists跟Error: Cannot find module '/root/node-v10.16.3-linux-x64/install'解决方法
NodeJS下载地址(官网) https://nodejs.org/en/download/ 下载下来后是个tar,xz压缩包通过xftp将压缩包上传到Linux服务器上如我放在root目录下使 ...
【VMware vSAN】创建vSAN Max集群并配置挂载远程数据存储。
VMware Explore 2023大会上,VMware正式发布了vSAN Max,这是VMware的一种全新分解存储架构,可以为vSphere集群提供PB级分解存储.vSAN Max是基于vSAN ...
#分块，懒标记#LOJ 3631「2021 集训队互测」学姐买瓜
题目传送门分析有一个很简单的做法就是处理出每个位置能够一次到达的最左边的右端点(后继). 然后直接从 \(l\) 开始能跳就跳,这样单次询问时间复杂度是 \(O(n)\) 的. 观察到时间复杂度因 ...
#Dinic,最大权闭合子图#CF1473F Strange Set
题目分析对于这种依赖关系,可以将正权值连源点,负权值连汇点, 然后 \(i\) 向 \(j(j<i)\) 连无穷大的边,注意到如果完全建图空间不够, 考虑记录每个约数最后一次出现的位置,直接 ...
#模型转换#[ARC126C] Maximize GCD
题目有 \(n\) 个数,最多 \(k\) 次让所选择的数加一,求 \(n\) 个数的GCD的最大值 \(n,a_i\leq 3*10^5,k\leq 10^{18}\) 分析设答案为 \(d\) ...
Python生成测试数据--Faker的使用方法
# 官方文档:https://faker.readthedocs.io/en/master/index.html # 安装:pip install Faker from faker import Fa ...
Zookeeper+dubbo学习笔记
举个例子你需要打车那么会使用滴滴软件,而滴滴软件就类似于Zookeeper, 你和汽车司机都需要在滴滴公司注册(留下联系方式方便联系), 当你需要打车时Zookeeper会帮你找到你需要的汽车司 ...
如何在openGauss 2.1.0中使用Job
如何在 openGauss 2.1.0 中使用 Job 如何在 openGauss 2.1.0 中使用 Job Job 类似 unix 中的 crontab,有定时执行的功能,可以在指定的时间点或每天 ...
MogDB/openGauss 自定义snmptrapd告警信息
MogDB/openGauss 自定义 snmptrapd 告警信息在实际使用中,默认的报警规则信息并不能很好的满足 snmp 服务端的需求,需要定制化报警信息,这里以添加 ip 为例,看似一个简单 ...

对象存储服务的Lambda特性

技术方案

技术规格

参考资料

对象存储服务的Lambda特性的更多相关文章

随机推荐

热门专题