墨天轮国产数据库沙龙 | 许力:阿里云原生Lindorm TSDB数据库,驱动工业IT&OT超融合数字化系统升级
分享嘉宾:许力 阿里云Lindorm 数据库产品经理
整理:墨天轮
导读
大家好,我是阿里云Lindorm 数据库产品经理许力,今天非常有荣幸给大家介绍阿里云 Lindorm 数据库面向工业场景的最佳实践案例,以及产品的特点,同样要结合行业背景以及客户需求来看待它,因此我今天的分享也就由三个主题组成:市场趋势、顺势而为、核心能力。
市场趋势
工业物联网、车联网行业的迅速发展,产生了大量的数据。评测报告显示,2025年实时数据将占到数据总量的30%,几乎所有实时数据都将由物联网系统产生,同时终端设备代码量激增,终端智能设备、传感器数据将流入云端。因此,到2025年绝大多数的云端新增数据将来源于物联网、车联网等智能互联场景。
放眼国内与全球市场,工业物联网都有着巨大的潜力。国家在政策层面积极支持我国工业物联网发展,2019 、2020年相继出台了《“5G+ 工业物联网”512 工程推进方案》和《关于推动工业物联网加快发展的通知》,明确了我国要由工业大国发展迈向工业强国的战略目标,加快推进“互联网 + 制造业”、“5G+ 工业物联网” 的融合创新。

图1 工业物联网的国内市场容量
因此在这样的市场趋势下,时序数据的诞生与发展应该顺势而为。
顺势而为
1、工业场景数智升级的问题与挑战
新技术在创造新机遇带动产业升级的同时,也带来了新的技术挑战。更加复杂的系统架构和更高的性能、稳定性要求制约了工业物联网系统实施落地,企业需要专业技术公司来帮助解决数据采集、传输、存储、分析及可视化全链数据处理系统建设难点。

图2 数智升级中的建设难点与具体问题
2、阿里云Lindorm TSDB 架构
阿里云Lindorm TSDB 作为时序数据库,它有四个关键的价值:
- 非对称读写和快速处理海量时序数据
- 数据存储效率非常高,单位数据量存储成本优势明显。
- 针对时序数据构建独特的数据存储架构,读取处理时序数据方面相比其他数据库更具有性能、成本优势。
- 边云一体化,方案集成方便简单。
3、阿里云Lindorm 设计愿景
阿里云Lindorm 的设计愿景体现在高通量、高性能、易用、易维护四个方面。
云原生多模数据库Lindorm是面向互联网、物联网、车联网、工业互联网等设计和优化的超融合数据库,支持宽表、时序、文本、对象、流、空间等多种数据的统一访问和融合处理,并兼容多种开源标准接口和无缝集成三方生态工具,是日志、监控、账单、广告、社交、出行、风控等场景首选数据库,也是为阿里巴巴核心业务提供支撑的数据库之一,真正做到了“让海量数据看得见、存得起“。

图3 Lindorm TSDB 驱动的工业数据云系统架构
阿里云原生数据Lindorm也应用在工业数据云场景上。Lindorm面向BEV新能源电动汽车监控场景,以极致性价比提供海量数据存储、开放生态兼容、多引擎异构数据融合等能力,与江铃和长城汽车等车厂、东软等车联网服务提供商共建联合解决方案支撑未来网联汽车系统数字化升级。

图4 Lindorm 数据库测评证书
核心能力
1、核心能力一:软硬件定义多级存储
首先,在不同的场景下,用户可以通过权衡性能和存储的成本来选择存储方式,比如性能型存储、标准型存储、容量型存储。不仅提供了存储的灵活度,同时也能够在海量数据的场景下,更大地节省存储的投入。
2、核心能力二:自动冷热分离
用关系型数据库来实现冷热数据的分离存储与分库分表的难度很高,因此从工业场景下,更强调的是一个易于维护易用的自动的做冷热数据的一个管理。
Lindorm数据库将数据自动冷热分层,灵活调整分割线,并且应用零改造、全透明访问,冷数据存储成本大幅减少,热数据访问性能有效提升。
3、核心能力三:智能特征压缩
智能特征压缩也是Lindorm TSDB数据库的产品核心能力之一。相比业界通用的SNAPPY, 压缩率提升50%+,压缩比高达10:1。

图5 Lindorm TSDB 智能特征压缩的核心能力
4、核心能力四:高性能吞吐
某业务HBase迁移至Lindorm后,写入RT减少为1/3

图6 Lindorm TSDB 高性能吞吐的核心能力
5、核心能力五:流库一体
传统ETL(Extract-Transform-Load,即数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端)存在着使用门槛高,数据延迟大的痛点,而Lindorm数据库流库一体,ELT即开即用的功能。

图7 Lindorm TSDB 流库一体的核心能力
6、核心能力六:时序流计算
时序流计算是产品的第六个核心能力。产品中丰富的时序多维聚合算子,以支持在上层进行异常检测、趋势预测的算法,从而进行复杂的时序数据处理。

图8 Lindorm TSDB 时序流计算的核心能力
7、核心能力七:时序引擎 TSQL
同时在查询语句上,兼容SQL语法,方便进行数据对接与改造。

图9 Lindorm TSDB 时序引擎 TSQL的核心能力
8、核心能力八:时序洞察
最后,Lindorm数据库的核心能力还体现在时序洞察方面。除了有异常检测,预测这类常用的时序分析的算法之外,还有序列数据的降维算法,帮助用户从高维数据里边找到相似性、相关性与因果关系。

图10 Lindorm TSDB 在时序洞察上的核心能力
以上就是我今天的分享内容,谢谢大家!
更多精彩内容,欢迎大家观看视频回放与会议资料
视频回放:https://www.modb.pro/video/6118
会议资料:https://www.modb.pro/doc/56839
- 查看原文:https://www.modb.pro/db/335237
- 相关阅读:国产数据库沙龙 | 张玮绚:TDengine,高性能、分布式、支持SQL的时序数据库
- 查看【国产数据库沙龙】往期生态工具、图数据库专场资源:https://www.modb.pro/topic/157860
墨天轮,围绕数据人的学习成长提供一站式的全面服务,打造集新闻资讯、在线问答、活动直播、在线课程、文档阅览、资源下载、知识分享及在线运维为一体的统一平台,持续促进数据领域的知识传播和技术创新。
关注官方公众号: 墨天轮、 墨天轮平台、墨天轮成长营、数据库国产化 、数据库资讯
墨天轮国产数据库沙龙 | 许力:阿里云原生Lindorm TSDB数据库,驱动工业IT&OT超融合数字化系统升级的更多相关文章
- 阿里云RDS导入服务器数据库 XtraBackup
如果是centos系统,默认会开启selinux 一定需关闭selinux 解决方法:关闭它,打开/etc/selinux/config,把SELINUX=enforcing改为SELINUX=dis ...
- MongoDB与阿里云达成战略合作,最新数据库独家上线阿里云!
11月26日,开源数据库厂商MongoDB与阿里云在北京达成战略合作,作为合作的第一步,最新版MongoDB 4.2数据库产品正式上线阿里云平台. 目前阿里云成为全球唯一可提供最新版MongoDB服务 ...
- 云原生数据库崛起,阿里云POLARDB当选世界互联网领先科技成果!
第六届世界互联网大会来了!千年水乡古镇乌镇又一次吸引了全世界的目光. 刚刚,阿里云自研数据库POLARDB在会上当选世界互联网领先科技成果.POLARDB解决了企业在云时代的数据库难题,帮助企业在数小 ...
- 把云数据库带回家!阿里云发布POLARDB Box数据库一体机
9月26日,2019杭州云栖大会上,阿里云宣布正式推出高性能数据库一体机——POLARDB Box,用户部署在自有数据中心即可享受云数据库的便捷体验,同时还为Oracle等传统数据库用户提供一键迁移功 ...
- 探索云数据库最佳实践 阿里云开发者大会数据库专场邀你一起Code up!
盛夏.魔都.科技 三者在一起有什么惊喜? 7月24日,阿里云峰会·上海——开发者大会将在上海世博中心盛大启程,与未来世界的开发者们分享数据库.云原生.开源大数据等领域的技术干货,共同探讨前沿科技趋势, ...
- 洞见数据库前沿 集结阿里云数据库最强阵容 DTCC 2019 八大亮点抢先看
摘要: 作为DTCC的老朋友和全球领先的云计算厂商,阿里云数据库团队受邀参加本次技术盛会,不仅将派出重量级嘉宾阵容,还会为广大数据库业内人士和行业用户奉上8场精彩议题.下面小编就为大家提前梳理了8大亮 ...
- 使用Navicat或者其他数据库工具连接阿里云EDS(数据库服务器)实例过程详解
使用Navicat或者其他数据库工具连接阿里云EDS(数据库服务器)实例过程详解 背景:这几天从阿里云上面购买了云服务器,最垃圾的那种,还送oss和EDS数据库服务器,只不过EDS数据库服务器只有一个 ...
- 【故障公告】阿里云 RDS SQL Server 数据库实例 CPU 100% 引发全站故障
非常抱歉,今天 8:48 开始,我们使用的阿里云 RDS SQL Server 数据库实例突然出现 CPU 100% 问题,引发全站故障,由此给您带来麻烦,请您谅解. 发现故障后立即进行主备切换,和 ...
- 保姆级教程!手把手教你使用Longhorn管理云原生分布式SQL数据库!
作者简介 Jimmy Guerrero,在开发者关系团队和开源社区拥有20多年的经验.他目前领导YugabyteDB的社区和市场团队. 本文来自Rancher Labs Longhorn是Kubern ...
- 云计算之路-阿里云上:RDS数据库连接数过万引发故障,主备库切换后恢复正常
非常抱歉!今天 12:03-12:52 ,由于数据库连接数异常突增超过1万,达到了阿里云RDS的最大连接数限制,影响了全站的正常访问.由此给您带来麻烦,请您谅解. 在发现数据库连接数突增的问题后,我们 ...
随机推荐
- web3 产品介绍:Mirror.xyz是一个创新的去中心化出版平台
Mirror.xyz是一个创新的去中心化出版平台,它使作者能够创建.发布和管理自己的内容,并与读者建立直接的经济联系.在本文中,我们将介绍Mirror.xyz的主要特点.功能以及如何使用它来发布和消费 ...
- 【ElasticSearch】04 Spring-Data-ElasticSearch
官方网站: https://spring.io/projects/spring-data-elasticsearch 对应 Elasticsearch7.6.2,Spring boot2.3.x 一般 ...
- Jax框架:通过显存分析判断操作是否进行jit编译
相关: https://jax.readthedocs.io/en/latest/device_memory_profiling.html 代码: import jax import jax.nump ...
- AI领域的国产显卡如何在现有技术下吸引用户 —— 廉价增加显存 —— 大显存
先给出一个不大准确的但相差不差的背景介绍: 同样性能级别的显卡,NVIDA的24G的要3W,32G的要5W,48G的要7W, 80G的要10W. 国产同同性能的显卡32G的要10W,48G的要15W, ...
- python绘图库matplotlib:画线的标志marker的设置——类型/size/空心/边线颜色及大小/显示marker超出边界部分
如题,最近有绘图的工作,要求就是使用python绘图库来画线并打上坐标点的标志,这时候就遇到了问题,这个线上的标志如果是实心的话就难以有区分度,但是设置为空心就需要考虑标志的边线粗细等问题,于是便有了 ...
- 键盘中上、下、左、右四个光标键所对应的ASCII码值为多少
首先给出ASCII码值表: 上.下.左.右这四个光标键对应的ASCII码值不是一个值而是三个,准确的说光标键的ASCII码值是一个组合. 每个方向键所对应的三个键值为:0x1b + 0x5b + n ...
- Singleton bean creation not allowed while singletons of this factory are in destruction
1.背景 一直都是正常运行的程序,检查日志发现有一条报错如下: org.springframework.beans.factory.BeanCreationNotAllowedException: E ...
- 比对xls文件
使用bat运行diff-xls.js文件 bat代码 @echo off Cscript "路径\diff-xls.js" %1 %2 JS代码 // extensions: xl ...
- 2024 (ICPC) Jiangxi Provincial 省赛
2024 (ICPC) Jiangxi Provincial 省赛 前言 和队友 vp 7t,赛后补了几题. A. Maliang Learning Painting 思路 输出 a + b + c ...
- Oracle——navicat连接Oracle数据库报错(12514)
2024/07/22 1.问题描述 2.解决办法 3.参考材料 1.问题描述 与其他厂商做数据对接时,对方提供相关视图,我navicat连接Oracle数据库时报错,其报错代码如下: ORA-1251 ...