墨天轮国产数据库沙龙 | 许力:阿里云原生Lindorm TSDB数据库,驱动工业IT&OT超融合数字化系统升级
分享嘉宾:许力 阿里云Lindorm 数据库产品经理
整理:墨天轮
导读
大家好,我是阿里云Lindorm 数据库产品经理许力,今天非常有荣幸给大家介绍阿里云 Lindorm 数据库面向工业场景的最佳实践案例,以及产品的特点,同样要结合行业背景以及客户需求来看待它,因此我今天的分享也就由三个主题组成:市场趋势、顺势而为、核心能力。
市场趋势
工业物联网、车联网行业的迅速发展,产生了大量的数据。评测报告显示,2025年实时数据将占到数据总量的30%,几乎所有实时数据都将由物联网系统产生,同时终端设备代码量激增,终端智能设备、传感器数据将流入云端。因此,到2025年绝大多数的云端新增数据将来源于物联网、车联网等智能互联场景。
放眼国内与全球市场,工业物联网都有着巨大的潜力。国家在政策层面积极支持我国工业物联网发展,2019 、2020年相继出台了《“5G+ 工业物联网”512 工程推进方案》和《关于推动工业物联网加快发展的通知》,明确了我国要由工业大国发展迈向工业强国的战略目标,加快推进“互联网 + 制造业”、“5G+ 工业物联网” 的融合创新。

图1 工业物联网的国内市场容量
因此在这样的市场趋势下,时序数据的诞生与发展应该顺势而为。
顺势而为
1、工业场景数智升级的问题与挑战
新技术在创造新机遇带动产业升级的同时,也带来了新的技术挑战。更加复杂的系统架构和更高的性能、稳定性要求制约了工业物联网系统实施落地,企业需要专业技术公司来帮助解决数据采集、传输、存储、分析及可视化全链数据处理系统建设难点。

图2 数智升级中的建设难点与具体问题
2、阿里云Lindorm TSDB 架构
阿里云Lindorm TSDB 作为时序数据库,它有四个关键的价值:
- 非对称读写和快速处理海量时序数据
- 数据存储效率非常高,单位数据量存储成本优势明显。
- 针对时序数据构建独特的数据存储架构,读取处理时序数据方面相比其他数据库更具有性能、成本优势。
- 边云一体化,方案集成方便简单。
3、阿里云Lindorm 设计愿景
阿里云Lindorm 的设计愿景体现在高通量、高性能、易用、易维护四个方面。
云原生多模数据库Lindorm是面向互联网、物联网、车联网、工业互联网等设计和优化的超融合数据库,支持宽表、时序、文本、对象、流、空间等多种数据的统一访问和融合处理,并兼容多种开源标准接口和无缝集成三方生态工具,是日志、监控、账单、广告、社交、出行、风控等场景首选数据库,也是为阿里巴巴核心业务提供支撑的数据库之一,真正做到了“让海量数据看得见、存得起“。

图3 Lindorm TSDB 驱动的工业数据云系统架构
阿里云原生数据Lindorm也应用在工业数据云场景上。Lindorm面向BEV新能源电动汽车监控场景,以极致性价比提供海量数据存储、开放生态兼容、多引擎异构数据融合等能力,与江铃和长城汽车等车厂、东软等车联网服务提供商共建联合解决方案支撑未来网联汽车系统数字化升级。

图4 Lindorm 数据库测评证书
核心能力
1、核心能力一:软硬件定义多级存储
首先,在不同的场景下,用户可以通过权衡性能和存储的成本来选择存储方式,比如性能型存储、标准型存储、容量型存储。不仅提供了存储的灵活度,同时也能够在海量数据的场景下,更大地节省存储的投入。
2、核心能力二:自动冷热分离
用关系型数据库来实现冷热数据的分离存储与分库分表的难度很高,因此从工业场景下,更强调的是一个易于维护易用的自动的做冷热数据的一个管理。
Lindorm数据库将数据自动冷热分层,灵活调整分割线,并且应用零改造、全透明访问,冷数据存储成本大幅减少,热数据访问性能有效提升。
3、核心能力三:智能特征压缩
智能特征压缩也是Lindorm TSDB数据库的产品核心能力之一。相比业界通用的SNAPPY, 压缩率提升50%+,压缩比高达10:1。

图5 Lindorm TSDB 智能特征压缩的核心能力
4、核心能力四:高性能吞吐
某业务HBase迁移至Lindorm后,写入RT减少为1/3

图6 Lindorm TSDB 高性能吞吐的核心能力
5、核心能力五:流库一体
传统ETL(Extract-Transform-Load,即数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端)存在着使用门槛高,数据延迟大的痛点,而Lindorm数据库流库一体,ELT即开即用的功能。

图7 Lindorm TSDB 流库一体的核心能力
6、核心能力六:时序流计算
时序流计算是产品的第六个核心能力。产品中丰富的时序多维聚合算子,以支持在上层进行异常检测、趋势预测的算法,从而进行复杂的时序数据处理。

图8 Lindorm TSDB 时序流计算的核心能力
7、核心能力七:时序引擎 TSQL
同时在查询语句上,兼容SQL语法,方便进行数据对接与改造。

图9 Lindorm TSDB 时序引擎 TSQL的核心能力
8、核心能力八:时序洞察
最后,Lindorm数据库的核心能力还体现在时序洞察方面。除了有异常检测,预测这类常用的时序分析的算法之外,还有序列数据的降维算法,帮助用户从高维数据里边找到相似性、相关性与因果关系。

图10 Lindorm TSDB 在时序洞察上的核心能力
以上就是我今天的分享内容,谢谢大家!
更多精彩内容,欢迎大家观看视频回放与会议资料
视频回放:https://www.modb.pro/video/6118
会议资料:https://www.modb.pro/doc/56839
- 查看原文:https://www.modb.pro/db/335237
- 相关阅读:国产数据库沙龙 | 张玮绚:TDengine,高性能、分布式、支持SQL的时序数据库
- 查看【国产数据库沙龙】往期生态工具、图数据库专场资源:https://www.modb.pro/topic/157860
墨天轮,围绕数据人的学习成长提供一站式的全面服务,打造集新闻资讯、在线问答、活动直播、在线课程、文档阅览、资源下载、知识分享及在线运维为一体的统一平台,持续促进数据领域的知识传播和技术创新。
关注官方公众号: 墨天轮、 墨天轮平台、墨天轮成长营、数据库国产化 、数据库资讯
墨天轮国产数据库沙龙 | 许力:阿里云原生Lindorm TSDB数据库,驱动工业IT&OT超融合数字化系统升级的更多相关文章
- 阿里云RDS导入服务器数据库 XtraBackup
如果是centos系统,默认会开启selinux 一定需关闭selinux 解决方法:关闭它,打开/etc/selinux/config,把SELINUX=enforcing改为SELINUX=dis ...
- MongoDB与阿里云达成战略合作,最新数据库独家上线阿里云!
11月26日,开源数据库厂商MongoDB与阿里云在北京达成战略合作,作为合作的第一步,最新版MongoDB 4.2数据库产品正式上线阿里云平台. 目前阿里云成为全球唯一可提供最新版MongoDB服务 ...
- 云原生数据库崛起,阿里云POLARDB当选世界互联网领先科技成果!
第六届世界互联网大会来了!千年水乡古镇乌镇又一次吸引了全世界的目光. 刚刚,阿里云自研数据库POLARDB在会上当选世界互联网领先科技成果.POLARDB解决了企业在云时代的数据库难题,帮助企业在数小 ...
- 把云数据库带回家!阿里云发布POLARDB Box数据库一体机
9月26日,2019杭州云栖大会上,阿里云宣布正式推出高性能数据库一体机——POLARDB Box,用户部署在自有数据中心即可享受云数据库的便捷体验,同时还为Oracle等传统数据库用户提供一键迁移功 ...
- 探索云数据库最佳实践 阿里云开发者大会数据库专场邀你一起Code up!
盛夏.魔都.科技 三者在一起有什么惊喜? 7月24日,阿里云峰会·上海——开发者大会将在上海世博中心盛大启程,与未来世界的开发者们分享数据库.云原生.开源大数据等领域的技术干货,共同探讨前沿科技趋势, ...
- 洞见数据库前沿 集结阿里云数据库最强阵容 DTCC 2019 八大亮点抢先看
摘要: 作为DTCC的老朋友和全球领先的云计算厂商,阿里云数据库团队受邀参加本次技术盛会,不仅将派出重量级嘉宾阵容,还会为广大数据库业内人士和行业用户奉上8场精彩议题.下面小编就为大家提前梳理了8大亮 ...
- 使用Navicat或者其他数据库工具连接阿里云EDS(数据库服务器)实例过程详解
使用Navicat或者其他数据库工具连接阿里云EDS(数据库服务器)实例过程详解 背景:这几天从阿里云上面购买了云服务器,最垃圾的那种,还送oss和EDS数据库服务器,只不过EDS数据库服务器只有一个 ...
- 【故障公告】阿里云 RDS SQL Server 数据库实例 CPU 100% 引发全站故障
非常抱歉,今天 8:48 开始,我们使用的阿里云 RDS SQL Server 数据库实例突然出现 CPU 100% 问题,引发全站故障,由此给您带来麻烦,请您谅解. 发现故障后立即进行主备切换,和 ...
- 保姆级教程!手把手教你使用Longhorn管理云原生分布式SQL数据库!
作者简介 Jimmy Guerrero,在开发者关系团队和开源社区拥有20多年的经验.他目前领导YugabyteDB的社区和市场团队. 本文来自Rancher Labs Longhorn是Kubern ...
- 云计算之路-阿里云上:RDS数据库连接数过万引发故障,主备库切换后恢复正常
非常抱歉!今天 12:03-12:52 ,由于数据库连接数异常突增超过1万,达到了阿里云RDS的最大连接数限制,影响了全站的正常访问.由此给您带来麻烦,请您谅解. 在发现数据库连接数突增的问题后,我们 ...
随机推荐
- 基于 TrueLicense 项目证书生成
一.创建公钥私钥 1.首先要用 KeyTool 工具来生成私匙库:(-alias别名 -validity 3650 表示10年有效,这个时间不是License的过期时间) keytool -genke ...
- 【JavaWeb】接口请求404的问题排查
响应状态404:404 Page Not Found 根本原因: 服务器找不到这个地址描述的页面资源, 注意是页面资源 可能的出现的开发情况: 1.请求的资源可能真的不存在,是接口,也可以是页面 2. ...
- 【Java-GUI】02 Dialog对话框
--1.对话框 Dialog java.awt.Dialog 和Window一样可以独立存在的一个窗体 但是注意: 1.Dialog对象一定需要一个依附的父级窗口 2.两种模式(模式和非模式),模式打 ...
- 【DataBase】MySQL 26 存储过程
一.概述 存储过程&函数,类似编程语言的方法 什么是方法? 完成特定功能的一组语句 方法的特点 1.可重用性 2.简化操作 二.存储过程[ Stored Procedures]: 一组预先编译 ...
- 【Layui】07 徽章 Badge
文档地址: https://www.layui.com/demo/badge.html 圆点徽章: <span class="layui-badge-dot">< ...
- 失温急救处理方法——1.快速复温;2.心肺复苏;3.口服或静脉注射生理盐水(40 ~ 42 ℃ ,小剂量250 mL);4.口服或静脉注射抗血栓药物,如布洛芬
相关: https://haokan.baidu.com/v?pd=wisenatural&vid=14530104659934311010 参考: https://m.bjnews.com. ...
- 内网穿透之实践记录,使用花生壳进行内外穿透,场景:在家远程ssh连接到公司电脑或学校服务器
今天在网上闲逛的时候看到这样一个内网穿透的软件,ngrok, https://gitee.com/kxwinxp/ngrok 记得10多年前自己在读大学的时候曾经好一段时间在研究内网穿透技术,最后发现 ...
- 强化学习算法如何将GPU利用率提高到100%——在线强化学习如何将GPU利用率提升至100%
一直有个疑问,那就是"强化学习算法如何将GPU利用率提高到100%",在一些论坛中也有人会提出这样的问题,但是一直也没有人比较正面的回答过这个问题,为此正好自己又想到了这么一个问题 ...
- Apache DolphinScheduler-3.2.0集群部署教程
集群部署方案(2 Master + 3 Worker) Apache DolphinScheduler官网:https://dolphinscheduler.apache.org/zh-cn Apac ...
- Codeforces Round 886 (Div. 4)
Dashboard - Codeforces Round 886 (Div. 4) - Codeforces A. To My Critics 判断任意两个大于10即可 #include <bi ...