摘要:华为云GaussDB(for Redis)为数位科技打造了一个稳定可靠、高效安全、卓越性能的大数据引擎,KV存储降本80%,助力实体企业数字化转型之路走的更加稳健。

本文分享自华为云社区《华为云GaussDB(for Redis)支撑数位科技打造全新大数据引擎》,作者: GaussDB 数据库 。

在数字经济时代,每个科学的决策离不开数据的支撑。随着疫情的影响,线下商家对于开店投入更加谨慎,更需要大数据作为支撑提供科学的决策依据。

深圳数位大数据科技有限公司(简称“数位”)成立于2015年,致力打造助力实体经济数字化与线下经济商业决策的智能化产品和服务,让全域全场景大数据成为新引擎、新动力。

华为云云原生数据库GaussDB(for Redis)定位为企业级KV缓存,具有高稳定性、降成本、秒级无感扩容能力。在数位大数据平台的建设中,起到了关键作用。

数据激增下,“大数据”存储迎挑战

作为全域全场景商业大数据科技公司,数位的核心是通过“大数据+算法模型”来提供创新的产品和服务。自成立以来,数位累积了核心的全域全场景商业数据资产,包括400+城市数据、3000万+商业铺位信息、4万个品牌数据,8000+商场数据,5亿+栅格数据等,累积线下POI(泛指互联网电子地图中的点类数据)数据量级达到1亿以上,构建了中国最大的全域全场景商业大数据库,并实现毫秒级的响应能力,满足海量用户实时分析查询需求。

随着业务量增长,支撑数位业务的数据库面临挑战,其中自建的开源Redis集群面临以下几方面问题:

(1)存储成本高:随着数位采集的数据量增多,大数据存储问题日益凸显,而开源Redis内存贵,容量利用率太低,让大数据引擎总成本居高不下。

(2)快速扩容难:数位大数据一直处于强势增长,经常需要扩容。然而,开源Redis分片扩容慢、中断业务久的问题成为痛点,给运维和业务带来压力。

(3)大key易阻塞:大数据会经常存储大key,但开源Redis单线程访问阻塞、分片OOM(内存用完)、扩容Bug等问题很常见。

借力云原生GaussDB(for Redis),打造全新“大数据引擎”

云原生时代,数位大数据科技将核心大数据业务改造上华为云,系统降低IT成本,解决IT资源管理难题。在关键数据库选型上,使用华为云GaussDB(for Redis)替代自建开源Redis集群。目前在华为云上,数位成功打造了一个成本更低、性能更优的大数据引擎,业务迈上了新的台阶。

GaussDB(for Redis)在数位大数据的业务体系中,起到了重要作用:

存储成本降低80%

大数据存储成本过高,本质上还是硬件贵的问题。开源Redis所存储的数据全部放在内存中,每增长1GB成本直线上升,而算力又大量闲置浪费。

GaussDB(for Redis)自带冷热分离,借助DRAM+NVMe极速SSD实现降本的同时,保障亚毫秒级时延性能。在大数据维表存储场景,GaussDB(for Redis)数据压缩能力能将1TB数据压缩到300G容量,释放了大量存储空间。数位迁移到GaussDB(for Redis)后,Redis成本降低了近80%。

扩容变成一件轻松的事

华为云GaussDB(for Redis)是具备存算分离、资源池化的Redis云服务。存算分离的GaussDB(for Redis)不但支持算力、存储独立购买,还支持秒级弹性扩容。128G快写满? 256G、512G、1TB…任选,统统1秒扩容完成,且业务访问完全不受影响。

迁移到GaussDB(for Redis)实例之后,扩容变成了一件轻松的事。面对业务的扩张,数位的运维工作更加智能化,为以后业务的发展和公司的扩张打好了基石。

解决大key痛点

开源Redis的单线程,还有经典的“fork”问题,特别是在有一些大key、热key的业务中,阻塞与性能抖动是习以为常的事情。

GaussDB(for Redis)架构中,每个节点都是真正的多线程,大key业务的整体访问时延有明显提升。此外,由于扩容、分片故障时,都是计算层的事,完全不需要“挪动”存储层的大key,因此也从原理上杜绝了开源Redis存储大key的一系列不稳定问题。

华为云GaussDB(for Redis)为数位科技打造了一个稳定可靠、高效安全、卓越性能的大数据引擎,KV存储降本80%,助力实体企业数字化转型之路走的更加稳健。

未来,华为云GaussDB将持续助力数位科技成为数字经济时代的领军企业,聚焦实体企业所面临的商业命题,为实体经济从业者和企业提供商业决策、商业应用服务、数字化作业管理系统工具等支持,助力企业数字化转型成功。

【重要活动推荐】

2022年8月18日14:00,华为云TechWave云原生数据库峰会将在深圳举行。峰会围绕云原生数据库,与来自产业组织、云厂商、科技媒体以及行业技术精英零距离思想碰撞;联合信通院发布云原生数据库业界首个白皮书,探讨如何构建云原生2.0时代新型数据库云服务;聆听云原生行业先锋的创新实践,携手伙伴共建应用繁荣生态。

欢迎点击此处报名~

点击关注,第一时间了解华为云新鲜技术~

洞见商业新机,云原生数据库GaussDB让企业决策更科学的更多相关文章

  1. 再测云原生数据库性能:PolarDB依旧最强,TDSQL-C、GaussDB变化不大

    1.摘要 近期,腾讯云数据库在文章「腾讯云TDSQL-C重磅升级,性能全面领跑云原生数据库市场」中提到,某些场景下性能有非常大的提升,且超过国内某橙色云厂商.恰好,在5月份,我们对各个厂商的云原生数据 ...

  2. 为什么CynosDB叫真正的云原生数据库?

    本文由腾讯云数据库发表 注:本文摘自2018年11月22日腾讯云数据库CynosDB新品发布会的演讲实录.随着互联网信息的发展,大家也对云这个词汇也不是特别陌生了,作为全球首选的云服务厂商之一的腾讯云 ...

  3. 比MySQL快6倍 深度解析国内首个云原生数据库POLARDB的“王者荣耀”

    随着移动互联网.电子商务的高速发展,被使用最多的企业级开源数据系统MySQL面临着巨大挑战——为迎接“双11"的高并发要提前做好分库分表;用户不断激增要将读写分离才能应对每天上亿次的访问,但 ...

  4. 云栖干货回顾 | 云原生数据库POLARDB专场“硬核”解析

    POLARDB是阿里巴巴自主研发的云原生关系型数据库,目前兼容三种数据库引擎:MySQL.PostgreSQL.Oracle.POLARDB的计算能力最高可扩展至1000核以上,存储容量可达100TB ...

  5. 深度解析国内首个云原生数据库POLARDB的“王者荣耀”

    随着移动互联网.电子商务的高速发展,被使用最多的企业级开源数据系统MySQL面临着巨大挑战--为迎接"双11"的高并发要提前做好分库分表;用户不断激增要将读写分离才能应对每天上亿次 ...

  6. 又拿奖了!腾讯云原生数据库TDSQL-C斩获2021PostgreSQL中国最佳数据库产品奖

    日前,开源技术盛会PostgresConf.CN & PGconf.Asia2021大会(简称2021 PG亚洲大会)在线上隆重召开,腾讯云作为业内领先的云数据库服务商受邀出席,多位专家深入数 ...

  7. 腾讯云原生数据库TDSQL-C入选信通院《云原生产品目录》

    近日,中国信通院.云计算开源产业联盟正式对外发布<云原生产品目录>,腾讯云原生数据库TDSQL-C凭借其超强性能.极致效率的弹性伸缩和完善的产品化解决方案体系,成功入围目录. 全球数字经济 ...

  8. 云原生数据库崛起,阿里云POLARDB当选世界互联网领先科技成果!

    第六届世界互联网大会来了!千年水乡古镇乌镇又一次吸引了全世界的目光. 刚刚,阿里云自研数据库POLARDB在会上当选世界互联网领先科技成果.POLARDB解决了企业在云时代的数据库难题,帮助企业在数小 ...

  9. 云原生数据库mysql对共享存储分布式文件系统的接口需求分析

    1. 引言 云原生数据库跟分布式mpp数据库是有差异的,虽然两者都是计算与存储分离,但是在资源的占用上有所不同.云原生数据库是shard everything架构,其依赖的存储资源.内存资源.事务资源 ...

  10. 云原生数据库 TDSQL-C 产品概述、产品优势、应用场景

    云原生数据库 TDSQL-C(Cloud Native Database TDSQL-C,TDSQL-C)是腾讯云自研的新一代高性能高可用的企业级分布式云数据库.融合了传统数据库.云计算与新硬件技术的 ...

随机推荐

  1. mysqli操作

    1.使用mysqli_connect()函数,语法如下: mysqli 对象名=mysqli_connect(数据库服务名,用户名,密码,数据库名) 例:$conn=mysqli_connect('l ...

  2. 栈溢出-GOT表劫持测试

    1.目标程序源代码 char name[64]; int main(){ int unsigned long long addr; setvbuf(stdin,0,2,0); setvbuf(stdo ...

  3. InnoDB 存储引擎之 Buffer Pool

    Mysql 5.7 InnoDB 存储引擎整体逻辑架构图 一.Buffer Pool 概述 InnoDB 作为一个存储引擎,为了降低磁盘 IO,提升读写性能,必然有相应的缓冲池机制,这个缓冲池就是 B ...

  4. Jenkins-插件安装-多实例

    1,Jenkins插件安装: Jenkins最大的功能莫过于插件丰富,基于各种插件可以满足各项需求,Jenkins本身是一个框架,真正发挥作用的各种插件.Jenkins默认自带很多插件,如果没有添加新 ...

  5. nginx虚拟机及热部署(在线升级)

    实现热部署(在线升级): 热部署方案一 (有弊端,不利于回滚) 查看nginx版本及源编译差数: /usr/local/nginx/sbin/nginx -V 预编译/ 编译/ 安装:在预编译之前,先 ...

  6. FWT & FMT(位运算卷积)学习笔记

    它们两个的全名叫 快速沃尔什变换(FWT) 和 快速莫比乌斯变换(FMT),用来在 \(O(n\log n)\) 时间复杂度内求位运算卷积. 因为 FMT 能解决的问题是 FWT 的子集,所以这里不讲 ...

  7. ASM字节码操作类库(打开java语言世界通往字节码世界的大门)

    前言:授人以鱼不如授人以渔,应用asm的文章有很多,简单demo的也很多,那么ASM都具备哪些能力呢?如何去学习编写ASM代码呢?什么样的情景需要用到ASM呢?让我们带着这些问题阅读这篇文章吧. 这里 ...

  8. 匿名远程启动jenkins的job

    安装jenkins插件Build Authorization Token Root job配置中的构建触发器,勾选触发远程构建,输入要用的令牌,如soul 通过jenkins地址调用触发 非参数化jo ...

  9. [ARC122D] XOR Game

    Problem Statement There are $2N$ integers written on a blackboard. The $i$-th integer is $A_i$. Alic ...

  10. [ABC265D] Iroha and Haiku (New ABC Edition)

    Problem Statement There is a sequence $A=(A_0,\ldots,A_{N-1})$ of length $N$. Determine if there exi ...