随着移动互联网.电子商务的高速发展,被使用最多的企业级开源数据系统MySQL面临着巨大挑战——为迎接“双11"的高并发要提前做好分库分表;用户不断激增要将读写分离才能应对每天上亿次的访问,但读写分离后会导致数据同步延时严重.分布式事务复杂且效率低下.数据库可用性下降.MySQL的3T容量瓶颈等一系列问题都困扰着CTO和架构师们. “要解决这些问题,阿里巴巴2008年就开始研发自主可控的数据系统,2014年基于MySQL的国内首个云原生数据库POLARDB开始孵化,到今天已累计超过PB的数据迁移至…
随着移动互联网.电子商务的高速发展,被使用最多的企业级开源数据系统MySQL面临着巨大挑战--为迎接"双11"的高并发要提前做好分库分表;用户不断激增要将读写分离才能应对每天上亿次的访问,但读写分离后会导致数据同步延时严重.分布式事务复杂且效率低下.数据库可用性下降.MySQL的3T容量瓶颈等一系列问题都困扰着CTO和架构师们. "要解决这些问题,阿里巴巴2008年就开始研发自主可控的数据系统,2014年基于MySQL的国内首个云原生数据库POLARDB开始孵化,到今天已累计…
POLARDB是阿里巴巴自主研发的云原生关系型数据库,目前兼容三种数据库引擎:MySQL.PostgreSQL.Oracle.POLARDB的计算能力最高可扩展至1000核以上,存储容量可达100TB. POLARDB融合了商业数据库稳定.可靠.高性能的特征,同时具有开源数据库简单.可扩展.高速迭代的优势,适合各个行业公司的创新业务使用.本专场中,来自阿里云.江娱互动以及猿辅导的各位技术大咖一起共同探讨了下一代云原生数据库POLARDB. 1.云原生数据库的演进方向和客户价值 阿里云智能数据库总…
阿里巴巴新一代自研云数据库POLARDB与超图软件SuperMap GIS实现 “引擎级”深度对接,构建了自治.弹性.高可用的云原生时空数据管理平台联合解决方案,推出了业界首个“云原生数据库+云原生GIS”的全国产化平台. 1.阿里云POLARDB POLARDB是阿里云自主研发的国内首个云原生数据库,兼容三种数据库引擎:MySQL.PostgreSQL.Oracle.采用了存储计算分离.软硬一体化等创新设计,满足大规模业务场景上云需求. POLARDB集成Ganos时空引擎,基于属性-时间-空…
作者 | 王骜 来源 | Serverless 公众号 导读 ​ USENIX ATC (USENIX Annual Technical Conference) 学术会议是计算机系统领域的顶级会议,入选中国计算机协会(CCF)推荐 A 类国际会议列表:本次会议共投稿 341 篇论文,接收 64 篇,录用率 18.8%. 阿里云 Serverless 团队第一个提出在 FaaS 场景下的去中心化快速镜像分发技术,团队创作的论文被 USENIX ATC'21 录用.以下是论文核心内容解读,重点在缩短…
1. 引言 云原生数据库跟分布式mpp数据库是有差异的,虽然两者都是计算与存储分离,但是在资源的占用上有所不同.云原生数据库是shard everything架构,其依赖的存储资源.内存资源.事务资源在云中都是共享.弹性伸缩的.由分布式文件系统提供按需分配.租户隔离的块存储,由分布式内存池提供buffer pool占用的大块内存.分布式mpp数据库则是shard nothing架构,其依赖的存储资源.内存资源.事务资源是单个物理节点上的资源,在SQL计算层进行了分布式计算逻辑的分发. 本文重点介…
作者介绍 朱阅岸,中国人民大学博士,现供职于腾讯云数据库团队.研究方向主要为数据库系统理论与实现.新硬件平台下的数据库系统以及TP+AP型混合系统.   编者按 Aurora作为AWS云上的关系数据库,完美契合了企业级数据库系统对高可用性.性能和扩展性.云服务托管的需求.在本月中旬刚刚结束的AWS re:Invent 2017大会与数据库顶级会议SIGMOD上,Amazon首度公开了Aurora的技术细节,本文系作者结合自身理解写作而成,权当抛砖引玉.   Aurora是Amazon为云计算而专…
今日在网上发现这篇文章很棒,详细的分析了当前BAT矩阵下的o2o 的模式.所以转载过来与大家一起分享. 文章来自于:http://www.siilu.com/20151214/158917.shtml 阿里是BAT中最为需要流量与服务的,自从与美团决裂后,其劣势在于缺少像腾讯与百度那样有着众多强势的控制下游服务环节的第三方O2O公司支撑,更多的是依赖于自身的支付宝. O2O归根到底无非是由流量.支付.服务三大环节构成,BAT分别以自身优势以及借助第三方分别踏入这三大环节之中,彼此互相盘根错节,均…
前言 我们在上一篇博客聊了Mysql的整体架构分布,连接层.核心层.存储引擎层和文件系统层,其中存储引擎层作为Mysql Server中最重要的一部分,为我们sql交互提供了数据基础支持.存储引擎和文件系统执行IO交互,读取同一份原始数据(存储引擎不同,可能文件也不一样,但是都是一份数据),然后依据各自的特性在内存中变换存放,满足自身设计.例如我们熟知的InnoDB和MyLSAM,都是将底层文件系统的物理数据读取到内存中以B+树的形式存在,只不过对于树上叶子节点中的数据会有不同的实现而已.下面我…
程序员收藏必看系列:深度解析MySQL优化(一) 性能优化建议 下面会从3个不同方面给出一些优化建议.但请等等,还有一句忠告要先送给你:不要听信你看到的关于优化的“绝对真理”,包括本文所讨论的内容,而应该是在实际的业务场景下通过测试来验证你关于执行计划以及响应时间的假设. scheme设计与数据型优化选择数据类型只要遵循小而简单的原则就好,越小的数据类型通常会更快,占用更少的磁盘.内存,处理时需要的CPU周期也更少.越简单的数据类型在计算时需要更少的CPU周期,比如,整型就比字符操作代价低,因而…