日吞吐万亿，腾讯云时序数据库CTSDB解密

一.背景随着移动互联网.物联网.大数据等行业的高速发展,数据在持续的以指数级的速度增长,比如我们使用手机访问互网络时的行为数据,各种可穿戴设备上报的状态数据,工厂中设备传感器采集的指标数据,传统互联网公司的监控数据等.实际上,这些按照时间顺序记录系统.设备状态变化的数据都是时序数据(Time Series),它普遍存在于互联网.物联网.IT基础设施中. 得益于软硬件技术的快速发展,处理如此庞大的时序数据集的成本在持续降低,更多公司开始持续收集.分析数据,用于异常处理.趋势预测.精准营销.风险控…

日调度万亿次，微服务框架TSF大规模应用——云+未来峰会开发者专场回顾

欢迎大家前往腾讯云+社区,获取更多腾讯海量技术实践干货哦~ 演讲者:张浩腾讯云中间件产品负责人背景:众多开发者中,一定经历类似的甜蜜烦恼,就是当线上业务规模越来越大,系统分支发展越来越多的时候,初期上线的成就感很快就会被系统间数据不兼容.不通畅,折磨得精疲力尽,每次模块更新都是牵一发而动全身.腾讯云微服务框架TSF就可以为大家解决数据孤岛以及重复造轮子的问题,提供了简洁易用的代码入口,将复杂的底层网络.服务器部署接口化,使开发者更易用. 本文整理自腾讯云中间件产品负责人张浩在腾讯云云+未来峰…

腾讯云原生数据库TDSQL-C架构探索和实践

作为云原生技术先驱,腾讯云数据库内核团队致力于不断提升产品的可用性.可靠性.性能和可扩展性,为用户提供更加极致的体验.为帮助用户了解极致体验背后的关键技术点,本期带来腾讯云数据库专家工程师王鲁俊给大家分享的腾讯云原生数据库TDSQL-C的架构探索和实践,内容主要分为四个部分: 本次分享主要分为四个部分: 第一部分,介绍腾讯云原生数据库 TDSQL-C 产品架构,包括产品的研发背景和架构主要特性: 第二部分,分享用户场景实践,针对线上真实的用户场景做一些分析和针对性实践: 第三部分,分享系统关键优…

又拿奖了！腾讯云原生数据库TDSQL-C斩获2021PostgreSQL中国最佳数据库产品奖

日前,开源技术盛会PostgresConf.CN & PGconf.Asia2021大会(简称2021 PG亚洲大会)在线上隆重召开,腾讯云作为业内领先的云数据库服务商受邀出席,多位专家深入数据库生态.云原生架构.新硬件.智能化等领域进行分享,详细解读了腾讯云数据库在Oracle兼容.高效和智能运维.数据迁移.内核优化等方面的技术实践. 在2021年度PostgreSQL中国技术评选发布仪式上,经由组委会专家严格评审,腾讯云数据库被评为"2021PostgreSQL中国最佳服务商&quo…

腾讯云原生数据库TDSQL-C入选信通院《云原生产品目录》

近日,中国信通院.云计算开源产业联盟正式对外发布<云原生产品目录>,腾讯云原生数据库TDSQL-C凭借其超强性能.极致效率的弹性伸缩和完善的产品化解决方案体系,成功入围目录. 全球数字经济进入高速发展期,在敏捷.高效.降本需求的驱动下,云原生已经成为提升云计算使用效能的关键支撑,正引领新一代软件架构的变革,企业必须紧跟云原生发展路线,加速产业转型和系统优化,发挥技术创新价值,保持市场竞争优势.但云原生化改造并非易事,企业借助云原生技术提供商的力量,通过采购成熟的解决方案可以快速补足云原生能力短…

复盘价值1000万的腾讯云硬盘固件"BUG"

摘要: 除了吃瓜,还是得吸取教训啊同学们! 这次,我从纯技术角度分析腾讯云与前沿数控的磁盘数据丢失事件,不站队. 硬盘门这里说的硬盘门不是10年前陈老师的那一次,而聊的是最近"腾讯云"用户"前沿数控"的磁盘数据丢失. 关于这次事件,腾讯云是这样说的: 近日,腾讯云用户北京清博数控科技有限公司所属"前沿数控"平台一块操作系统云盘,因受所在物理硬盘固件版本bug导致的静默错误(写入数据和读取出来的不一致)影响,文件系统元数据损坏. 腾讯云多少有点打…

腾讯云分布式数据库TDSQL在银行传统核心系统中的应用实践

本文是腾讯云TDSQL首席架构师张文在腾讯云Techo开发者大会现场的演讲实录,演讲主题是<TDSQL在银行传统核心系统中的应用实践>. 我是TDSQL架构师张文,同时也是TDSQL的开发人员之一.今天的分享内容主要包含四个部分,分别为银行行业现状介绍.核心系统分布式改造.TDSQL最佳实践和改造效果. 张文演讲现场搜索关注"腾讯云数据库"官方微信,回复"1106张文"即可下载本视频演讲PPT. 一.关于TDSQL 银行数据库系统被外企垄断超过99%.…

记一次腾讯云MySQL数据库数据回滚

如题,因为操作人员的问题,需要对数据库数据进行回滚. 可以看到,设置了7天自动备份,且是物理冷备. 什么是物理冷备?科普一下: (1)热备:在数据库运行时,直接进行备份,对运行的数据库没有影响.(2)冷备:在数据库停止运行的时候进行备份,这种备份方式最为简单,只需要拷贝数据库物理文件即可.(3)温备:同样是在数据库运行的时候进行备份的,但对当前数据库的操作会产生影响. 热备份的缺点: 1.尽量不要出错,否则后果会很严重. 2.如果热备份不成功,所得结果不可用于时间点的数据恢复. 3.维护的工作比…

SQLyog远程连接腾讯云服务器数据库Mysql遇到的坑

首先说明我的数据库是安装在云服务器上,不是专业的数据库服务器,没错就是10块钱包月的. 然后觉得使用SQLyog远程维护数据库比较方面,可是怎么都登录不上去. 下面分析原因: 1.安全组是否放过了访问的端口,这个问题不存在的,我设置的是 ALL 允许所有访问. 2.防火墙的问题,百度有好多人说是这个问题.后来发现跟这个完全没关系.远程访问根本不需要3306端口,SSH连接的端口是22,默认本地端口是3310. 3.mysql开启远程访问的问题,这个不存在我的不是localhost而是% 4.ss…

腾讯云启动数据库进程，提示No such host is known

回想一下,系统是否切换过外网IP,切换过则检查/etc/hosts文件中IP和主机名对应关系现象:出错前一直做域名解析…

腾讯云数据库TDSQL-大咖论道 | 基础软件的过去、现在、未来

近十年来,中国基础软件发展势头迅猛,市场前景看高,越来越多的企业也正在进行基础软件升级.那中国基础软件行业目前在国际市场上有什么优势,面临哪些困境,以及未来基础软件行业会如何发展呢?腾讯云数据库邀请沙利文中国高级分析师胡竣杰.华云中盛数据库事业部总经理杨光.中软国际数据库业务总监范利军及腾讯云数据库总经理王义成四位行业大咖,共话中国基础软件发展. 1. 中国基础软件在国际市场上有哪些优势? 完整视频版:https://v.qq.com/x/page/d3341qkoxdj.html 胡竣杰中国…

【http转https】其之一：腾讯云 DV SSL证书申请实验

文:铁乐猫 2016年1月前言大概2017年12月28日左右公司提出以后需要将公司网站由http提升到https级别,以便谷歌和火狐浏览器将之认定为安全网站. 主要是出于客户.用户那边用火狐或谷歌浏览器浏览时的考虑,因为谷歌据闻以后全都要https认证访问. 不过在要做http转https之前,肯定是不能直接拿线上的主站来测试的,所以我向公司方面提出了要拿几个无关域名和测试网站来做这项实验. 于是公司申请和备案了三个用于以后做实验的域名,并为此将几个简单的网站由我放在我负责的反向代理的ngi…

阿里云VS腾讯云谁才是中国未来的云计算之王？

阿里云早在 2009 年就已经开始布局云计算领域,具有先发优势.据统计,40% 的中国 500 强企业.近一半中国上市公司.80% 中国科技类公司是阿里云的客户.而腾讯云基于腾讯自身在游戏.视频.社交.出行等业务的强势地位,一路奋起直追,市场份额占比不断扩大.本文将从战略布局.市场份额.营业收入.技术能力.产品性价比这五个方面进行全方位对比. 战略布局:阿里云早于腾讯云从游戏.资讯.影音娱乐.互联网广告到交通出行.旅游住宿.美食外卖.移动支付甚至金融保险等等……在几乎每一个互联网可以触及到的行…

[转帖]阿里云VS腾讯云谁才是中国未来的云计算之王？

阿里云VS腾讯云谁才是中国未来的云计算之王? https://www.qianzhan.com/analyst/detail/220/191008-f05009f6.html 吴小燕• 2019-10-09 11:30:17 来源:前瞻产业研究院 E5282G0 2019-2024年中国云计算产业发展前景与投资战略规划分析报告 2019-2024年中国行业云市场发展前景预测与投资战略规划分析报告 2019-2024年中国政府云计算发展前景预测与投资战略规划分析报告 2019-2024年中国大…

深度揭秘腾讯云新一代企业级HTAP数据库TBase核心概念

腾讯云PostgreSQL-XZ(PGXZ)经过公司内部多年业务的打磨,在2017年改名为TBase后,正式对外推出,目前已在政务.医疗.公安.消防.电信.金融等行业等行业的解决方案中大量应用.TBase以其功能强大,运行稳定,高性能高可靠性,以及强大的互联网基因得到客户的普遍认可. TBase核心概念: Tbase的重要的技术特性和概念,主要包括以下几个方面: 企业级: 企业级特性包含以下几个方面: 用户友好的事务特性:业务无需关注数据库的事务特性,数据库内核支持完整的分布式事务,保证事务的A…

一文了解腾讯云数据库SaaS服务

本文由云+社区发表作者:邵宗文,2009年加入腾讯,现为腾讯云数据库专家产品经理.之前曾负责为OMG事业群构建数据库平台,部署,规划及运维支持,为腾讯网,新闻客户端,快报,视频,财经,体育等提供了稳定的服务.06-09年曾任新浪数据库专家,数据库平台主管,有非常丰富的海量大数据经验. 下方视频为邵宗文在未来大会演讲实录.每个行业对数据库有不一样的要求,云上数据库通过智能化运维,数据会越来越多,准确度也越来越高,模型也会越来越精准.腾讯云上数据库如何满足用户多样化的诉求?一起来听听吧. 数据库S…

如何防范和应对Redis勒索，腾讯云教你出招

欢迎大家前往腾讯云+社区,获取更多腾讯海量技术实践干货哦~ 本文由腾讯云数据库 TencentDB发表于云+社区专栏 9月10日下午,又一起规模化利用Redis未授权访问漏洞攻击数据库的事件发生,此次黑客以勒索钱财作为目的,猖狂至极,甚至直接删除数据库数据.由于腾讯云早在17年就发现过Redis这个漏洞,有个预案,所以这一次更是第一时间启动全网通知提醒,周知腾讯云用户进行防范,同时给出防范和应对措施. [漏洞概述] Redis 默认情况下,会绑定在 0.0.0.0:6379,导致Redis服务暴…

腾讯云数据库公有云市场稳居TOP 2！

7月4日,国际权威机构IDC发布的<2021年下半年中国关系型数据库软件市场跟踪报告>显示,腾讯云数据库在关系型数据库软件市场(公有云模式)中,位列第二. IDC报告显示,2021下半年中国关系型数据库软件市场规模为15.8亿美元,同比增长34.9%.其中,公有云关系型数据库规模8.7亿美元,同比增长48.7%.IDC预测,到2026年,中国关系型数据库软件市场规模将达到95.5亿美元,未来5年市场年复合增长率(CAGR)为28.1%. 这表明,中国公有云关系型数据库前景广阔,数据库行业正加速…

腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举

作者介绍: 赵伟腾讯云TDSQL数据库开发者 MySQL (这里的MySQL是指广义的mysql,包括oracle,mysql,percona,mariadb等)的Statement Based Replication (SBR)是一个暗坑无数的功能,可能导致主备机数据不一致,以及其它问题,所以在TDSQL中我们使用RBR.这里就列举几条SBR的坑. 在此之前,先说说SBR的有点.与Row based Replication (RBR)相比,它可以避免传输大量的binlog日志从而减小网络和存…

小游戏专场：腾讯云Game-Tech技术沙龙上海站顺利落下帷幕

欢迎大家前往腾讯云+社区,获取更多腾讯海量技术实践干货哦~ 本文由腾讯游戏云发表于云+社区专栏 9月14日腾讯云GAME-TECH技术沙龙小游戏专场在上海顺利举办,此次技术沙龙由腾讯云的资深专家,以及Layabox游戏引擎的大牛为游戏从业者带来了众多技术干货,例如腾讯游戏云小游戏解决方案.微信小游戏入门与常见问题解惑.H5游戏语音解决方案.腾讯云数据库小游戏应用实践经验.微信小游戏运营及技术优化等.针对这些技术主题,专家大牛们与现场的游戏同仁们进行了深入的经验分享和讨论,并为游戏从业者解答了疑惑…

0160 十分钟看懂时序数据库（I）-存储

摘要:2017年时序数据库忽然火了起来.开年2月Facebook开源了beringei时序数据库:到了4月基于PostgreSQL打造的时序数据库TimeScaleDB也开源了,而早在2016年7月,百度云在其天工物联网平台上发布了国内首个多租户的分布式时序数据库产品TSDB,成为支持其发展制造,交通,能源,智慧城市等产业领域的核心产品,同时... 2017年时序数据库忽然火了起来.开年2月Facebook开源了beringei时序数据库:到了4月基于PostgreSQL打造的时序数据库Time…

深度揭秘腾讯云TSF日调用量超万亿次背后技术架构

腾讯云TSF是整合外部开源框架和腾讯内部历经多年锤炼的PaaS平台打造而成的企业级分布式应用服务开发与托管平台,本文重点对TSF中负责服务托管的PaaS平台进行揭秘,从技术角度解析TSF 平台是如何每天应对万亿次调用的服务托管与治理. TSF PaaS平台的前身是CAE(Cloud App Engine),其核心架构是参考Cloud Foundry设计研发的.为了给开发者提供更加便捷的服务,TSF和公司很多基础服务打通,例如腾讯网关TGW.名字服务L5.内部鉴权服务.以及消息队列等,使得用户可以…

腾讯自研万亿级消息中间件TubeMQ为什么要捐赠给Apache？

导语 | 近日,云+社区技术沙龙“腾讯开源技术”圆满落幕.本次沙龙邀请了多位腾讯技术专家围绕腾讯开源与各位开发者进行探讨,深度揭秘了腾讯开源项目TencentOS tiny.TubeMQ.Kona JDK.TARS以及MedicalNet.本文是对张国成老师演讲的整理. 本文要点: Message Queue 的原理和特点: TubeMQ相关实现原理及使用介绍: TubeMQ后续的发展和探讨. 一.Message Queue 简介对于Message Queue(以下简称MQ),Wiki百科上的…

286万QPS！腾讯云TDSQL打造数据库领域的“超音速战机”

Bloodhound SSC超音速汽车将陆地极限速度提升到1678公里/小时,号称陆地“超音速战斗机”.无独有偶,同样也在2017年,在英特尔®.腾讯金融云团队的共同见证下,腾讯云数据库TDSQL采用英特尔®提供的高端平台,跑出了创造历史的最快性能数据——峰值286万QPS.相比于上一代处理器,性能提升了近4倍,是32核/220GB实例的38倍,腾讯云TDSQL正在打造数据库领域的“超音速战机”. 此次测试的TDSQL,是由腾讯云数据库团队.金融云团队和腾讯TEG团队共同维护的金融级分布式架构和…

AT一万亿港元市值之差，腾讯和阿里到底“差”在哪里？

很少有人注意到,港股之王已经悄然易主. 2019年底,阿里巴巴赴港二次上市,中国两大互联网巨头终于有了统一的比较口径,同台竞技之下,我们发现一个惊人事实--截止9月5日,港股阿里巴巴市值5.9万亿港元,腾讯市值4.9万亿,二者的市值落差达一万亿港元,划开了一道巨大鸿沟. 今年以来,在全球货币大放水的情况下,二者都是中国的核心受益标的,受益于经济复苏的刺激,电商和游戏业务增长强劲,阿里港股上涨32.3%,腾讯上涨35.3%. 同样都是大涨,2020年的业绩也都不错.但是,市场上关于阿里的讨论并不多…