作为互联网流量入口,CDN日志大数据你该怎么玩?
CDN是非常重要的互联网基础设施,用户可以通过CDN,快速的访问网络中各种图片,视频等资源。在访问过程中,CDN会产生大量的日志数据,而随着如今越来越复杂的网络环境变化,和业务的迅速增长,日志数据变得更大量、更多维度,同时其稳定性和报警监控的要求越来越高。这些数据通常都与用户的下一步业务决策息息相关。
通过对CDN访问日志的分析,可以挖掘出大量有用的信息作为监控、报警、渠道分析、运营分析的数据来源。而对于技术或者运维人员来说,CDN的线上问题其实是不好排查的,因为节点遍布全球各地,我们没办获知各个节点的状态。
当前CDN厂商通常会提供离线日志的功能,会在几十分钟甚至几个小时之后提供访问日志给客户,存在两个问题,第一是延迟太长,无法满足大型活动等场景下的监控、报警、运营分析的需求;第二是这些日志经常存储在服务提供商处,不容易进行处理和消费;第三是日志也会有不定期的删除,例如常见的服务商一般提供一个月的日志,之前的记录就不会保存了。
那么针对于需要对CDN的日志进行实时分析、处理及归档等操作的用户来说,就会出现对于线上问题排查的不及时、CDN服务性能无法实时把握,遇到问题的灾备方案对客户端有感等问题。
综上所述,更实时地、详细地关注和分析日志的需求逐渐显露,但是普通用户对CDN日志进行实时、离线分析又并不容易,需要付出搭建、运维和管理成本,为了完成需求,有时还需要编写不少代码,但最终并不一定能得到很好的效果。整个CDN实时日志涉及的环节多,对服务质量也有严苛的要求,技术挑战比较大。
那么面对以上需求,阿里云CDN可以如何应对?为运维、技术人员提供更便捷、更智能、更实时有效地解决方案呢?
近期,阿里云CDN上线了实时日志服务,将日志服务(SLS)的能力打通,将CDN采集的实时日志,在小于60秒的时间内投递至日志服务,进行实时、交互式分析和报表呈现,提高数据的决策能力,助力用户将业务推向一个新的高度。

为了让用户们更全面地了解CDN实时日志服务,并对业务赋能,在12月26日下午三点,云栖社区将举办CDN实时日志服务的在线直播发布会,首次进行全面、深度的产品解读。
发布会议程详情
15:00-15:25:《CDN实时日志技术解读》
CDN实时日志可以解决用户无数据、多种分析以及可视化等等需求,这个产品背后的技术挑战究竟有多大?它的系统架构是怎样演进的?阿里云在进行全球化服务的过程中,日志系统支持了监控、调度、计费及数据分析等多业务,那么全球海量日志采集的难点是什么?技术亮点是什么?它的性能、成本又是如何衡量?
分享嘉宾:阿里云高级技术专家 姜晓东

15:25-15:50:《阿里云CDN产品与实时日志业务详解》
阿里云CDN从2014年商业化至今,已经拥有1500+全球节点和120T带宽储备,今天CDN实时日志可以从全球多个区域、数万节点实时采集日志,通常延时不超过60秒,确保日志的实时价值。那么CDN实时日志源起何处?它解决了用户怎样的问题?拥有怎么样的特性?适合应用在什么场景中?有哪些客户已经在使用并且他们的使用体验如何?以及如何在控制台中开通及操作CDN实时日志?本次分享将会详细介绍。
分享嘉宾:阿里云CDN高级产品经理 容蓓

15:50-16:00:《优惠活动与提问互动》
点击进入直播间传送门
CDN实时日志服务介绍

作为互联网流量入口,CDN日志大数据你该怎么玩?的更多相关文章
- "大中台、小前台”新架构下,阿里大数据接下来怎么玩? (2016-01-05 11:39:50)
"大中台.小前台”新架构下,阿里大数据接下来怎么玩?_炬鼎力_新浪博客 http://blog.sina.com.cn/s/blog_1427354e00102vzyq.html " ...
- 分析 BAT 互联网巨头在大数据方向布局及大数据未来发展趋势
> 风起云涌的大数据战场上,早已迎百花齐放繁荣盛景,各大企业加速跑向"大数据时代".而我们作为大数据的践行者,在这个"多智时代"如何才能跟上大数据的潮流, ...
- chinacloud大数据新闻
2015年大数据发展八大趋势 (0 篇回复) “数据很丰满,信息很骨感”:Sight Machine想用大数据的方法,打碎两者间的屏障 (0 篇回复) 百度携大数据"圈地" ...
- 年度钜献,108个大数据文档PDF开放下载
1.大数据的开放式创新——吴甘沙 相关阅读:[PPT]吴甘沙:让不同领域的数据真正流动.融合起来,才能释放大数据的价值 下载:大数据的开放式创新——吴甘沙.pdf 2.微软严治庆——让大数据为每个人服 ...
- 大数据时代,Wyn Enterprise和您一起探讨CIO的困境和出路 ZT
这是一篇知识分享帖,如果您致力于成为一名CIO,希望您能够阅读完,信息虽然简略,但我们依然希望可以帮到您. CIO:首席信息官 CIO是干什么的 一.经典的CIO主要负责什么 1.IT战略规划.IT预 ...
- 基于Hadoop的大数据平台实施记——整体架构设计[转]
http://blog.csdn.net/jacktan/article/details/9200979 大数据的热度在持续的升温,继云计算之后大数据成为又一大众所追捧的新星.我们暂不去讨论大数据到底 ...
- 基于Hadoop的大数据平台实施记——整体架构设计
大数据的热度在持续的升温,继云计算之后大数据成为又一大众所追捧的新星.我们暂不去讨论大数据到底是否适用于您的组织,至少在互联网上已经被吹嘘成无所不能的超级战舰.好像一夜之间我们就从互联网时代跳跃进了大 ...
- AI时代,还不了解大数据?
如果要问最近几年,IT行业哪个技术方向最火?一定属于ABC,即AI + Big Data + Cloud,也就是人工智能.大数据和云计算. 这几年,随着互联网大潮走向低谷,同时传统企业纷纷进行数字化转 ...
- 大数据为什么要选择Spark
大数据为什么要选择Spark Spark是一个基于内存计算的开源集群计算系统,目的是更快速的进行数据分析. Spark由加州伯克利大学AMP实验室Matei为主的小团队使用Scala开发开发,其核心部 ...
随机推荐
- linux开放指定端口命令
方式一 CentOS: 1.开启防火墙 systemctl start firewalld 2.开放指定端口 firewall-cmd --zone=public --add-p ...
- Dubbox离线约束地址
地址: http://code.alibabatech.com/schema/dubbo/dubbo.xsd
- python入门学习一
本文用来记录学习python过程中所遇到的不同的或者记忆不清的一些定义. 注释 注释用# #此处是注释 n = 123 f = 456 不转义 Python中r‘ ’表示字符串默认不转义 print ...
- c# 通过地址下载流然后保存文件到本地
1.下载文件并保存文件到本地 private void GetFileFromNetUrl(string url) { try { System.Net.WebRequest req = System ...
- 什么是平衡树B-Tree?【转】
转载自:https://www.cnblogs.com/dongguacai/p/7239599.html#commentform B-Tree就是我们常说的B树,一定不要读成B减树,否则就很丢人了. ...
- 61. File类
IO技术主要作用是解决设备与设备之间的数据传输问题.比如:硬盘---->内存 内存的数据---->硬盘上 把硬盘的数据------>内存中 IO技术的应用场景: ...
- ECMAScript6 Promise
Promise在Javascript中早就已经实现,在ECMAScript6中正式加入到标准.那么Promise到底是干什么的?怎么用? 一.Promise介绍 Promise是一个对象,用来传递异步 ...
- MySQL常用操作2
MySQL常用操作2 判断函数 IF(expr, value1, value2) -- 如果表达式expr为true,则返回value1,否则返回value2 IFNULL(value1, val ...
- Magento用SQL语句开发篇
有时为了调试magento,需要获取当前的查询sql语句,在magento中获取SQL语句,这里我们通过$collection->getSelectSql(true)来调试sql 1 $coll ...
- git——创建分支后,切换分支报错(error: pathspec 'master' did not match any file(s) known to git)
error: pathspec 'master' did not match any file(s) known to git 解决办法: 1.查看分支 git branch -a 2.获取所有分支 ...