云原生的巨浪正在席卷全球的软件产业,包括开源和商业软件.Apache Kylin 正在为此而积极准备着:基于新的计算和存储引擎,即将发布的 Kylin 4.0 将实现真正的计算和存储分离,减小运维难度,降低资源成本. 越来越多的企业也正在从本地部署的数仓方案转向基于云的解决方案.由于无可取代的弹性扩展性.容灾性.低 TCO.业务敏捷性和几乎无限量的存储空间,基于云平台的数据仓库技术正在逐渐说服更多人:拥抱云原生才是数据仓库技术以及相关数据分析技术的未来. 面对从本地到上云的变革,企业需要考虑的是…
技术控快上车啦秋天的第一场活动一起来收获技术干货吧! 主题: 云原生基础设施建设的现在及未来时间: 2021 年 9 月 11 日 (周六) 13:30-17:00活动地点: 四川省成都市蚂蚁 C 空间 101 猎户座报名方式: 扫描下方海报中 二维码 ,即可报名.​ Erda系列线下 Meetup 成都站由 SOFAStack & Erda 联合举办​ 本次分享将邀请来自蚂蚁集团和 端点Erda 的四位专家,分别带来云原生的四个专题分享,分别是:​ <从云原生视角,解读 Erda 微服务观…
在武汉,你离这场云原生盛会,只有一步之遥 华为云.百度.斗鱼.海云基因,五位重量级专家 K8s调度.深度学习平台.斗鱼实战.基因大数据-五个干货议题 日,与您相约Cloud Native Days China 入场券限量免费派送中- 点击→ 这里,免费领取云原生Meetup入场券…
[编者的话]“人间四月芳菲尽,山寺桃花始盛开.” 越来越多专门给 Kubernetes 做应用发布的工具开始缤纷呈现,帮助大家管理和发布不断增多的 Kubernetes 应用.在做技术选型的时候,我们需要给业务选择一个最好的工具.最稳的底座.那我们又该如何比较和衡量这些工具的呢?在这篇文章中阿里一线工程师给大家分享自己独特的体验.洗尽铅华,一起品味这“山寺桃花”. 背景 近年来,伴随着云原生社区(CNCF Community)的迅猛发展,越来越多的应用跑在了 Kubernetes 上.慢慢地,大…
直播来啦!本次云原生学院邀请到腾讯云 CODING DevOps 后端工程师王炜为大家分享<开源的云原生开发环境 -- Nocalhost>. 直播信息 讲师:王炜 - 腾讯云 CODING DevOps 后端工程师 时间:1 月 14 日(周四)晚 20:00 - 21:00 直播间:https://live.bilibili.com/22230973 提问地址: https://docs.qq.com/doc/DR1RtdExXUXFQVUdm? 也可扫描下方二维码向导师提问 分享大纲 1…
以绝对优势立足:从CDN和云存储来聊聊云生态的崛起 前面几期文章我们介绍了混合云模式,以及面向应用层的云架构解决方案的Spring Cloud.接下来,我们就以蘑菇街的两个具体案例,来分享一下基于混合云模式的具体实践. 今天,我们先一起看一下我们最为熟悉的CDN和云存储建设. CDN和云存储 我们之前提到,CDN应该算是最早期.最典型的公有云服务,如果我们在业务上用到了CDN服务,其实就已经算是在实践混合云模式了. 蘑菇街作为ToC的电商业务,自然会有大量的图片访问需求,其中尤以商品图片为最.为…
刚满 2 岁的微信小程序,正给我们带来一种全新轻便的生活方式. 内测时的青涩还历历在目,到现在,小程序生态已日渐成熟.超过 150 万开发者在这里找到了自己的新天地,打磨出超过 100 万个小程序. 每个小程序的诞生,都离不开背后开发者的勤思苦虑.这期间,WeGeek 一直相伴在旁,为开发者提供丰富的小程序案例分析.能力发布和活动资讯等服务,帮助开发者解决一个个技术难题,也见证了整个生态的成长和活跃. 作为开发者的伙伴,WeGeek 一直希望将最前沿的小程序动态,和最实用的技术经验带给大家.而…
最近,为了项目接触了一个很火的前端框架Angular.js,下面就Angular做一个简介吧(大牛请绕步,只针对没有接触过angular的人). Angular.js是一款精简的前端框架,如果要追溯它的起源,它是2009年Google Feedback项目团队的一个成员Misko Hevery,在两周内重写的一个开源库,把原先的17000行前端代码精简到1500行!你怕不怕? AngularJS有着诸多特性,最为核心的是:MVVM.模块化.自动化双向数据绑定.语义化标签.依赖注入等等.如果你是一…
EasyNVS - EasyNVR云端集中管理服务 EasyNVS云管理平台是一套专门用于集中化管理EasyNVR 的解决方案. EasyNVR 采用主动注册的方式接入到 EasyNVS, 再由 EasyNVS 云管理平台进行统一的视频能力输出, 并配套提供一整套的云端设备可视化运维功能, 方便于用户进行云端的视频大数据处理. 支持 EasyNVR v3.2 及以上版本 下载 安装包下载 在线演示 在线API 端口使用 TCP 端口 : 10810(HTTP), 10812(接入认证端口) UD…
云服务器可以为直播带货APP源码提供弹性计算以及更高的运行效率,避免资源浪费,随着直播带货APP源码业务需求的变化,可以实时扩展或缩减计算资源.CVM支持按实际使用的资源计费,可以节约计算成本. 一.功能全面 1.多地区可用:云服务器在中国大陆地域覆盖华南. 直播带货APP源码 华东.华北.西南四个地域.在境外节点覆盖东南亚.亚太.北美.美西及欧洲五个地域.开发直播带货APP源码可以真正做到无地界限制,为不同国家的直播开发者提供硬性的技术保障. 2.多机型配置: (1)标准型(适合中小型Web应…
作者 | 陈俊.张晓宇.徐迪 业界要闻 KubeCon 2019 北美会议召开 业界最隆重的盛会 KubeCon+CloudNativeCon 今年在圣地亚哥举办,超过 12000 名参会者以及 100 多个云原生供应商出席了这次大会.本次大会中阿里巴巴经济体共有 8 个 Topic 亮相. 相关 Topic Fobes 挑选的 10 大最有趣官宣 KubeCon 北美 2019 年 PPT 合集分享 上游重要进展 1.Kubernetes 拟加入对 Cgroup v2 的支持 Kubernet…
云原生应用,是指符合“云原生”理念的应用开发与交付模式,这是当前在云时代最受欢迎的应用开发最佳实践. 在现今的云原生生态当中,已经有很多成熟的开源软件被制作成了 Helm Charts,使得用户可以非常方便的部署使用,比如 Nginx,Apache.ElasticSearch.Redis 等等.不过,出于众所周知的原因,在开放云原生应用中心 App hub(Helm Charts 中国站) https://developer.aliyun.com/hub 发布之前,国内用户并没有办法通过 hel…
0 引言 最近项目中用到了基于PCL开发的基于平面的点云和CAD模型的配准算法,点云平面提取采用的算法如下. 1 基于PCL的点云平面分割拟合算法 2 参数及其意义介绍 (1)点云下采样 1. 参数:leafsize 2. 意义:Voxel Grid的leafsize参数,物理意义是下采样网格的大小,直接影响处理后点云密集程度,并对后期各种算法的处理速度产生直接影响. 3. 值越大,点云密度越低,处理速度越快:值越小,点云密度越高,处理速度越慢.通常保持这个值,使得其他的与点数有关的参数可以比较…
下周六,深圳,阔别已久的线下技术沙龙要和你见面啦! 现场有Rancher Labs研发经理demo刚刚发布的Rancher 2.3中的Istio.Windows容器.集群模板等功能及使用,还有k3s首次线下workshop,由Rancher Labs资深架构师带你一起玩转k3s!还有长城证券的运维负责人分享数字化浪潮下传统金融IT的转型. 访问链接即可了解详情及报名啦! 诸如容器.Kubernetes等云原生架构和技术的成熟推动了服务网格架构的极速增长以及广泛采用.尽管云原生环境可以为企业带来一…
本周六阿里云 Serverless Developer Meetup 即将亮相杭州 ​ 时间:7.24 本周六 13:30 - 17:30 地点:杭州市良睦路 999 号乐佳国际 1-3-7 特洛伊星 ​ 这一次我们邀请了阿里云.初创互联网公司.开源中国 Gitee 的技术专家和独立开发者为你带来: ​ Serverless Devs 全新功能发布,像淘宝一样享受 Serverless 初创互联网公司 Serverless 落地和踩坑全记录 架构师视角:Serverless 应用典型场景及案例剖…
各位 DolphinScheduler 和 Pulsar 社区的小伙伴们,Apache DolphinScheduler x Pulsar 在线 Meetup 来啦! 导语 大数据任务调度.消息流的订阅与分发都是大数据建设中极其重要的 "基础设施".高稳定高可用是对基础设施的基本要求,在这样的背景下,涌现了很多优秀的开源项目. 以 Apache 软件基金会下的开源项目 Apache DolphinScheduler(Incubating).Apache Pulsar 为代表,Dolph…
由阿里技术生态联合 CNCF 官方共同出品的 Kubernetes & Cloud Native Meetup 将在 8 月 31 日来到深圳.届时,阿里云.蚂蚁金服高级技术专家将携手来自国内知名容器开发专家 ,为你带来 Kubernetes 及 Cloud Native 技术的实践与落地经验. 活动亮点: 阿里集团.阿里云.蚂蚁金服等多位专家联合出品: 阿里云原生生态分享:OpenKruise, Serverless, 云文件存储,PaaS 平台云原生演进: 国内知名厂商带来云原生落地案例分享…
​ 编辑切换为居中 添加图片注释,不超过 140 字(可选)   大数据是一种规模大到在获取.存储.管理.分析方面大大超出了传统数据库软件工具能力范围的数据集合,而大数据作为企业运转的基础,只有经过提供数据采集.存储.计算.分析.调度.管理.治理等过程,才能为企业所用.   而海豚调度作为数据调度工具的先行者,深刻理解调度工具缺乏可视化.拓展性差.无法去中心化.稳定性差等痛点问题,能够针对行业工具痛点精准提供解决方案.   在整个大数据时代下,从互联网出行到乳业龙头企业,越来越多的企业随着业务发…
1.Apache Kylin是什么? 在现在的大数据时代,越来越多的企业开始使用Hadoop管理数据,但是现有的业务分析工具(如Tableau,Microstrategy等)往往存在很大的局限,如难以水平扩展.无法处理超大规模数据.缺少对Hadoop的支持:而利用Hadoop做数据分析依然存在诸多障碍,例如大多数分析师只习惯使用SQL,Hadoop难以实现快速交互式查询等等.神兽Apache Kylin就是为了解决这些问题而设计的. Apache Kylin,中文名麒(shen)麟(shou)…
2018年2月16日,Dubbo 加入 Apache 基金会孵化器,在随后的那个夏天,我们开始在全国(北京.上海.深圳.成都.杭州)和社区的用户们见面.认识.交个朋友,将社区的最新动态.Dubbo 的发展规划.和一些用户的最佳实践进行分享,目的是让大家在使用和共建 Dubbo 的过程中,更有参与感. 2019年,我们发现,参与 Dubbo Meetup 报名和来到现场的人越来越多,社区的活跃度也越来越高,所以我们将 Dubbo Meetup 升级为 Dubbo Tech Day(Dubbo开发者…
在近期的 Apache Kylin × Apache Hudi Meetup直播上,Apache Kylin PMC Chair 史少锋和 Kyligence 解决方案工程师刘永恒就 Hudi + Kylin 的准实时数仓实现进行了介绍与演示.下文是分享现场的回顾. 我的分享主题是<基于 Hudi 和 Kylin 构建准实时.高性能数据仓库>,除了讲义介绍,还安排了 Demo 实操环节.下面是今天的日程: 01 数据库.数据仓库 先从基本概念开始.我们都知道数据库和数据仓库,这两个概念都已经非…
问题导读:1.数据库.数据仓库如何理解?2.数据湖有什么用途?解决什么问题?3.数据仓库的加载链路如何实现?4.Hudi新一代数据湖项目有什么优势? 在近期的 Apache Kylin × Apache Hudi Meetup 直播上,Apache Kylin PMC Chair 史少锋和 Kyligence 解决方案工程师刘永恒就 Hudi + Kylin 的准实时数仓实现进行了介绍与演示.下文是分享现场的回顾. 我的分享主题是<基于 Hudi 和 Kylin 构建准实时.高性能数据仓库>,…
​ ​ Kube-OVN 社区线上Meetup 直播预约通道已开启! 活动时间 2021年8月26日(周四)19:00-20:30 活动介绍 8月26日,Kube-OVN 社区 Meetup 将通过线上直播的方式与大家见面.届时,Kube-OVN项目发起人刘梦馨将与大家分享Kube-OVN1.8新版本特性预览及1.9版本功能规划,欢迎大家通过海报扫码预约进入线上交流群,参与讨论即有机会获得Kube-OVN社区经典款T恤. 讲师招募 现面向所有社区成员征集分享嘉宾, 与Kube-OVN 技术栈相关…
在软件开发领域有一个流行的原则:Don't Repeat Yourself(DRY),翻译过来就是:不要重复造轮子.而开源项目最基本的目的,其实就是为了不让大家重复造轮子. 尤其是在大数据这样一个高速发展的领域,现在各类企业都有使用大量的开源软件,当发现开源项目不能满足场景业务需求的时候,越来越多的开发者也开始关注技术生态的"外延",结合各类场景打磨企业适用的技术架构.在此背景下,技术软件如何让更多用户能**"轻松上手"."简单应用"**就显得更…
当今许多企业都有着技术架构的DataOps程度不够.二次开发成本高.迁移成本高.集群部署混乱等情况,团队在技术选型之后发现并不适合自己的需求,但是迁移成本和难度又比较大,甚至前团队还留下了不少坑,企业自有的开发能力又比较有限,导致后面的小伙伴上手难度高体验差. 俗话说"工具选得好,下班回家早:调度用得对,半夜安心睡",面对各种难点和痛点: 如何有效地评估数据调度工具? 如何平滑的过渡到Apache DolphinScheduler? 如何稳定高效的对已有的工具升级改造? 这几个问题是改…
随着互联网技术和信息技术的发展,信息的数据化产生了许多无法用常规工具量化.处理和捕捉的数字信息.面对多元的数据类型,海量的信息价值,如何有效地对大数据进行挖掘分析,对大数据工作流进行调度,是保障企业大数据任务高效运行的基础. 有了数据平台和数据仓库,选择什么系统来调度和管理数仓任务就显得尤为重要.Apache DolphinScheduler作为新一代的大数据任务调度系统,致力于让调度变得更加容易.身为一款专门针对于大数据平台的工作调度系统,具有本土化风格和多样化的部署方式.同时,Apache…
点击上方 蓝字关注我们 社区的小伙伴们,Apache DolphinScheduler Meetup 2021 如约而至,就在明天,等你来玩! 在此次 Meetup 线上直播中,不仅将有来自 Bigo.有赞.平安养老险,优秀开源项目 SeaTunnel(原名 Waterdrop)和  ApacheDolphinScheduler 的大数据领专家/工程师现场分享一线前沿实践经验,还有丰富的奖品等你来拿! 议题&日程 徐帅 BIGO计算平台负责人 演讲时间:14:00-14:35 演讲题目:BIGO…
点击上方 蓝字关注我们 社区的小伙伴们,经过精心筹备,我们很高兴地宣布,Apache DolphinScheduler Meetup 2021 将于 2021 年 11 月 27 日到来! 在 Meetup 上,来自 DolphinScheduler 社区的积极贡献者和深度用户将带来关于 DolphinScheduler 的最新进展和一线用户实践分享.也许你是对 DolphinScheduler 抱有兴趣和好奇的小伙伴,也许你在生产环境中遇到了难以解决的困难,都可以来到这里,与贡献者交流接触,寻…
阿里云 视频直播 配置 及 PHP-SDK 接入教程准备工作域名管理配置鉴权地址生成器及DEMO演示-熟悉鉴权接入SDK推流回调的配置阿里云 视频直播 配置 及 PHP-SDK 接入教程 个人感觉,阿里的文档比微信的要坑很多…微信最多是有些比较重要的东西放到比较不起眼.比较难发现的地方.阿里的文档就是要么就是sdk已经更新了,但是文档还没更新,导致文档与SDK不匹配.在关键点卡我一下…要么是同样的功能有好几个版本的SDK以及文档,却不告诉你哪个是最新的…吐槽结束~ 准备工作 1.最重要的,先仔细…
Apache Kylin是一个开源的分布式分析引擎.完全由eBay Inc.中国团队开发 并贡献至开源社区.提供Hadoop之上的SQL查询接口及多维分析(MOLAP)能力以 支持大规模数据能在亚秒内查询巨大的Hive表(十亿百亿的海量数据). Apache Kylin社区发展 大数据分析面临的挑战 Huge volume data Table scan Big table joins Data shuffling Analysis on different granularity Runtim…