https://help.aliyun.com/document_detail/34615.html?spm=a2c4g.11186623.6.688.jVxTMW…

MaxCompute 是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心和阿里云大数据的基础服务.去年MaxCompute 做了哪些工作,这些工作背后的原因是什么?大数据市场进入普惠+红海的新阶段,如何与生态发展共赢?人工智能进入井喷阶段,如何支持与借力?本文从过去一年的总结,核心技术概览,以及每条技术线路未来展望等几个方面做一个概述. BigData 概念在上世纪90年代被提出,随 Google 的3篇经典论文(GFS,BigTable,MapReduce)奠基,已经发展…

很多刚初次接触MaxCompute的用户,面对繁多的产品文档内容以及社区文章,往往很难快速.全面了解MaxCompute产品全貌.同时,很多拥有大数据开发经验的开发者,也希望能够结合自身的背景知识,将MaxCompute产品能力与开源项目.商业软件之间建立某种关联和映射,以快速寻找或判断MaxCompute是否满足自身的需要,并结合相关经验更轻松地学习和使用产品. 本文将站在一个更宏观的视角来分主题地介绍MaxCompute产品,以期读者能够通过本文快速获取对MaxCompute产品的认识. 概…

2019年1月18日,由阿里巴巴 MaxCompute开发者社区和阿里云栖社区联合主办的“阿里云栖开发者沙龙大数据技术专场”走近北京联合大学,本次技术沙龙上,高德数据技术专家苗翌辰为大家分享了高德如何应用MaxCompute来管理数据架构,开发易用.高效以及弹性的高德应用,为用户提供更优质的出行服务. 以下内容根据演讲视频以及PPT整理而成 一.高德的业务和数据 地图描绘需要很多支撑数据,包括现实中的道路信息.路形以及路况等.下面的轨迹热力图展示了高德地图显示的北京联合大学的周边路况,描绘了点.…

MaxCompute全套攻略:https://blog.csdn.net/qq_35394891/article/details/82943894 [2019年大数据福利推荐]MaxCompute教程.案例视频合集汇总(持续更新20190121):https://yq.aliyun.com/articles/686158 MaxCompute学习手册:https://help.aliyun.com/product/27797.html?spm=a2c4g.11186623.6.540.40273…

参考消息网3月19日报道 日前,全球权威调研机构佛瑞斯特研究公司(Forrester)发布<2018年一季度云端数据仓库>报告.报告对大数据服务商的主要功能.区域表现.细分市场和典型客户等进行了全面评估,最终AWS.阿里云.谷歌.微软四大巨头杀入全球一线阵营.阿里云成为唯一入选的中国科技公司. Forrester报告被认为是全球各大公司CIO选择服务商的指导手册,在行业内极具权威性.云端的大数据服务凭借安全.弹性伸缩.部署速度快.成本低等特点,已经成为近年来的发展趋势.与之相应的,本地部署的大…

本文是基于本人对MaxCompute产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文.希望对大家有所帮助. 问题一.DataStudio中是否可以通过shell节点调取MaxCompute sql语句? 不可以的,Shell节点支持标准Shell语法,不支持交互性语法.如果任务较多,可以使用ODPS SQL节点来完成任务的执行.关于DataStudio的其他介绍请参考官方文档: https://help.aliyun.com/document_detail/74423.html 问题…

本文是基于本人对MaxCompute产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文.希望对大家有所帮助. 问题一.如何查看information_schema的tables? 在使用ODPS建表时,有可能会建出几千张表,那我们寻找需要的表时就需要知道表名称,可以在数据地图中查看表,也可以使用Pyodps批量获取表名称.具体可参考文档:https://help.aliyun.com/document_detail/90412.html 问题二.不小心drop删除表可以恢复吗? 不可以…

什么是MaxCompute? 众所周知,MaxCompute是阿里云推出的承载EB级的数据存储能力,百PB级的单日计算能力,公共云覆盖国内外十几个国家和地区,专有云包含城市大脑在内部署超过100+套的阿里巴巴的统一计算平台.官方地址:https://www.aliyun.com/product/odps​ MaxCompute是真正为大数据而生的企业级云计算产品,其核心是一项基础服务(PaaS),用于对海量数据进行高性能的分析处理,数据规模越大,计算性能越卓越,在大规模批量计算下性能远超Hado…

本文是基于对MaxCompute产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文.希望对大家有所帮助. 问题一.通过数据源数据增量同步后,如何查看某一条数据具体被同步到MaxCompute中的时间?不支持,查看不了,可以看表元数据的LastModifiedTime时间,但具体某个记录看不到时间. 问题二.开发的数据处理脚本能否在不同地区项目空间迁移?跨项目克隆只能同账号同region,所以不同地区之间可以使用项目备份恢复来完成.可参考官方文档操作:https://help.aliyu…