什么是MaxCompute?

众所周知,MaxCompute是阿里云推出的承载EB级的数据存储能力,百PB级的单日计算能力,公共云覆盖国内外十几个国家和地区,专有云包含城市大脑在内部署超过100+套的阿里巴巴的统一计算平台。官方地址:https://www.aliyun.com/product/odps

MaxCompute是真正为大数据而生的企业级云计算产品,其核心是一项基础服务(PaaS),用于对海量数据进行高性能的分析处理,数据规模越大,计算性能越卓越,在大规模批量计算下性能远超Hadoop Hive,甚至超越了Spark、Impala;

单纯从技术上来看,MaxCompute提供了一个在云端的SQL、MapReduce、Graph服务,提供对海量数据的批量计算能力;

另外,MaxCompute是基于Serverless架构实现的服务,从成本最优化、运维便利性、业务敏捷度三个方面,帮助企业升维核心竞争力;

很多开发者都想试用一下MaxCompute,但又担心这么一款旗舰产品价格不菲,今天小编带大家做一次免费试用;

准备工作

1、提前一周申请10元代金券,代金券申请地址:https://i.aliyun.com/inviteapply?agent_id=183

2、有开发者会问到,10元代金券能干什么?买台最低配置的虚机测试还得上几百元,更别提大数据产品了。首先带大家了解一下MaxCompute计费规则:MaxCompute每月每1GB数据的存储费用是2分钱,每月每处理1GB数据SQL收费0.3元;配套的离线/实时数据同步工具如Datax、Datahub免费,提供大数据开发调度、数据质量、血缘管理的Dataworks也免费。

3、假如你有3G数据,我们看看是如何花费10元;

3.1、3G存储,5张表,每张表平均600M,MaxCompute整体压缩后约1G数据,每天存储开销2分钱;

3.2、从本地上传到MaxCompute,不收费用;

3.3、设置一个Pipeline,每天跑5个SQL

一类SQL是简单查询-单表查询,每次SQL查询开销0.2元

一类SQL是复杂查询-Join 2张表,每次SQL查询开销1.2元;

我们完成上述任务总共需要3.2元,计算方法就是:2次复杂SQL*1.2元+3次简单SQL*0.2+存储0.02分钱;同样任务我们可以通过Dataworks配置周期调度,跑三天,花销9.4元;

4、所以,我们可以通过领用10元代金券,免费完成很多数据任务。

操作流程

开通MaxCompute后付费服务->通过Dataworks创建Project->通过tunnel上传你的数据集->通过SQL运行你的Hello World。

1、开通MaxCompute后付费服务

https://help.aliyun.com/document_detail/58226.html

2、通过Dataworks创建Project

https://help.aliyun.com/document_detail/27815.html

3、通过tunnel上传你的数据集

3.1、安装并配置客户端

https://help.aliyun.com/document_detail/27804.html

3.2、创建表

https://help.aliyun.com/document_detail/27808.html

3.3、导入数据或使用公开数据集

导入数据 https://help.aliyun.com/document_detail/27809.html

使用数据集 https://yq.aliyun.com/articles/89763  注意:有些数据集上T,先通过desc 表名获取数据大小,切勿全表扫描;

4、通过SQL运行你的Hello World

https://help.aliyun.com/document_detail/27810.html

小结

通过免费试用,开发者可以感受到将所有精力都放在业务上,节省了自建平台在学习成本、开发成本、管理成本、投入机房资源和运维成本的总成本,应用开发效率有很大提高。

免费带你体验阿里巴巴旗舰大数据计算产品MaxCompute的更多相关文章

  1. 王坚十年前的坚持,才有了今天世界顶级大数据计算平台MaxCompute

    如果说十年前,王坚创立阿里云让云计算在国内得到了普及,那么王坚带领团队自主研发的大数据计算平台MaxCompute则推动大数据技术向前跨越了一大步. 数据是企业的核心资产,但十年前阿里巴巴的算力已经无 ...

  2. 揭秘阿里云EB级大数据计算引擎MaxCompute

    日前,全球权威咨询与服务机构Forrester发布了<The Forrester WaveTM: Cloud Data Warehouse, Q4 2018>报告.这是Forrester ...

  3. 什么是大数据计算服务MaxCompute

    大数据计算服务(MaxCompute,原名ODPS)是一种快速.完全托管的EB级数据仓库解决方案. 当今社会数据收集手段不断丰富,行业数据大量积累,数据规模已增长到了传统软件行业无法承载的海量数据(百 ...

  4. 阿里巴巴飞天大数据架构体系与Hadoop生态系统

    很多人问阿里的飞天大数据平台.云梯2.MaxCompute.实时计算到底是什么,和自建Hadoop平台有什么区别. 先说Hadoop 什么是Hadoop? Hadoop是一个开源.高可靠.可扩展的分布 ...

  5. Apache Flink 为什么能够成为新一代大数据计算引擎?

    众所周知,Apache Flink(以下简称 Flink)最早诞生于欧洲,2014 年由其创始团队捐赠给 Apache 基金会.如同其他诞生之初的项目,它新鲜,它开源,它适应了快速转的世界中更重视的速 ...

  6. 大数据计算框架Hadoop, Spark和MPI

    转自:https://www.cnblogs.com/reed/p/7730338.html 今天做题,其中一道是 请简要描述一下Hadoop, Spark, MPI三种计算框架的特点以及分别适用于什 ...

  7. 大数据计算的基石——MapReduce

    MapReduce Google File System提供了大数据存储的方案,这也为后来HDFS提供了理论依据,但是在大数据存储之上的大数据计算则不得不提到MapReduce. 虽然现在通过框架的不 ...

  8. 大数据计算平台Spark内核解读

    1.Spark介绍 Spark是起源于美国加州大学伯克利分校AMPLab的大数据计算平台,在2010年开源,目前是Apache软件基金会的顶级项目.随着 Spark在大数据计算领域的暂露头角,越来越多 ...

  9. 大数据计算:如何仅用1.5KB内存为十亿对象计数

    大数据计算:如何仅用1.5KB内存为十亿对象计数  Big Data Counting: How To Count A Billion Distinct Objects Using Only 1.5K ...

随机推荐

  1. Linux编程获取本机IP地址

    使用函数getifaddrs来枚举网卡IP,当中使用到的结构体例如以下所看到的: struct ifaddrs { struct ifaddrs *ifa_next; /* Next item in ...

  2. python接口自动化(delete请求)

    python接口自动化(delete请求) 一.delete请求的目的:删除资源 二.应用 导包:import requests 调用delete方法:requests.delete(url) 获取响 ...

  3. openssl编译方法

    受不了了,终于编译成功了openssl,写一下编译方法吧 准备: 0:要编译openssl,必不可少的是代码,去下载 https://www.openssl.org/source/ 1:要有一个VS系 ...

  4. linux每日命令(3):which命令

    这个命令我也神佑体会它的用处,在linux要查找某个文件,但不知道放在哪里了,可以使用下面的一些命令来搜索: which     查看可执行文件的位置. whereis 查看文件的位置. locate ...

  5. jsonp的实现原理

    jsonp的实现原理 由于浏览器的安全性(同源策略)限制,不允许AJAX访问协议不同或域名不同或端口号不同的数据接口: 可以通过动态创建script标签的方式,把script标签的src属性指向数据接 ...

  6. 《提高c++性能的编程技术》读书笔记

    一个程序的执行效率是取决于改程序翻译成汇编语言之后的执行的机器指令的条数.而每一个机器指令的执行的周期是一定的.C语言和C++都是高于汇编语言的高级语言,其中,C语言源代码与其相应的机器指不是完全同一 ...

  7. hdu5421 Victor and String 回文树(前后插入)

    题目传送门 题意:对一个字符串支持四种操作,前插入字符,后插入字符,询问本质不同的回文串数量和所有回文串的数量. 思路: 就是在普通回文树的基础上,维护suf(最长回文后缀)的同时再维护一个pre(最 ...

  8. vue之自定义插件

    1.插件的作用 插件通常会为 Vue 添加全局功能,一般是添加全局方法/全局指令/过滤器等 Vue 插件有一个公开方法 install ,通过 install 方法给 Vue 添加全局功能 通过全局方 ...

  9. Flink开发-IDEA scala开发环境搭建

    现在大数据相关服务,越来越倾向于使用scala语言,scala函数式编程的优势我不多赘述.最明显的一个优点,代码简洁.看个WordCount实现对比: Java版WordCount Execution ...

  10. 安装percona-toolkit.rpm时候报错:perl(Time::HiRes) is needed by percona-toolkit-2.2.16-1.noarch

    1.安装percona-toolkit.rpm时候报错: warning: percona-toolkit.rpm: Header V4 DSA/SHA1 Signature, key ID cd2e ...