Scala实战高手****第5课:零基础实战Scala函数式编程及Spark源码解析
Scala函数式编程
------------------------------------------------------------------------------------------------------------------------
/**
* 函数可以被简单的被认为是包裹了一条或几条语句的代码体,
* 该代码体接收若干参数,经过代码体处理后返回结果,
* 刑如数学中的f(x) = x + 1
*
* 在Scal中函数式一等公民,可以像变量一样被传递,被赋值,同时
* 函数可以赋值给变量,变量也可以赋值给函数,之所以可以是这样
* 原因在与函数背后是类和对象,也就是说在运行的时候函数其实是一个变量
* 当然,背后的类是Scala语言帮我们生成的,且可以天然的被序列号和反序列化,
* 这个意义是非常重要的:
* 意义1:可以天然的序列化和反序列化的直接好处就是函数可以在分布式系统上传递
* 意义2:因为函数背后是类和对象,所以可以和普通变量完全一样的应用在任何
* 普通变量可以运用的地方,包括作为参数传递,作为返回值,被变量赋值和赋值给变量等
*
* 补充:整个IT编程技术的发展史,其实就是一部封装史:
* 1.Function时代:在C语言中提供了函数的概念,用函数把若干条语句进行封装和复用
* 2.Class时代:在C++和Java等语言中提供给了类和对象,把数据和处理数据业务逻辑封装起来
* 3.框架时代:把数据、代码和驱动引擎封装起来,是过去10年和未来10年IT技术的核心
*
* 关于函数初级入门的几个要点:
* 1.def关键字来定义函数
* 2.函数会自动进行类型推导来确定函数返回值的类型,如果函数名称和函数体之间没有等于号
* 的话则类型推导失效,此时函数的类型是Unit
* 3.函数的参数可以使函数
* 4.如果在函数中无法推导出类型的函数,则必须声明具体的类型,例如下面的fibnacci
* 5.函数的参数可以有默认值,这样在调用函数的时候如果不想改变默认值的话就直接不传递
* 该参数而直接使用默认值即可,这在实际的编程中意义重大,尤其实在Spark等框架中,因为
* 框架一般都有自己的默认配置和实现,此时我们就可以非常好的使用默认值
* 6.我们可以基于函数的参数的名称来调整函数的传递参数的顺序,重点在于为什么可以这么做呢?
* 原因:在于函数背后其实是类,其参数就是类的成员,所以无所谓
* 7.函数中如果不确定传递参数的个数,可以使用变长参数的方式:传参时候的一个方便的语法是: _*
* 8.可变参数中的数据其实会被收集成为Array数组,我们在入口方法main中其实就是可变参数,
* 是以Array[String]的方式呈现的
*/
---------------------
作者:张涵钧
来源:CSDN
原文:https://blog.csdn.net/shunhack/article/details/52587822
版权声明:本文为博主原创文章,转载请附上博文链接!
Scala实战高手****第5课:零基础实战Scala函数式编程及Spark源码解析的更多相关文章
- Scala实战高手****第7课:零基础实战Scala面向对象编程及Spark源码解析
/** * 如果有这些语法的支持,我们说这门语言是支持面向对象的语言 * 其实真正面向对象的精髓是不是封装.继承.多态呢? * --->肯定不是,封装.继承.多态,只不过是支撑面向对象的 * 一 ...
- 机器学习实战(Machine Learning in Action)学习笔记————03.决策树原理、源码解析及测试
机器学习实战(Machine Learning in Action)学习笔记————03.决策树原理.源码解析及测试 关键字:决策树.python.源码解析.测试作者:米仓山下时间:2018-10-2 ...
- Scala实战高手****第4课:零基础彻底实战Scala控制结构及Spark源码解析
1.环境搭建 基础环境配置 jdk+idea+maven+scala2.11.以上工具安装配置此处不再赘述. 2.源码导入 官网下载spark源码后解压到合适的项目目录下,打开idea,File-&g ...
- Scala实战高手****第6课 :零基础实战Scala集合操作及Spark源码解析
本课内容1.Spark中Scala集合操作鉴赏2.Scala集合操作实战 --------------------------------------------------------------- ...
- 「从零单排canal 04」 启动模块deployer源码解析
基于1.1.5-alpha版本,具体源码笔记可以参考我的github:https://github.com/saigu/JavaKnowledgeGraph/tree/master/code_read ...
- spark源码解析之scala基本语法
1. scala初识 spark由scala编写,要解析scala,首先要对scala有基本的了解. 1.1 class vs object A class is a blueprint for ob ...
- Scala实战高手****第8课:零基础实战Scala最常用数据结构Map和Tuple及Spark源码鉴赏
本课内容1.Map和Tuple在Spark源码中的鉴赏2.Map和Tuple代码操作实战 ------------------------------------------------------- ...
- Scala实战高手****第12课:Scala函数式编程进阶(匿名函数、高阶函数、函数类型推断、Currying)与Spark源码鉴赏
/** * 函数式编程进阶: * 1.函数和变量一样作为Scala语言的一等公民,函数可以直接赋值给变量 * 2.函数更常用的方式是匿名函数,定义的时候只需要说明输入参数的类型和函数体即可,不需要名称 ...
- Scala 深入浅出实战经典 第65讲:Scala中隐式转换内幕揭秘、最佳实践及其在Spark中的应用源码解析
王家林亲授<DT大数据梦工厂>大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频.PPT.代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 ...
随机推荐
- 布局之BFC
BFC 什么是BFC,在哪里需要用到BFC,BFC有什么规则?生成BFC有什么条件?这几个问题,我将为大家一一解释,下面我们进入正题. BFC(Block formatting context)直译为 ...
- JavaScript 知识点之escape()与decodeURI()
解释:escape() 函数可对字符串进行编码,这样就可以在所有的计算机上读取该字符串. 语法:escape(string)参数描述string必需.要被转义或编码的字符串. 返回值:已编码的 str ...
- 基于js的地理数据的几何运算turfjs
Doc: http://turfjs.org/static/docs/global.html Openlayers3 Sample: http://jsfiddle.net/d6o81vc7/
- codevs1245最小的N个和 小根堆
这道题 将b排序一下 将a(i~n)和b1加起来入堆 每次出一次队(ax+bi) 将(ax+bi+1)入队就好了 能保证答案的正确性 找个自己证明吧 #include<cstdio> #i ...
- 【Atcoder】ARC083 D - Restoring Road Network
[算法]图论,最短路? [题意]原图为无向连通图,现给定原图的最短路矩阵,求原图最小边权和,n<=300. [题解]要求最小边权和下,原图的所有边一定是所连两端点的最短路. 那么现在将所有最短路 ...
- bzoj 2243 树链剖分
2013-11-19 16:21 原题传送门http://www.lydsy.com/JudgeOnline/problem.php?id=2243 树链剖分,用线段树记录该区间的颜色段数,左右端点颜 ...
- python基础===取txt文件的若干行到另一个文件
#取txt文件 的若干行到另一个txt f1 = open(r'F:\movie.txt','rb') f2= open(r'F:\movie2.txt','ab') i=0 while True: ...
- 僵尸进程(zombie process)
僵尸进程(zombie process) http://blog.csdn.net/crfoxzl/article/details/2124718 杀死Linux中的defunct进程(僵尸进程)的方 ...
- JAVA 批量执行测试用例
如果多个测试用例在不同的类中,又需要一次性执行完所有的测试用例,则可以使用到Junit中的批量执行测试方法. 方法一 这种方式非常简单,不需要额外多写一行代码,Eclipse 本来就支持以项目或包为单 ...
- java 反射赋空值
https://stackoverflow.com/questions/10087989/how-do-i-reflectively-invoke-a-method-with-null-as-argu ...