Scala入门之Array
/**
* 大数据技术是数据的集合以及对数据集合的操作技术的统称,具体来说:
* 1,数据集合:会涉及数据的搜集、存储等,搜集会有很多技术,存储现在比较经典的是使用Hadoop,也有很多情况使用Kafka;
* 2,对数据集合的操作技术:目前全球最火爆的是Spark;
*
* Spark的框架实现语言是Scala,首选的应用程序开发语言也是Scala,所以Scala对集合以及集合操作的支持就至关重要且必须异常强大;
* 一个补充说明是:可能是巧合,Spark中对很多数据的操作的算子和Scala中对集合的操作算子是一样一样的!也就是说你掌握了Scala中
* 的集合的操作,基本上就可以直接去开发Spark代码啦,非常美妙!
*
* 关于Scala中数据的创建与操作:
* 1,最最原始的创建数据的方式是形如val array = new Array[Int](5) ,指定数组的类型是Int且其固定长度是5个元素;
* 2, 对数组元素访问的时候下标的范围在0到length-1的长度,超过length-1的话会出现java.lang.ArrayIndexOutOfBoundsException
* 3, 最常用和经典的创建数组的方式是形如Array[Int](1,2,3,4,5),直接通过Array类名并传入参数的方式来创建数组实例,在背后的实现是调用Array的
* 工厂方法模式apply来构建出数组及数组的内容的;
* 4, 关于Array本身在底层的实现是借助了JVM平台上的Java语言的数组的实现,是不可变的!
* 5, 如果我们想使用可变数组的话,首先需要导入import scala.collection.mutable.ArrayBuffer,然后使用ArrayBuffer这个可变数组
* 6, 关于ArrayBuffer增加元素默认情况下都是在ArrayBuffer末尾增加元素的,效率非常高!
* 7,当需要多线程并发操作的时候,把ArrayBuffer转换成为Array就非常重要。其实,即使是Array,其本身虽然不可变动(元素不可删减),但是我们可以修改Array中每个元素的内容,所以多线程操作的时候
* 还是必须考虑并发写的问题;
* 8,如果想在已经有的数组的基础上通过作用于每个元素来生成新的元素构成的新数组,则可以通过yield语法来完成,这在大数据中意义重大:
* 第一点:它是在不修改已经有的Array的内容的基础上完成的,非常适合于大数据的处理;
* 第二点:在大数据中处理中,例如Spark中业务操作的核心思想就类似于yield,来通过使用function对每个元素操作获得新的元素构成的新的集合,其实就是新的RDD,例如MapPartitionsRDD
* 9, 集合的操作往往可以通过丰富的操作算子,例如filter来过滤需要条件的元素,例如map来进行每一个元素的加工;
*/
package com.dtspark.scala.basics
object HelloArrayOps {
def main(args: Array[String]): Unit = {
// val array = new Array[Int](5)
val array = Array(1,2,3,4,5) //在这里可以去掉[Int]这个泛型类型,是因为Scala有类型推到的能力,而我们已经传进了当前数组Array的值,所以可以根据值来推导出类型;
// val array = Array.apply(1,2,3,4,5)
array(0) = 10 //数据的索引下标是从0开始的
// array(5) = 1 //数组下标越界,会出现java.lang.ArrayIndexOutOfBoundsException
for(item <- array) println(item)
val names = Array("Scala","Kafka","Spark")
for(item <- names) println(item)
import scala.collection.mutable.ArrayBuffer
val arrayBuffer = ArrayBuffer[Int]()
arrayBuffer += 1
arrayBuffer += 2
arrayBuffer += 3
arrayBuffer += (4,5,6,7,8,9,10)
arrayBuffer ++= Array(1,2,3)
arrayBuffer.insert(arrayBuffer.length - 1, 100,1000)
arrayBuffer.remove(arrayBuffer.length -2)
arrayBuffer.toArray //当需要多线程并发操作的时候,把ArrayBuffer转换成为Array就非常重要。
for(item <- arrayBuffer) println(item)
for(i <- 0 until array.length) print(array(i) + " ")
println
for(i <- 0 until (array.length, 2)) print(array(i) + " ")
println
for(i <- (0 until array.length).reverse) print(array(i) + " ")
println
println("Sum = " + array.sum)
println("Max = " + array.max)
scala.util.Sorting.quickSort(array) //对数组进行升序排序,内容变成了2,3,4,5,10
println("quickSort = " + array.mkString(","))
println(array.mkString("*****", ",", "*****"))
val arrayAddedOne = for(item <- array) yield item + 1
println(arrayAddedOne.mkString(" "))
val arrayEven = for(item <- array if item % 2 == 0) yield item
println(arrayEven.mkString(","))
println(array.filter { x => x % 2 == 0}.mkString(" "))
println(array.filter { _ % 2 == 0}.mkString(" "))
println(array.filter { _ % 2 == 0}.map { _ * 10 }.mkString(" "))
}
}
Scala入门之Array的更多相关文章
- Scala入门学习笔记三--数组使用
前言 本篇主要讲Scala的Array.BufferArray.List,更多教程请参考:Scala教程 本篇知识点概括 若长度固定则使用Array,若长度可能有 变化则使用ArrayBuffer 提 ...
- Scala入门 【1】
Scala入门 [1] 转载请注明出处:http://www.cnblogs.com/BYRans/ 1 基础 val定义的为常量,var为变量 val name:Type = ***,变量名后加冒号 ...
- Scala 入门详解
Scala 入门详解 基本语法 Scala 与 Java 的最大区别是:Scala 语句末尾的分号 ; 是可选的 Scala 程序是对象的集合,通过调用彼此的方法来实现消息传递.类,对象,方法,实例变 ...
- idea创建Scala入门HelloWorld
Scala开发环境的搭建 首先到Scala官网下载Scala网址为 https://www.scala-lang.org/download/ 找到下图所示位置:选择相对应的版本的Scala进行下载,这 ...
- Scala入门到精通
原文出自于: http://my.csdn.net/lovehuangjiaju 感谢! 也感谢,http://m.blog.csdn.net/article/details?id=52233484 ...
- scala 入门(2)--数组相关操作
scala 无论从数组的定义还是操作方面来说都跟java非常相似,但又有其独特的强大之处… 1. 定长数组 对于长度不变的数组,可以用scala中的Array. //scala 里使用new实例化对象 ...
- Scala入门系列(四):Map & Tuple
Map 创建Map // 创建一个不可变的Map scala> val ages = Map("Leo" -> 30, "Sparks" -> ...
- Scala入门(1)Linux下Scala(2.12.1)安装
Scala入门(1)Linux下Scala(2.12.1)安装 一.文件准备 1.1 文件名称 scala-2.12.1.tgz 1.2 下载地址 http://www.scala-lang.org/ ...
- scala 入门Eclipse环境搭建
scala 入门Eclipse环境搭建及第一个入门经典程序HelloWorld IDE选择并下载: scala for eclipse 下载: http://scala-ide.org/downloa ...
随机推荐
- 全站HTTPs,没那么简单
“全站 HTTPs”俨然成了目前的热门话题,很多网站都在摩拳擦掌要实行全站 HTTPs.凑巧,我们(沪江)也在推行这个计划. 一开始大家想得都很简单,把证书购买了.配好了,相应的路径改一改,就没有问题 ...
- Hadoop源码之HDFS(1)--------通信方式
说起hadoop这个东西,只能说真是个伟大的发明,而本人对cutting大神也是无比的崇拜,记得刚接触hadoop的时候,还觉得这个东西挺多余的,但是现在想想,这个想法略傻逼...... 2006-2 ...
- 使用国内 maven 镜像 代替国外 mirror
使用maven的都知道国外的maven下载一个是比较慢,一个是因为被墙,一些jar包无法下载,非常老火. 比如出现类似下面的错误: Unknown host repo.maven.apache.org ...
- Python序列化之json与pickle
1.json介绍 JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式. 易于人阅读和编写.同时也易于机器解析和生成. 它基于JavaScript Progra ...
- 关于《Windows程序设计(第五版)》中一个实例程序的疑问
最近一直在看Charlse Petzold的<Windows程序设计>,作为一个新得不能再新的新手,只能先照着书的抄抄源码了,之前的例子一直都很正常,但昨天遇到一个很诡异的BUG. 先看实 ...
- 中科院分词ICTCLAS导入用户词典后分词结果一样?
package ICTCLAS.I3S.Test; import java.io.UnsupportedEncodingException; import ICTCLAS.I3S.AC.ICTCLAS ...
- ARM学习篇一 点亮LED
要点亮LED,先决条件是什么,当然得有相应的硬件设施.板子的整个电路图比较大,我就直接取相关部分. 给发光二级管加上3.3v电压后,通过1k电阻,直接与S3C2440连接.至于为什么要加电阻,大家应该 ...
- Android工程师入门(一)——这周入大门,挤时间,轻喷
挤挤时间,入个门先. 一.环境搭建 略. 二.项目结构 在studio中,项目=Module: res:放置应用到的所有资源——基本决定了生成的APK的大小: java:java源程序: manife ...
- [Computer structure] Written Notes
To some extent, taking notes using my pen and pencil is also an interesting thing! bingo! ~ 2016-03- ...
- 网络之Ip地址
0.0.0.0---255.255.255.255 Ip地址分类(D.E)不对外开放 网络类别 最大网络数 IP地址范围(,唯一的,花钱的) 最大主机数 私有IP地址范围 (做内网ip,不可直接访问公 ...