Scala操作外部数据:

1、操作文件
2、操作XML
3、操作MySQL

读取文件:

object FileApp {
  def main(args: Array[String]): Unit = {

    //system file
    val file = Source.fromFile("Users/rocky/imooc/hello.txt") (scala.io.Codec.UTF8)

    def readLine(): Unit = {
      for(line <- file.getLines()) { //一行一行的读取
        println(line)
      }
    }

    readLine()

    //URL
    def readNet(): Unit = {
      val file = Source.fromURL("http://www.baidu.com")
      for(line <- file.getLines()) { //一行一行的读取
        println(line)
      }
    }
  }
}

在配置文件里引入mysql的依赖:

<dependcency>
  <groupId>mysql</groupId>
  <artifactId>mysql-connector-java</artifactId>
  <version>5.1.45</version>
</dependcency>

操作MySQL数据库:
object MySQLApp extends App {

  val url = "jdbc:mysql://localhost:3306/mysql"
  val username = "root"
  val password = "root"

  var connection:Connection = null
  try{

    // make the connection
    classOf[com.mysql.jdbc.Driver]

    //拿到连接
    val connection = DriverManager.getConnection(url, username, password)
    //create the statement, and run the select query
    val statement = connection.createStatement()
    val resultSet = statement.executeQuery("select host,user from user")
    while(resultSet.next()){
      val host = resultSet.getString("host")
      val user = resultSet.getString("user")

      println(s"$host, $user")
    } catch {
      case e:Exception => e.printStackTrace()
    } finally {
      //free
      if(connection == null) {
        connection.close()
      }
    }
  }
}

操作XML文件:

object XMLApp extends App {

  //loadXML()
  readXMLAttr()

  //第一种方式:load(ClassPath)
  def loadXML(): Unit = {
    //val xml = XML.load(this.getClass.getClassLoader.getResource("test.xml"))
    //println(xml)

    //第二种方式:load(is: InputStream)
    //val xml = XML.load(new FileInputStream("/Users/rocky/source/scala-train/src/main/resources/test.xml"))

    //第三种方式:load(reader)
    //val xml = XML.load(new InputStreamReader(new FileInputStream("/Users/rocky/source/scala-train/src/main/resources/test.xml"))
  }

  //读取XML文件里的字段的值
  def readXMLAttr(): Unit = {
    val xml = XML.load(this.getClass.getClassLoader.getResource("PK.xml"))

    //header/field
    val headerField = xml \ "header" \ "field"
    println(headerField)

    //all field
    val fields = xml \\ "field"
    for (field <- fields) {
      println(field)
    }

    //header/field/name
    //val filedAttributes = (xml \ "header" \ "field").map(_ \ "@name")
    val filedAttributes = (xml \ "header" \ "field" \\ "@name")
    for (filedAttribute <- filedAttributes) {
      println(filedAttribute)
    }

    //name="Logon" message
    //val filters = (xml \\ "message").filter(_.attribute("name").exists(_.text.equals("Logon")))
    val filters = (xml \\ "message").filter(x => ((x \ "@name").text).equals("Logon"))
    for (filter <- filters) {
      println(filter)
    }

    // header/field/name content
    (xml \ "header" \ "field").map(x => (x \ "@name", x.text, x \ "@required")) .foreach(println)
  }
}

Scala操作外部数据的更多相关文章

  1. Scala学习——操作外部数据

    scala操作外部数据 一.scala读取文件及网络数据 package top.ruandb.scala.Course08 import scala.io.Source object FileApp ...

  2. 快速入门Python中文件读写IO是如何来操作外部数据的?

    读写文件是最常见的IO操作.Python内置了读写文件的函数,用法和C是兼容的. 读写文件前,我们先必须了解一下,在磁盘上读写文件的功能都是由操作系统提供的,现代操作系统不允许普通的程序直接操作磁盘, ...

  3. Catalyst揭秘 Day8 Final 外部数据源和缓存系统

    Catalyst揭秘 Day8 Final 外部数据源和缓存系统 今天是Catalyst部分的收官,主要讲一些杂项内容. 外部数据源处理 什么叫外部数据源,是SparkSql自己支持的一些文件格式,以 ...

  4. 【翻译】Flink 异步I / O访问外部数据

    本文来自官网翻译: Asynchronous I/O for External Data Access 需要异步I / O操作 先决条件 异步I / O API 超时处理 结果顺序 活动时间 容错保证 ...

  5. geotrellis使用(五)使用scala操作Accumulo

    要想搞明白Geotrellis的数据处理情况,首先要弄清楚数据的存放,Geotrellis将数据存放在Accumulo中. Accumulo是一个分布式的Key Value型NOSQL数据库,官网为( ...

  6. STM32学习笔记(八) SPI总线(操作外部flash)

    1. SPI总线简介 SPI全称串行外设接口,是一种高速,全双工,同步的外设总线:它工作在主从方式,常规需要至少4根线才能够正常工作.SPI作为基本的外设接口,在FLASH,EPPROM和一些数字通讯 ...

  7. 找呀志_ContentResolver操作ContentProvider数据

    当需要外部的应用ContentProvider该数据被添加.删.修改和查询操作.可以使用ContentResolver 类完成 要得到ContentResolver 物,可以使用Activity提供g ...

  8. Postman高级应用——流程控制、调试、公共函数、外部数据文件

    postman客户端下载地址:https://www.getpostman.com/apps 目录 流程控制 调试 公共函数 外部数据文件 流程控制 流程控制简言之就是设置接口的执行顺序,流程控制只有 ...

  9. R学习笔记(4): 使用外部数据

    来源于:R学习笔记(4): 使用外部数据 博客:心内求法 鉴于内存的非持久性和容量限制,一个有效的数据处理工具必须能够使用外部数据:能够从外部获取大量的数据,也能够将处理结果保存.R中提供了一系列的函 ...

随机推荐

  1. highcharts控制X刻度值整数调整

    function chartData() { var app_id = $('.app_id').attr('app_id'); var gener_id = $('.gener_id').attr( ...

  2. SQLyog安装

    安装 使用 首先看到下面的界面

  3. 2018-12-25-win10-uwp-显示SVG

    title author date CreateTime categories win10 uwp 显示SVG lindexi 2018-12-25 10:37:5 +0800 2018-2-13 1 ...

  4. linux机器间建立信任关系

    linux机器间建立信任关系 如何建立信任关系 在shell脚本中,需要使用scp命令将本地的文件复制到另一台机器中备份.但通常执行scp命令后都需要输入用户密码,这样在定时自动执行shell脚本中就 ...

  5. Oracle11gR2 64bit+Oracle11gR2Client32bit+pl/sql 9

    安装Oracle数据库,费了老一番折腾准备软件:1. Oracle 11g R2 64bit2. Oracle 11g R2 Client 32bit3. PLSQL Developer V9 逐个安 ...

  6. css:鼠标点击出现有颜色的边框?如何解决

    今天遇到上图这样出现有颜色的边框 解决办法: css设置属性 outline:none;

  7. mysql 通过navicat 添加函数或者过程

    1. 添加函数时, 函数参数的  varchar(255) 一定要加上 255,返回也要加.不加一直保存不了,狂试: 2. 添加过程时, 进入课程体 编辑时  也要加上 varchar 的位数限制.不 ...

  8. django之重定向redirect

    一:redirect的场景 加入登录成功后,需要跳转到主页:登录退出后,跳转到主页面.

  9. LSTM 神经网络输入输出层

    今天终于弄明白,TensorFlow和Keras中LSTM神经网络的输入输出层到底应该怎么设置和连接了.写个备忘. https://machinelearningmastery.com/how-to- ...

  10. LYXF-PE-tools

    先随便说一下这个PE-tools有什么用? 我开发这款PE-tools是为了学习而开发的,且是开源的,这里我会提供源码链接.它可以解析windows 32/64位程序中比较常用的一些属性. 里面有个稍 ...