Spark笔记(一)

简介

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行计算框架，Spark拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
Spark是Scala编写，方便快速编程。

总体技术栈
- Mesos: 一个多租户的集群资源管理器
- Tachyon: 一个高性能、高容错、基于内存的开源分布式存储系统
- Spark: 快速的内存优化过的计算执行引擎(有python, java, scala 的API)
- Spark Streaming: Spark的流计算系统
- Graphx: 图形计算
- MLbase: 有好的机器学习
- Spark SQL
- 一个用于在海量数据上进行交互式SQL的近似查询引擎
- 一个跨语言的通讯协议，用于编写并行计算机(Java 有一个OpenMPI的实现)
- Ad-hoc Queries (即席查询)
  - 即席查询（Ad Hoc）是用户根据自己的需求，灵活的选择查询条件，系统能够根据用户的选择生成相应的统计报表。即席查询与普通应用查询最大的不同是普通的应用查询是定制开发的，而即席查询是由用户自定义查询条件的。
- Spark 可以做到流处理, 批处理和即席查询一站式运作
Spark 与 MapReduce的对比
- MapReduce
- Spark
- 在迭代计算中, Spark会将每次计算的中间计算结果存储到内存中, 而MapReduce在执行迭代计算时, 在 shuffle 阶段需要不断地从HDFS读取数据和写入数据, 大量的磁盘IO存在性能瓶颈, 必然会导致计算时长的延长。所以, 在执行迭代计算时, Spark 的性能比 MapReduce 要高100x倍。

Spark 核心

(1). RDD

Resilient Distributed DataSet 弹性分布式数据集。
RDD五大特性:
- RDD 是由一系列的 parition 组成的
- 函数是作用在每一个partition (split) 上的
- RDD 之间有一系列的依赖关系
- 分区器是作用在 K, V 格式的 RDD 上
- RDD 提供一些列最佳的计算位置
RDD理解图:
- 注意点:
  - textFile方法底层封装的是MR读取文件的方式，读取文件之前先split，默认split大小是一个block大小
  - RDD 只是数据集的抽象, 分区内部并不会存储具体的数据
  - 什么是 K, V 格式的RDD?
    - 如果RDD中存储的数据都是二元组对象, 那么这个RDD就叫做 K,V 格式的 RDD
  - 哪里体现 RDD 的弹性(容错)?
    - parition 数量, 大小没有限制且可以自定义, 体现了RDD的弹性
    - RDD 之间依赖关系, 可以基于上一个RDD重新计算出RDD
  - 哪里体现 RDD 的分布式?
    - RDD 是由 Partition 组成, parition 是分布在不同节点上的
  - RDD 提供计算最佳位置, 体现了数据本地化。体现了大数据 "计算移动数据不一定" 的理念
Lineage 血统
- 可以看作一代单传的血统, 通过代来判定程序执行到的位置

(2). Spark 任务执行原理

Driver 和 Worker 是启动在节点上的进程
- Driver 与集群节点之间有频繁的通信
- Driver 负责任务(tasks)的分发和结果的回收, 任务的调度。如果 task 的计算结果非常大就不要回收了, 否则会造成OOM
- Worder 是 Standalone 资源调度框架中资源管理的从节点, 也是JVM进程.
- Master 是 Standalone 资源调度框架中资源管理的主节点, 也是JVM进程.
- Driver 类比 ApplicationMaster 分发任务给Worker, 获取计算的结果

(3). Spark 代码流程

创建 SparkConf 对象
- 可以设置 Application name
- 可以设置运行模式及资源需求
创建 SparkContext 对象
基于 Spark 的上下文创建一个RDD, 对 RDD进行处理
应用程序中要有Action类算子来触发 Transformation 类算子执行
关闭 Spark 上下文对象 SparkContext

(4). Transformations 转换算子

概念：
- Transformation(转换) 类算子是一类算子, 如 map, flatMap, reduceByKey 等。
- Transformation 算子是延迟执行的, 也可被称为懒加载执行的。
Transformation 类算子:
- filter
  - 过滤符合条件的记录数, true 保留, false 过滤掉
- map
  - 将一个RDD中的每个数据项, 通过map中的函数映射变为一个新的元素。
  - 特点: 输入一条, 输出一条数据。
- flatMap
  - 先 map 后 flat。与map类似, 每个输入项可以映射为 0 到多个输出项。
- sample
  - 随机抽取算子, 根据传进去的小数按比例进行又放回或者无放回的抽样。
- reduceByKey
  - 将相同的 key 根据相应的逻辑进行处理。
- sortByKey/sortBy
  - 作用在K, V 格式的RDD上, 对 key 进行升序或者降序排序。

(5). Action 行动算子

概念:
- Action 行动算子, 如 foreach, collect, count 等。
- Action 类算子是触发执行。
- 一个application应用程序中有几个 Action 类算子执行, 就有几个job运行。底层都有调用run_job方法。
Action 类算子
- count
- 返回数据集中的元素数, 会在结果计算完成后回到 Driver 端
- take(n)
  - 返回一个包含数据集前 n 个元素的集合
- first
  
  等价于 take(1), 返回数据集中的第一个元素
- foreach
  - 循环遍历数据集中的每个元素, 运行相应的逻辑
- collect
  - 将计算结果回收到 Driver 端

(6). 控制算子

概念:
- 三种控制算子: cache, persist, checkpoint
- 都可以将RDD持久化, 持久化的单位是 partition
- cache 和 persist 都是懒执行的。必须由一个action算子引发
- checkpoint 算子不仅能将 RDD 持久化到磁盘, 还能切断 RDD 之间的依赖关系
cache:
- 默认将 RDD 的数据持久化到内存中, 是懒执行
- cache() <=> persist() = persist(StorageLevel.Memory_Only)

persist:

可以指定持久化的级别。
最常用的是 Memory_Only 和 Memory_AND_DISK
"_2" 表示有副本数

持久化级别:

     /**

 * :: DeveloperApi ::

 * Flags for controlling the storage of an RDD. Each StorageLevel records whether

 * to use memory, or ExternalBlockStore, whether to drop the RDD to disk if it

 * falls out of memory or ExternalBlockStore, whether to keep the data in memory in * a serialized format, and whetherto replicate the RDD partitions on multiple

 * nodes.

 * 控制 RDD 存储的 标签, 每个存储级别记录了 是否 使用内存,或额外的 块来存储; 是否 在 RDD * 内存 或 额外块 溢出时 将它 存储到磁盘; 是否将存储在内存中的数据 按指定格式 序列化;

 * 是否将 RDD 的 分区 备份到几个节点上

 *

 * The [[org.apache.spark.storage.StorageLevel]] singleton object contains some

 * static constants for commonly useful storage levels. To create your own storage * level object, use the factory method of the singleton object

 * (`StorageLevel(...)`).

 * StorageLevel 是一个包含了一些标识着常用的存储级别的静态常量的单例。

 * 你可以通过使用该单例对象的工厂方法来自定义存储级别

 */

@DeveloperApi

class StorageLevel private(

    /* 是否使用磁盘存储 */

    private var _useDisk: Boolean,

    /* 是否启用内存存储 */

    private var _useMemory: Boolean,

    /* 是否使用堆外内存 */

    private var _useOffHeap: Boolean,

    /* 是否不使用序列化... 这个有点绕... */

    private var _deserialized: Boolean,

    /* 默认备份为1,可设置 */

    private var _replication: Int = 1)

  extends Externalizable {

  // TODO: Also add fields for caching priority, dataset ID, and flushing.

  // 添加 用于 缓存优先级, 数据集 ID 和 内存清洗 的 域

  private def this(flags: Int, replication: Int) {

    this((flags & 8) != 0, (flags & 4) != 0, (flags & 2) != 0, (flags & 1) != 0, replication)

  }

  def this() = this(false, true, false, false)  // For deserialization

  def useDisk: Boolean = _useDisk

  def useMemory: Boolean = _useMemory

  def useOffHeap: Boolean = _useOffHeap

  def deserialized: Boolean = _deserialized

  def replication: Int = _replication

  // 断言副本数是否小于 40, 不满足会报错

  assert(replication < 40, "Replication restricted to be less than 40 for calculating hash codes")

  if (useOffHeap) {

    // 使用序列化才能使用堆外内存

    require(!deserialized, "Off-heap storage level does not support deserialized storage")

  }

  /**

   *

   * 内存模式

   */

  private[spark] def memoryMode: MemoryMode = {

    if (useOffHeap) MemoryMode.OFF_HEAP

    else MemoryMode.ON_HEAP

  }

  /**

   * 克隆, 创建了新对象, 是深拷贝

   */

  override def clone(): StorageLevel = {

    new StorageLevel(useDisk, useMemory, useOffHeap, deserialized, replication)

  }

  /**

   *

   * 重载equals方法

   */

  override def equals(other: Any): Boolean = other match {

    case s: StorageLevel =>

      s.useDisk == useDisk &&

      s.useMemory == useMemory &&

      s.useOffHeap == useOffHeap &&

      s.deserialized == deserialized &&

      s.replication == replication

    case _ =>

      false

  }

  /**

   * 判断是否有效

   */

  def isValid: Boolean = (useMemory || useDisk) && (replication > 0)

  def toInt: Int = {

    var ret = 0

    if (_useDisk) {

      ret |= 8

    }

    if (_useMemory) {

      ret |= 4

    }

    if (_useOffHeap) {

      ret |= 2

    }

    if (_deserialized) {

      ret |= 1

    }

    ret

  }

  // 额外的写出

  override def writeExternal(out: ObjectOutput): Unit = Utils.tryOrIOException {

    // writeByte: 写出为字节码

    out.writeByte(toInt)

    out.writeByte(_replication)

  }

  override def readExternal(in: ObjectInput): Unit = Utils.tryOrIOException {

    val flags = in.readByte()

    _useDisk = (flags & 8) != 0

    _useMemory = (flags & 4) != 0

    _useOffHeap = (flags & 2) != 0

    _deserialized = (flags & 1) != 0

    _replication = in.readByte()

  }

  // 读决定, 获取当前已缓存的等级

  @throws(classOf[IOException])

  private def readResolve(): Object = StorageLevel.getCachedStorageLevel(this)

  override def toString: String = {

    val disk = if (useDisk) "disk" else ""

    val memory = if (useMemory) "memory" else ""

    val heap = if (useOffHeap) "offheap" else ""

    val deserialize = if (deserialized) "deserialized" else ""

    val output =

      Seq(disk, memory, heap, deserialize, s"$replication replicas").filter(_.nonEmpty)

    s"StorageLevel(${output.mkString(", ")})"

  }

  override def hashCode(): Int = toInt * 41 + replication

  def description: String = {

    var result = ""

    result += (if (useDisk) "Disk " else "")

    if (useMemory) {

      result += (if (useOffHeap) "Memory (off heap) " else "Memory ")

    }

    result += (if (deserialized) "Deserialized " else "Serialized ")

    result += s"${replication}x Replicated"

    result

  }

}

/**

 * Various [[org.apache.spark.storage.StorageLevel]] defined and utility functions * for creating new storage levels.

 * 定义的可变存储级别以及 创建新存储级别的公用方法

 */

object StorageLevel {

  // 5 个参数依次代表: _useDisk,_useMemory,_useOffHeap,_deserialized,_replication

  // SER -> serialized 是否序列化; _2 -> 使用副本数

  val NONE = new StorageLevel(false, false, false, false)

  val DISK_ONLY = new StorageLevel(true, false, false, false)

  val DISK_ONLY_2 = new StorageLevel(true, false, false, false, 2)

  val MEMORY_ONLY = new StorageLevel(false, true, false, true)

  val MEMORY_ONLY_2 = new StorageLevel(false, true, false, true, 2)

  val MEMORY_ONLY_SER = new StorageLevel(false, true, false, false)

  val MEMORY_ONLY_SER_2 = new StorageLevel(false, true, false, false, 2)

  val MEMORY_AND_DISK = new StorageLevel(true, true, false, true)

  val MEMORY_AND_DISK_2 = new StorageLevel(true, true, false, true, 2)

  val MEMORY_AND_DISK_SER = new StorageLevel(true, true, false, false)

  val MEMORY_AND_DISK_SER_2 = new StorageLevel(true, true, false, false, 2)

  val OFF_HEAP = new StorageLevel(true, true, true, false, 1)

  /**

   * :: DeveloperApi ::

   * Return the StorageLevel object with the specified name.

   * 返回特定名称的存储级别对象

   */

  @DeveloperApi

  def fromString(s: String): StorageLevel = s match {

    case "NONE" => NONE

    case "DISK_ONLY" => DISK_ONLY

    case "DISK_ONLY_2" => DISK_ONLY_2

    case "MEMORY_ONLY" => MEMORY_ONLY

    case "MEMORY_ONLY_2" => MEMORY_ONLY_2

    case "MEMORY_ONLY_SER" => MEMORY_ONLY_SER

    case "MEMORY_ONLY_SER_2" => MEMORY_ONLY_SER_2

    case "MEMORY_AND_DISK" => MEMORY_AND_DISK

    case "MEMORY_AND_DISK_2" => MEMORY_AND_DISK_2

    case "MEMORY_AND_DISK_SER" => MEMORY_AND_DISK_SER

    case "MEMORY_AND_DISK_SER_2" => MEMORY_AND_DISK_SER_2

    case "OFF_HEAP" => OFF_HEAP

    case _ => throw new IllegalArgumentException(s"Invalid StorageLevel: $s")

  }

  /**

   * :: DeveloperApi ::

   * Create a new StorageLevel object.

   * 创建一个新的存储级别对象

   */

  @DeveloperApi

  def apply(

      useDisk: Boolean,

      useMemory: Boolean,

      useOffHeap: Boolean,

      deserialized: Boolean,

      replication: Int): StorageLevel = {

    getCachedStorageLevel(

      new StorageLevel(useDisk, useMemory, useOffHeap, deserialized, replication))

  }

  /**

   * :: DeveloperApi ::

   * Create a new StorageLevel object without setting useOffHeap.

   * 创建一个没有设置使用堆外内存的新存储级别对象

   */

  @DeveloperApi

  def apply(

      useDisk: Boolean,

      useMemory: Boolean,

      deserialized: Boolean,

      replication: Int = 1): StorageLevel = {

    getCachedStorageLevel(new StorageLevel(useDisk, useMemory, false, deserialized, replication))

  }

  /**

   * :: DeveloperApi ::

   * Create a new StorageLevel object from its integer representation.

   * 根据 标签 的 整形 代表参数 和 副本数 创建一个新的存储级别对象

   */

  @DeveloperApi

  def apply(flags: Int, replication: Int): StorageLevel = {

    getCachedStorageLevel(new StorageLevel(flags, replication))

  }

  /**

   * :: DeveloperApi ::

   * Read StorageLevel object from ObjectInput stream.

   * 从对象输入流中读取存储级别对象

   */

  @DeveloperApi

  def apply(in: ObjectInput): StorageLevel = {

    val obj = new StorageLevel()

    obj.readExternal(in)

    getCachedStorageLevel(obj)

  }

  // 调用了 java 并发包的 ConcurrentHashMap, 将两个存储级别作为键值对传入 ConcurrentHashMap 初始化 该类的 storageLevelCache对象

  private[spark] val storageLevelCache = new ConcurrentHashMap[StorageLevel, StorageLevel]()

  // 从 storageLevelCache 中获取 存储级别对象

  private[spark] def getCachedStorageLevel(level: StorageLevel): StorageLevel = {

    storageLevelCache.putIfAbsent(level, level)

    storageLevelCache.get(level)

  }

}

cache 和 persist 的注意事项
- cache 和 persist 都是懒执行, 必须由一个 action 类触发执行
- cache 和 persist 的返回值可以赋给一个变量, 在其他job中直接使用该变量就是使用持久化的数据了。持久化单位是partition
checkpoint:
- checkpoint 将 RDD 持久化到磁盘, 还可以切断 RDD之间的依赖关系
- checkpoint 的执行原理:
  - 当 RDD 的 job 执行完毕后, 会从finalRDD 从后往前回溯。
  - 当回溯到某一个调用了 checkpoint 方法时, 会对当前 RDD 做一个标记
  - Spark 框架会自动启动一个新的job, 重新计算这个RDD的数据, 将数据持久化到HDFS上
- 优化: 对 RDD 执行checkpoint之前, 最好对这个RDD先执行cache, 这样新启动的job只需要将内存中的数据拷贝到 HDFS 上就可以, 省去了重新计算的步骤。
随便写的一个xx练习, 可读性 == shit, 是在不想写wordCount了
```
商品名称,商家店名,价格,评价人数,商品链接,当前时间
```

"AORUS GeForce RTX 2080Ti XTREME WATERFORCE 水雕 352bit GDDR6 11G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,14499,2.4万+条评价,https://item.jd.com/100001738399.html,31:34.4

"EVGA GeForce RTX 2080 Ti FTW3 ULTRA GAMING 11G显存1755MHz 14000MHz骨灰级高频RGB游戏显卡【EVGA，信仰之选】rtx2080ti显卡，超频版显卡，iCX2散热技术，智能超频软件",EVGA京东自营官方旗舰店,13999,20+条评价,https://item.jd.com/100005929088.html,31:34.3

"技嘉(GIGABYTE)AORUS GeForce RTX 2080Ti XTREME 大雕 1770 14140 352bit GDDR6 11G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,12899,2.4万+条评价,https://item.jd.com/100001319119.html,31:34.8

"华硕（ASUS）ROG-STRIX-GeForce RTX2080 TI-O11G-GAMING 1350-1665MHz 14000MHz 游戏电竞专业显卡 11G 【到手价11999！三期免息】智能超频软件！镜面直触散热技术！RGB圣光同步!点我》》2080Ti猛禽+电源套装！铸就信仰！",华硕京东自营旗舰店,12599,900+条评价,https://item.jd.com/100001121028.html,29:45.9

"华硕（ASUS）ROG-STRIX-GeForce RTX2080 TI-A11G-GAMING 1350-1590MHz 14000MHz 游戏电竞专业显卡 11G 【到手价10999！三期免息】镜面直触散热设计，AURA灯效控制，全新超频软件，二代风扇控制！点我》》2080ti猛禽旗舰爆款！信仰无价！",华硕京东自营旗舰店,11549,300+条评价,https://item.jd.com/100000913467.html,31:33.6

"七彩虹（Colorful）iGame GeForce RTX 2080Ti Vulcan X OC GDDR6 11G电竞游戏显卡【白条6期免息，满5000-500】高频火神系列！超大LCD显示屏自由定制！合金压铸外甲！RGB灯效，一键超频！抢购2070火神",七彩虹京东自营旗舰店,10499,2300+条评价,https://item.jd.com/100001653709.html,31:34.8

"技嘉(GIGABYTE)AORUS GeForce RTX 2080Ti 小雕 1695 14000 352bit GDDR6 11G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,9999,2.4万+条评价,https://item.jd.com/100001724916.html,29:45.8

"微星（MSI）旗舰魔龙 GeForce RTX 2080 Ti GAMING X TRIO 1350-1755MHz 352BIT 11GB GDDR6 电竞游戏显卡 GAMING升级红龙成魔，定制PCB供电增强！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,9888,1万+条评价,https://item.jd.com/8928863.html,29:45.8

"七彩虹（Colorful）iGame GeForce RTX 2080 Ti Advanced OC GDDR6 11G电竞游戏显卡【白条6期免息，满5000-500】高体质芯片！RGB灯效，能量溢动！iGame真空冰片技术，散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,9199,2300+条评价,https://item.jd.com/8963629.html,30:41.8

"索泰(ZOTAC)RTX2080Ti玩家力量至尊PGF OC14显卡自营/台式机游戏吃鸡独立显卡11GD6/1350-1755/14000MHz 【616直接干!叠100券送T恤】6热管3风扇,强化散热!包围式RGB氛围灯,颜值担当!16+4相供电,实力担纲!点击领100券及查看T恤领取方法",索泰京东自营旗舰店,8999,400+条评价,https://item.jd.com/100002339524.html,29:45.9

"技嘉(GIGABYTE)GeForce RTX 2080Ti GAMING OC 1665-1650MHz 14000MHz 352bit GDDR6 11G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,8699,2.4万+条评价,https://item.jd.com/8734528.html,30:41.0

"索泰(ZOTAC)RTX2080Ti AI版 HA台式机独立生产力显卡11GD6/1350-1545/14000MHz 【616直接干!叠100券送T恤】涡轮风扇优化机箱风道!多卡协同运算强!视频渲染时间短!沉稳商务外观产品与包装!点击领100券及查看T恤领取方法",索泰京东自营旗舰店,8599,100+条评价,https://item.jd.com/100002166999.html,30:42.0

"映众（Inno3D）GeForce RTX 2080 Ti Gaming版 11GB GDDR6 PCI-E吃鸡显卡/游戏电竞台式机独立显卡三年质保4K级电竞壕选！三风扇高配散热，公版方案稳定保障！畅玩吃鸡/只狼/APEX英雄升级2080TI水冷",映众京东自营旗舰店,8199,300+条评价,https://item.jd.com/100003169637.html,30:41.7

"微星（MSI）GeForce RTX 2080 Ti VENTUS 11G 352BIT GDDR6 新代游戏显卡万图师小身材大空间，简美性价比！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,7999,1万+条评价,https://item.jd.com/8797490.html,31:34.2

"华硕（ASUS）ROG STRIX-GeForce RTX 2080-O8G-GAMING 1515-1890MHz 14000MHz 猛禽游戏显卡【到手价6199！三期免息】全新超频软件+二代风扇控制，RGB神光同步,升级镜面直触技术！点我》》2080ti猛禽高端！烧友推荐！",华硕京东自营旗舰店,6499,3000+条评价,https://item.jd.com/8963509.html,31:33.6

"七彩虹（Colorful）iGame GeForce RTX 2080 Vulcan X OC GDDR6 8G电竞游戏显卡【白条6期免息，满3000-300】高频火神系列！超大LCD显示屏自由定制！合金压铸外甲！RGB灯效，一键超频！抢购2070火神",七彩虹京东自营旗舰店,6099,6500+条评价,https://item.jd.com/100001515730.html,29:46.5

"微星（MSI）旗舰魔龙 GeForce RTX 2080 GAMING X TRIO 1515-1860MHz 8GB GDDR6 游戏电竞电脑独立显卡 GAMING升级红龙成魔，定制PCB供电增强！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,5949,1万+条评价,https://item.jd.com/8928883.html,29:46.0

"七彩虹（Colorful）iGame GeForce RTX 2080 Advanced OC GDDR6 8G电竞游戏显卡【白条6期免息，满3000-300】高体质芯片！RGB灯效，能量溢动！iGame真空冰片技术，散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,5799,6500+条评价,https://item.jd.com/8963621.html,30:41.3

"华硕（ASUS） DUAL-RTX2080-O8G-EVO OC 1515-1830MHz 14000MHz 256bit 游戏电竞专业显卡 8G 【到手价5499！三期免息】高体质芯片,高刷新率,畅玩热门游戏,轴流风扇+0db静音技术！点我》》热卖2080猛禽！全新风扇信仰赞！",华硕京东自营旗舰店,5749,100+条评价,https://item.jd.com/100004000664.html,31:33.8

"蓝宝石（Sapphire）Radeon VII 16G HBM2 1400-1750MHz/2000MHz 独立游戏显卡【购Radeon-VII送300元暴雪点卡，晒单再送100元京东E卡】7nm制程工艺，16GB高容量显存，纯正公版设计【点此：蓝宝石京东自营旗舰店】",蓝宝石京东自营旗舰店,5699,400+条评价,https://item.jd.com/100003122974.html,29:46.8

"七彩虹（Colorful）iGame GeForce RTX 2080 AD Special OC GDDR6 8G电竞游戏显卡【白条6期免息，满3000-300】高体质芯片！RGB灯效，能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,5699,6500+条评价,https://item.jd.com/100001620328.html,30:41.6

"技嘉(GIGABYTE)GeForce RTX 2080 GAMING OC 1830-1815MHz 14000MHz 256bit GDDR6 8G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,5499,2.4万+条评价,https://item.jd.com/8945581.html,29:46.5

"技嘉(GIGABYTE)AORUS GeForce RTX 2080 小雕 1845MHz 14000MHz 256bit GDDR6 8G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,5399,2.4万+条评价,https://item.jd.com/100000767679.html,29:46.3

"技嘉(GIGABYTE)AORUS GeForce RTX 2080 小雕 1845MHz 14000MHz 256bit GDDR6 8G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,5399,2.4万+条评价,https://item.jd.com/100000767679.html,30:42.1

"映众（Inno3D）GeForce RTX 2080 冰龙超级版 8GB GDDR6 PCI-E吃鸡显卡/游戏电竞台式机独立显卡畅玩吃鸡/只狼/APEX英雄！AI双模智能散热！3加2五风扇六热管！OLED显示屏！1670万色RGB灯！RGB背板！升级2080TI旗舰",映众京东自营旗舰店,5299,900+条评价,https://item.jd.com/100002580248.html,30:41.5

"华硕（ASUS） RADEONVII-16G 1400-1800Mhz 16G/4096bit 1TB/s显存带宽 HBM2显卡【到手价5299】16GB显存，1TB/s显存带宽，畅玩4kAAA游戏大作！点我》》AREZ-VEGA64！RW诚意推荐！",华硕京东自营旗舰店,5299,100+条评价,https://item.jd.com/100003122906.html,31:34.8

"微星（MSI）GeForce RTX 2080 VENTUS 8G 1515-1710MHz 256BIT GDDR6 新代游戏显卡万图师小身材大空间，简美性价比之选！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,5199,1万+条评价,https://item.jd.com/100000971960.html,31:33.9

"讯景（XFX）RX RADEON VII 7nmGPU 16GB HBM2 Base1400MHz~Boost1750MHz/1GHz 4096bit 显卡【晒单返100元E卡,下单赠300元暴雪点卡】旗舰级7nm游戏显卡,16GB,HBM2显存,强大游戏和内容创建618狂欢节，保价618",XFX京东自营旗舰店,4896,200+条评价,https://item.jd.com/100002948244.html,29:46.1

"华硕（ASUS）ROG-STRIX-GeForce RTX2070-O8G-GAMING 1410-1845MHz 14000MHz猛禽游戏显卡【到手价4399！三期免息】全新超频软件！自带RGB神光同步,升级镜面直触技术！点我》》热卖2080猛禽！全新风扇信仰赞！",华硕京东自营旗舰店,4599,5700+条评价,https://item.jd.com/100000913459.html,29:45.4

"微星（MSI）旗舰魔龙Z GeForce RTX 2070 GAMING Z 8G GDDR6 电竞游戏电脑独立显卡 GAMING升级红龙成魔，定制PCB供电增强！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,4299,7900+条评价,https://item.jd.com/100001057406.html,30:42.1

"七彩虹（Colorful）iGame GeForce RTX 2070 Vulcan X OC GDDR6 8G电竞游戏显卡【白条6期免息，满2000-200】高频火神系列！LCD显示屏状态检测！合金压铸外甲！RGB灯效！一键超频！抢购2080火神",七彩虹京东自营旗舰店,4199,1万+条评价,https://item.jd.com/100001057352.html,30:41.5

"技嘉(GIGABYTE)AORUS GeForce RTX 2070 XTREME 大雕 1815MHz 14140MHz 256bit GDDR6 8G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,4049,2700+条评价,https://item.jd.com/100001285750.html,29:46.3

"EVGA GeForce RTX 2070 XC Black GAMING 8G显存1620MHz 14000MHzRGB游戏显卡【EVGA，信仰之选】rtx2070显卡，RGB炫彩灯光，智能超频软件",EVGA京东自营官方旗舰店,3999,80+条评价,https://item.jd.com/100003557955.html,30:42.0

"七彩虹（Colorful）iGame GeForce RTX 2070 Neptune OC GDDR6 8G电竞游戏一体式水冷显卡【白条6期免息，满2000-200，再送罗技G402】新一代水神，金属拉丝外甲，族徽背板，全新鳃纱密集水道技术！抢购2070火神",七彩虹京东自营旗舰店,3999,1万+条评价,https://item.jd.com/100002673918.html,31:33.8

"微星（MSI）双风魔龙 GeForce RTX 2070 GAMING 8G GDDR6 电竞游戏电脑独立显卡 GAMING升级红龙成魔，定制PCB供电增强！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,3999,7900+条评价,https://item.jd.com/100003900060.html,31:33.9

"七彩虹（Colorful）iGame GeForce RTX 2070 RNG Edition GDDR6 8G电竞游戏显卡【白条6期免息，满2000-200，再送罗技G402】2070定制显卡，RNG队员签名背板，自定义LCD显示屏！抢购2070火神",七彩虹京东自营旗舰店,3999,1万+条评价,https://item.jd.com/100002583038.html,31:34.1

"七彩虹（Colorful）iGame GeForce RTX 2070 AD Special OC GDDR6 8G电竞游戏显卡【白条6期免息，满2000-200】高体质芯片！RGB灯效！能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,3899,1万+条评价,https://item.jd.com/100001154892.html,30:41.1

"华硕（ASUS） DUAL-RTX2070-O8G-EVO OC 1410-1740MHz 14000MHz 256bit 游戏电竞专业显卡 8G 【到手价3699！三期免息】高刷新率,轴流风扇+0db静音技术,低温静音,强化背板!点我》》2070猛禽！满血高频性能怪兽！",华硕京东自营旗舰店,3849,200+条评价,https://item.jd.com/100004000682.html,29:46.6

"七彩虹（Colorful）iGame GeForce RTX 2070 Ultra GDDR6 8G电竞游戏显卡【白条6期免息，满2000-200】金属背板！光子裂痕RGB！智能停转！一键超频！抢购2070火神",七彩虹京东自营旗舰店,3799,1万+条评价,https://item.jd.com/100000675501.html,29:46.6

"技嘉(GIGABYTE)GeForce RTX 2070 GAMING OC 1740-1725MHz 14000MHz 256bit GDDR6 8G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,3649,2700+条评价,https://item.jd.com/100000902612.html,29:46.0

"技嘉(GIGABYTE)GeForce RTX 2070 GAMING OC WHITE 1740-1725MHz 14000MHz 256bit GDDR6 8G 小白电竞显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,3649,2.4万+条评价,https://item.jd.com/100001526620.html,30:41.5

"技嘉(GIGABYTE)AORUS GeForce RTX 2070 小雕 1770MHz 14000MHz 256bit GDDR6 8G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,3589,2700+条评价,https://item.jd.com/100001285748.html,29:46.7

"微星（MSI）三风黑龙 GeForce RTX 2070 8G DUKE 龙爵 256BIT GDDR6 电脑独立电竞游戏显卡痞帅龙爵，刀锋4代风扇，舒适音控！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,3499,7900+条评价,https://item.jd.com/100001057364.html,29:46.4

"索泰(ZOTAC)RTX2070至尊PLUS OC8显卡自营/台式机游戏吃鸡独立显卡8GD6/1410-1740/14000MHz 【616直接干!叠100券送T恤】得心应手打BOSS!RGB灯效3D-STORM四风扇散热更冷静!10+2相供电更稳定!点击领100券及查看T恤领取方法",索泰京东自营旗舰店,3499,100+条评价,https://item.jd.com/100002577208.html,30:41.4

"索泰(ZOTAC)RTX2070 X-GAMING G3 【616直接干!叠100券送T恤】这届X-GAMING温度就是低!3热管3风扇强化散热!6+2相供电加长PCB更稳定!点击领100券及查看T恤领取方法",索泰京东自营旗舰店,3399,200+条评价,https://item.jd.com/100002238509.html,29:45.7

"铭瑄（MAXSUN）MS-GeForce RTX2070 终结者 8G 1410-1620MHz/GDDR6 光线追踪/AI人工智能/战地5 游戏显卡【满减低至3299！】618提前放价，王炸级钜惠！显卡2060到手低至2199！1660低至1399！更多板卡大料请猛戳",铭瑄京东自营旗舰店,3399,900+条评价,https://item.jd.com/100001916174.html,29:46.5

"华硕（ASUS）AREZ-STRIX-RXVEGA64-O8G-GAMING 1590MHz 2048bit Apex英雄猛禽游戏显卡 8G 【到手价2999】RGB神光同步!强劲三风扇加镜面直触!13相超合金供电,全自动化制程技术!点我》》AMD旗舰级,7nm游戏显卡！",华硕京东自营旗舰店,3299,700+条评价,https://item.jd.com/100003026146.html,30:41.0

"索泰(ZOTAC)RTX2070毁灭者显卡自营/台式机游戏吃鸡独立显卡8GD6/1410-1620/14000MHz 【616直接干!价格血拼送T恤】小体量大能量!9+10cm非对称散热!5根铜热管!LOGO信仰灯!6+2相强化供电!T恤领取方法",索泰京东自营旗舰店,3249,100+条评价,https://item.jd.com/100002852444.html,30:41.2

"华硕（ASUS）ROG-STRIX-GeForce RTX2060-O6G-GAMING 1365-1860MHz 14000MHz猛禽游戏电竞显卡【到手价2999！三期免息】全自动化制程技术,超合金供电,升级镜面直触,自带RGB神光同步！点我》》2070猛禽！满血高频性能怪兽！",华硕京东自营旗舰店,3149,2600+条评价,https://item.jd.com/100002821746.html,30:41.1

"丽台（LEADTEK）NVIDIA Quadro P2000 5GB GDDR5/160bit/140GBps/CUDA核心1024 建模渲染绘图专业显卡【丽台年中钜惠618】历史低价！品牌秒杀（部分型号）入门级性价比之选，功耗低至40W快来看看》",丽台京东自营旗舰店,2999,3000+条评价,https://item.jd.com/4991746.html,30:41.9

"华硕（ASUS）XG STATION PRO 通用外置显卡盒全金属独立显卡坞笔记本外接雷电3接口电竞游戏发烧【笔记本秒变吃鸡利器】适配华硕全系列显卡(除海神),智能温控,全金属机身,双风扇酷冷防尘!点我》》580猛禽+华硕显卡坞!",华硕京东自营旗舰店,2999,100+条评价,https://item.jd.com/6529150.html,31:33.7

七彩虹（Colorful）iGame GeForce RTX 2060 Vulcan X OC V2 GDDR6 6G电竞游戏电脑显卡,七彩虹京东自营旗舰店,2999,100+条评价,https://item.jd.com/100006052372.html,31:34.4

"技嘉(GIGABYTE)AORUS GeForce RTX 2060 XTREME 6G 大雕 2.0版 192bit GDDR6 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,2879,100+条评价,https://item.jd.com/100003835858.html,31:33.7

"微星（MSI）旗舰魔龙 GeForce RTX 2060 GAMING Z 6G GDDR6 1830MHz 电脑独立游戏电竞显卡 GAMING升级红龙成魔，定制PCB供电增强！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,2799,7800+条评价,https://item.jd.com/100002801776.html,29:46.3

"影驰（Galaxy）GeForce RTX 2060 6G 大将 GDDR6 自营台式机电竞游戏显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",影驰京东自营旗舰店,2799,400+条评价,https://item.jd.com/100002554600.html,31:34.1

"华硕 (ASUS) TURBO-GeForce RTX2060-6G 6G 192bit 游戏电竞独立显卡【到手价2699】改进型外罩,强劲散热!双滚珠轴承风扇,延长使用寿命!全自动化制程!点我》》2060猛禽！信仰升级,猛禽高规!",华硕京东自营旗舰店,2799,300+条评价,https://item.jd.com/100003122976.html,31:34.7

"七彩虹（Colorful）iGame GeForce RTX 2060 Advanced OC GDDR6 6G电竞游戏显卡【白条6期免息，满1000-100】高体质芯片！RGB灯效！能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,2699,500+条评价,https://item.jd.com/100003877156.html,30:41.8

"华硕 ASUS DUAL-RTX2060-O6G-EVO OC 1365-1785MHz 14000MHz 192bit 电竞特工系列专业游戏电竞显卡 6G 【到手价2599！三期免息】强化金属框架,超合金供电,全制动化制程技术！点我》》2060猛禽！猛禽高规,信仰升级！",华硕京东自营旗舰店,2699,100+条评价,https://item.jd.com/100002953725.html,31:34.3

"映众（Inno3D）GeForce RTX2060冰龙超级版 ICHILL 6GB/192Bit GDDR6 PCI-E 电脑独立游戏电竞显卡三年质保！玩转次世代实时光线追踪游戏！三风扇8mm热管高规散热！呼吸灯，全尺寸金属背板！升级2070双风扇",映众京东自营旗舰店,2699,80+条评价,https://item.jd.com/100005718952.html,31:34.5

"技嘉(GIGABYTE)GeForce RTX 2060 GAMING OC PRO 6G 14000MHz 192bit GDDR6专业显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,2679,1700+条评价,https://item.jd.com/100003026188.html,31:34.1

"索泰(ZOTAC)RTX2060至尊PLUS OC6显卡自营/台式机游戏吃鸡独立显卡6GD6/1365-1770/14000MHz 【616直接干!叠100券送T恤】得心应手打BOSS!RGB灯效3D-STORM四风扇散热更冷静!10+2相供电更稳定!点击领100券及查看T恤领取方法",索泰京东自营旗舰店,2649,5.6万+条评价,https://item.jd.com/100002822298.html,29:46.2

"七彩虹（Colorful）iGame GeForce RTX 2060 AD Special OC GDDR6 6G电竞游戏显卡【白条6期免息，满1000-100】高体质芯片！RGB灯效！能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,2649,900+条评价,https://item.jd.com/100003877038.html,30:41.2

"七彩虹（Colorful）iGame GeForce RTX 2060 Ultra GDDR6 6G电竞游戏显卡【白条6期免息，满1000-100】金属背板！RGB灯效！智能停转！一键超频！抢购2070火神",七彩虹京东自营旗舰店,2599,6.5万+条评价,https://item.jd.com/100002004455.html,29:45.2

"华硕（ASUS） TUF-GeForce RTX2060-O6G-GAMING 14000MHz 1365-1740MHz游戏电竞专业显卡 6G 【到手价2499！三期免息】高刷新率,畅玩FPS游戏,全新TUF系列,全自动化制程,坚固耐用,持久稳定!点我》》2060猛禽！信仰升级,猛禽高规!",华硕京东自营旗舰店,2599,600+条评价,https://item.jd.com/100003292738.html,30:41.9

"技嘉(GIGABYTE)GTX 1070 G1 8G/256bit绝地求生/吃鸡显卡 GTX1070 G1 全国联保售后无忧，白条分期免息关注商品优惠早知道！",灵竞DIY旗舰店,2599,600+条评价,https://item.jd.com/10512391788.html,30:42.3

"微星（MSI）万图师XS GeForce RTX 2060 VENTUS XS C 6G OC 1710MHz GDDR6 电脑独立游戏电竞显卡小尺寸更好搭！高性能体验光追！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,2499,7800+条评价,https://item.jd.com/100002801774.html,30:41.4

"技嘉(GIGABYTE)GeForce RTX 2060 WINDFORCE OC 6G 14000MHz 192bit GDDR6电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,2499,2.4万+条评价,https://item.jd.com/100001978939.html,30:42.2

"磐镭GTX1080显卡8G DDR5X 雷神吃鸡游戏DIY组装机独立显卡超1070Ti 此商品将于2019-06-17,00点结束闪购特卖，这就是生活",磐镭数码官方旗舰店,2498,1200+条评价,https://item.jd.com/27427714316.html,31:34.5

"铭瑄（MAXSUN） MS-GeForce RTX2060 终结者 6G 1365-1680MHz/GDDR6 光线追踪/AI人工智能/战地5 游戏显卡【满减低至2199！】618提前放价，王炸级钜惠！显卡2070到手低至3299！1660低至1399更多板卡大料请猛戳",铭瑄京东自营旗舰店,2439,900+条评价,https://item.jd.com/100002017341.html,30:41.2

"华硕（ASUS) ROG-STRIX-GeForce GTX1660TI-O6G-GAMING 1500-1890MHz 192bit 猛禽游戏电竞专业显卡 6G 【到手价2199！三期免息】强化金属框架,RGB神光同步,三风扇+镜面直触,全制动化制程技术！点我》》2060猛禽！信仰升级,猛禽高规!",华硕京东自营旗舰店,2399,1400+条评价,https://item.jd.com/100003293296.html,29:45.3

"华硕（ASUS）AREZ-STRIX-RXVEGA56-O8G-GAMING 1297-1573MHz 8G/2048bit Apex英雄猛禽游戏显卡【到手价2299】全自动化制程技术,12+1相超合金供电,镜面直触+翼型扇叶!点我》》猛禽VEGA64！信仰升级！",华硕京东自营旗舰店,2399,1000+条评价,https://item.jd.com/100003026154.html,29:46.0

"华硕（ASUS) ROG-STRIX-GeForce GTX1660TI-O6G-GAMING 1500-1890MHz 192bit 猛禽游戏电竞专业显卡 6G 【到手价2199！三期免息】强化金属框架,RGB神光同步,三风扇+镜面直触,全制动化制程技术！点我》》2060猛禽！信仰升级,猛禽高规!",华硕京东自营旗舰店,2399,1400+条评价,https://item.jd.com/100003293296.html,30:42.3

"索泰(ZOTAC)RTX2060 X-GAMING OC显卡自营/台式机游戏吃鸡独立显卡6GD6/1365-1740/14000MHz 【616直接干!叠100券送T恤】这届X-GAMING温度就是低!静音3热管3风扇,6+2相供电加长PCB更稳定!点击领100券及查看T恤领取方法",索泰京东自营旗舰店,2349,5.6万+条评价,https://item.jd.com/100003210740.html,29:45.8

"索泰(ZOTAC)RTX2060毁灭者HB显卡自营/台式机游戏吃鸡独立显卡6GD6/1365-1680/14000MHz 【616直接干!价格血拼送T恤】升级就选我!2热管双风扇散热器,高效II代白金效能用料更节能!不挑机箱和电源!T恤领取方法",索泰京东自营旗舰店,2249,5.6万+条评价,https://item.jd.com/100004000684.html,29:45.6

"耕升（GAINWARD）GeForce RTX2060显卡 6G 图灵光追吃鸡显卡 RTX2060 追风版 RTX2060新品首发,在仓直发。G魂OC同步上市",耕升旗舰店,2199.1,300+条评价,https://item.jd.com/40957856227.html,31:33.6

"影驰（Galaxy）GeForce GTX1660 Ti 6G大将 GDDR6 自营台式机电竞游戏显卡【3年质保,过6关,买6酱!】LED灯效,3D折弯热管设计,稳定高效电容电感！",影驰京东自营旗舰店,2199,3000+条评价,https://item.jd.com/100002192323.html,30:41.3

"华擎（ASRock） Radeon RX VEGA 56 8G 幻影电竞宙斯吃鸡游戏显卡【晒单送100元E卡,抢150元暴雪点卡】三年质保,流畅吃鸡,FreeSync2HDR技术画面滑顺不撕裂！【看Z390太极】",华擎京东自营旗舰店,2199,200+条评价,https://item.jd.com/8413426.html,31:34.3

"蓝宝石 (Sapphire) Radeon RX Vega 56 8G HBM2 白金版 OC 1208-1512/1600MHz DX12 吃鸡显卡【购Vega-56送150元暴雪点卡】HBM2高带宽显存，7+1相供电，背光logo灯，引爆游戏激情【点此：7nm制程工艺】",蓝宝石京东自营旗舰店,2099,5400+条评价,https://item.jd.com/7576289.html,29:45.5

"微星（MSI）旗舰魔龙 GeForce GTX 1660 Ti GAMING X 6G GDDR6 1875MHz 电脑独立游戏电竞显卡【赠6000刀币小紫本助力TI9！】GAMING升级红龙成魔，定制PCB，强化性能！【显卡618，优惠可达2000！点此",微星京东自营旗舰店,2099,1.3万+条评价,https://item.jd.com/100003292774.html,29:46.2

"迪兰（Dataland）RX VEGA56 8G X-Serial战神 1177-1478/1600MHz 8GB/2048-bit HBM2 DX12独立游戏显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",迪兰京东自营旗舰店,2099,1200+条评价,https://item.jd.com/7186211.html,29:46.5

"七彩虹（Colorful）iGame GeForce GTX 1660 Ti Advanced OC 6G 电竞游戏显卡【白条6期免息，满1000-100】高体质芯片！RGB灯效！能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,1999,500+条评价,https://item.jd.com/100003375116.html,30:42.1

"技嘉(GIGABYTE)GeForce GTX 1660Ti GAMING OC 6G 12000MHz 192bit GDDR6 6G 电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,1959,4900+条评价,https://item.jd.com/100003288642.html,29:45.1

"七彩虹（Colorful）iGame GeForce GTX 1660Ti Ultra 6G GDDR6 电竞游戏显卡【白条6期免息，满1000-100】金属背板！RGB灯效！全覆盖散热！镀银PCB！一键超频！抢购2070火神",七彩虹京东自营旗舰店,1949,5900+条评价,https://item.jd.com/100003098848.html,29:45.5

"七彩虹（Colorful）iGame GeForce GTX 1660 Ti AD Special OC 电竞游戏显卡【白条6期免息，满1000-100】高体质芯片！RGB灯效！能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,1949,2000+条评价,https://item.jd.com/100003375026.html,29:46.4

"索泰(ZOTAC)GTX1660Ti X-GAMING OC显卡自营/台式机游戏吃鸡独立显卡6GD6/1500-1830/12000MHz 【616直接干!价格血拼送T恤】这届X-GAMING温度就是低!静音3热管3风扇,6+2相供电,加长PCB!T恤领取方法",索泰京东自营旗舰店,1949,800+条评价,https://item.jd.com/100002242949.html,29:46.6

"七彩虹（Colorful）战斧 GeForce GTX 1660 Ti 6G 电竞游戏显卡【白条6期免息，满1000-100】黑红配色！智能调速风扇！装甲型金属背板！S型热管设计！抢购2070火神",七彩虹京东自营旗舰店,1899,900+条评价,https://item.jd.com/100002279317.html,29:45.7

"微星（MSI）电竞装甲师 GeForce GTX 1660 Ti ARMOR 6G OC 1860MHz GDDR6 电脑独立游戏电竞显卡【赠6000刀币小紫本助力TI9！】定制PCB，双风更好搭！性价比之选！【显卡618，优惠可达2000！点此",微星京东自营旗舰店,1899,1.3万+条评价,https://item.jd.com/100003292760.html,29:45.8

"微星（MSI）至简万图师 GeForce GTX 1660 Ti VENTUS XS C 6G OC 1830MHz GDDR6 电脑独立游戏电竞显卡【赠6000刀币小紫本助力TI9！】小尺寸大空间！热管直触，优化风扇！【显卡618，优惠可达2000！点此",微星京东自营旗舰店,1899,1.3万+条评价,https://item.jd.com/100003301482.html,30:41.8

"技嘉(GIGABYTE)GeForce GTX 1660Ti WINDFORCE OC 6G 12000MHz 192bit GDDR6电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,1899,1100+条评价,https://item.jd.com/100003288662.html,30:42.1

"微星（MSI）旗舰魔龙 GeForce GTX 1660 GAMING X 6G 电脑独立游戏电竞显卡【赠6000刀币小紫本助力TI9！】GAMING升级红龙成魔，定制PCB，强化性能！【显卡618，优惠可达2000！点此",微星京东自营旗舰店,1799,800+条评价,https://item.jd.com/100003855156.html,30:41.1

"华硕（ASUS）ROG-STRIX-RX590-8G-GAMING 1545-1565MHz/8000MHz 256bit Apex英雄猛禽 8G显卡【到手价1699】采用12纳米高端工艺，更高的频率，神光同步灯效，智能超频！点我》》AREZ-VEGA56！信仰升级！",华硕京东自营旗舰店,1799,700+条评价,https://item.jd.com/100001895320.html,31:34.8

铭瑄（MAXSUN） MS-GeForce GTX1660Ti 终结者 6G 绝地求生/游戏显卡 MS-1660TI终结者6G,铭瑄官方旗舰店,1784,400+条评价,https://item.jd.com/45703120612.html,31:34.2

"索泰(ZOTAC)GTX1660Ti毁灭者OC HA显卡自营/台式机游戏吃鸡独立显卡6GD6/1500-1800/12000MHz 【616直接干!价格血拼送T恤】升级就选我!2热管双风扇散热器,高效II代白金效能用料更节能!不挑机箱和电源!T恤领取方法",索泰京东自营旗舰店,1749,600+条评价,https://item.jd.com/100003472428.html,29:45.6

"铭瑄（MAXSUN） MS-GeForce GTX1660Ti 终结者 6G 1500-1770MHz/GDDR6 APEX英雄标配显卡/绝地求生游戏显卡【直降低至1699！】618提前放价，王炸级钜惠！显卡2060到手低至2199！1660低至1399更多板卡大料请猛戳",铭瑄京东自营旗舰店,1699,7300+条评价,https://item.jd.com/100002325935.html,29:45.9

"七彩虹（Colorful）iGame GeForce GTX 1660 AD Special OC 6G GDDR5 游戏电竞显卡【白条6期免息，满1000-100】高体质芯片！RGB灯效！能量溢动！银鲨2.0！散热更强劲！抢购2070火神",七彩虹京东自营旗舰店,1649,400+条评价,https://item.jd.com/100002862747.html,30:41.6

"技嘉(GIGABYTE)GeForce GTX 1660 GAMING OC 6G 8002MHz 192bit GDDR5电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,1629,2700+条评价,https://item.jd.com/100002520273.html,29:45.4

"华硕（ASUS） TUF-GeForce GTX1660-O6G-GAMING OC 1530-1845MHz 8002MHz 电竞特工系列游戏电竞专业显卡 6G 【到手价1499】高刷新率,畅玩FPS游戏,双滚珠轴承风扇,低温静音,强化背板,坚固耐用!点我》》1660Ti猛禽！传承延续,信仰升级!",华硕京东自营旗舰店,1599,2100+条评价,https://item.jd.com/100002609751.html,29:45.3

"蓝宝石（Sapphire）RX590 8G D5 超白金极光特别版1545-1560MHz/8000-8400MHz 8GB/256bit GDDR5 DX12显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",蓝宝石京东自营旗舰店,1599,"二手有售 4100+条评价",https://item.jd.com/100001800296.html,30:41.0

"影驰（Galaxy）GeForce GTX1660 6G骁将 GDDR5 自营台式机电竞游戏显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",影驰京东自营旗舰店,1599,3000+条评价,https://item.jd.com/100003883758.html,30:41.3

"微星（MSI）电竞装甲师 GeForce GTX 1660 ARMOR 6G OC 电脑独立游戏电竞显卡【赠6000刀币小紫本助力TI9！】定制PCB，双风更好搭！性价比之选！【显卡618，优惠可达2000！点此",微星京东自营旗舰店,1599,600+条评价,https://item.jd.com/100002520817.html,30:41.5

"七彩虹（Colorful）战斧 GeForce GTX 1660 6G GDDR5 电竞游戏显卡【白条6期免息，满1000-100】黑红配色！智能调速风扇！装甲型金属背板！S型热管设计！抢购2070火神",七彩虹京东自营旗舰店,1549,600+条评价,https://item.jd.com/100003980178.html,30:42.0

"技嘉(GIGABYTE)GeForce GTX 1660 OC 6G 8002MHz 192bit GDDR5电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,1549,500+条评价,https://item.jd.com/100002520275.html,31:34.5

"蓝宝石（Sapphire）RX590 8G D5 超白金 OC 1545MHz/8000MHz 8GB/256bit GDDR5 DX12 吃鸡显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",蓝宝石京东自营旗舰店,1499,5400+条评价,https://item.jd.com/100002293180.html,29:45.6

"索泰(ZOTAC)GTX1660 X-GAMING OC HA显卡自营/台式机游戏吃鸡独立显卡6GD5/1530-1815/8002MHz 【616直接干!价格血拼送T恤】这届X-GAMING温度就是低!铜热管3风扇强化散热!4+1相供电加长PCB更稳定!T恤领取方法",索泰京东自营旗舰店,1499,400+条评价,https://item.jd.com/100004876888.html,29:45.7

"微星（MSI）至简万图师 GeForce GTX 1660 VENTUS XS C 6G OC 电脑独立游戏电竞显卡【赠6000刀币小紫本助力TI9！】小尺寸大空间！热管直触，优化风扇！【显卡618，优惠可达2000！点此",微星京东自营旗舰店,1499,1600+条评价,https://item.jd.com/100003855158.html,29:46.3

"铭瑄（MAXSUN） MS-GeForce GTX1660 终结者 6G 1530-1785MHz/GDDR5 APEX英雄标配显卡/战地V优选游戏显卡【满减到手低至1399！】618提前放价，王炸级钜惠！显卡2060到手低至2199！1660ti低至1699！更多板卡大料请猛戳",铭瑄京东自营旗舰店,1499,7300+条评价,https://item.jd.com/100004117248.html,29:46.7

"索泰(ZOTAC)GTX1660毁灭者OC HA显卡自营/台式机游戏吃鸡独立显卡6GD5/1530-1815/8002MHz 【616直接干!价格血拼送T恤】升级就选我!2热管2风扇强化散热!高效II代白金效能用料更节能!不挑机箱和电源!T恤领取方法",索泰京东自营旗舰店,1499,100+条评价,https://item.jd.com/100004032024.html,31:34.3

"耕升（GAINWARD）GTX1060/1660显卡 6G 台式机电脑游戏显卡 GTX1660 追风图灵新品 6G GTX1066/GTX1660同台竞技，双重选择，欢迎选购图灵加购新品在这里",耕升旗舰店,1399.1,4000+条评价,https://item.jd.com/43301624019.html,30:42.2

"技嘉(GIGABYTE)GeForce GTX 1060 G1 Gaming D5X 6G显卡全新三风扇升级设计,高能电竞,G1信仰,低功耗,轻松游戏无压力!",技嘉京东自营官方旗舰店,1399,"二手有售 4300+条评价",https://item.jd.com/100001396955.html,29:46.1

"盈通（yeston） RX590 8G D5 游戏高手游戏独立显卡【满减仅需1299，关注店铺减10，送150元暴雪点卡】【3期免息】颜值与实力爆表！三风扇，自带启停技术！中二之光灯效！赢AMD50周年CPU！点我惊喜！",盈通显卡京东自营旗舰店,1399,900+条评价,https://item.jd.com/100001734107.html,30:41.6

"丽台（LEADTEK）NVIDIA Quadro P620 / 2GB GDDR5/128-bit/ 80GB/s/CUDA核心512/PCI-E3.0/专业显卡【丽台年中钜惠618】历史低价！品牌秒杀（部分型号）入门级性价比之选，功耗低至40W快来看看》",丽台京东自营旗舰店,1399,2700+条评价,https://item.jd.com/6959146.html,30:41.8

"迪兰（Dataland）DEVIL RX 590 8G V2 1545-1555/8000MHz 8GB/256-bit GDDR5 DX12 VR游戏显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",迪兰京东自营旗舰店,1399,100+条评价,https://item.jd.com/100002953193.html,30:41.9

"索泰(ZOTAC)GTX1060至尊Plus显卡自营/台式机游戏吃鸡独立显卡6GD5/1531-1746/8008MHz 【616直接干!价格血拼!】得心应手打BOSS!3D-STORM四风扇散热更冷静!8+2相供电更稳定!点击进入618索泰专场",索泰京东自营旗舰店,1399,5.6万+条评价,https://item.jd.com/100001529031.html,31:33.9

"映众 GeForce GTX1060 X3冰龙海量版 ICHILL 1771/8000MHz 6GB/192Bit GDDR5 PCI-E 吃鸡显卡三年保！畅玩APEX英雄/吃鸡/只狼!超公版性能更强劲，三风扇巨无霸更低温，带金属背板及LED呼吸灯！升级2060冰龙",映众京东自营旗舰店,1349,9000+条评价,https://item.jd.com/3251468.html,29:45.2

"华硕（ASUS)ROG-STRIX-GTX1650-O4G-GAMING 1485-1860MHZ 8002MHZ 128bit 猛禽游戏电竞专业显卡 4G 【到手价1299】铜管直触散热,风扇智能停转,神光同步灯效,全自动制程工艺！点我》》1660Ti猛禽！传承延续,信仰升级!",华硕京东自营旗舰店,1299,100+条评价,https://item.jd.com/100003120617.html,29:45.0

"索泰(ZOTAC)GTX1060 X-GAMING OC显卡自营/台式机游戏吃鸡独立显卡6GD5/1569-1784/8008MHz 【616直接干!价格血拼!】网红爆款!LOGO信仰灯!静音3热管双风扇强化散热!4+1相供电更稳定!点击进入618索泰专场",索泰京东自营旗舰店,1299,"二手有售 5.6万+条评价",https://item.jd.com/3281156.html,29:45.2

"华硕（ASUS)ROG-STRIX-GTX1650-O4G-GAMING 1485-1860MHZ 8002MHZ 128bit 猛禽游戏电竞专业显卡 4G 【到手价1299】铜管直触散热,风扇智能停转,神光同步灯效,全自动制程工艺！点我》》1660Ti猛禽！传承延续,信仰升级!",华硕京东自营旗舰店,1299,100+条评价,https://item.jd.com/100003120617.html,31:34.4

"讯景（XFX）RX 590 8G 黑狼版 1580MHz/8GHz 256bit DDR5 显卡【下单赠150元暴雪点卡】12nm制程.8G大显存.全特效运行主流游戏618狂欢节，保价618",XFX京东自营旗舰店,1199,1900+条评价,https://item.jd.com/100001836346.html,29:45.9

"微星（MSI）旗舰魔龙 GeForce GTX 1650 GAMING X 4G 游戏电竞电脑独立显卡 GAMING升级红龙成魔，定制PCB，强化性能！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,1199,300+条评价,https://item.jd.com/100005114232.html,30:42.2

"影驰（Galaxy）GeForce GTX1650 骁将 128bit GDD5 4GB 自营台式机电竞游戏显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",影驰京东自营旗舰店,1199,3000+条评价,https://item.jd.com/100003038889.html,31:33.8

"华硕（ASUS）DUAL-GTX1650-O4G 1485-1755MHZ 128bit 游戏电竞专业显卡 4G 【到手价1199】IP5X防尘设计,冷静散热,全自动化制程工艺！点我》》1660Ti电竞特工！全新外观,性能崛起!",华硕京东自营旗舰店,1199,100+条评价,https://item.jd.com/100003120615.html,31:34.0

"华硕（ASUS）DUAL-RX580-O8G OC 1360-1380MHz 256bit GDDR5 DX12 Apex英雄雪豹8G显卡【购DUAL-RX580-O8G抢120元暴雪点卡】全自动制程，超合金供电设计!智能超频!IP5X防尘认证,风扇启停技术!送卡规则,详情请戳》》",华硕京东自营旗舰店,1169,"二手有售 6900+条评价",https://item.jd.com/5077684.html,29:46.4

"华硕（ASUS）DUAL-RX580-O8G OC 1360-1380MHz 256bit GDDR5 DX12 Apex英雄雪豹8G显卡【购DUAL-RX580-O8G抢120元暴雪点卡】全自动制程，超合金供电设计!智能超频!IP5X防尘认证,风扇启停技术!送卡规则,详情请戳》》",华硕京东自营旗舰店,1169,6900+条评价,https://item.jd.com/5077684.html,31:34.0

"技嘉(GIGABYTE)GeForce GTX 1650 GAMING OC 4G/128bit/GDDR5/新品/电竞游戏显卡不等618,限量秒杀(部分型号),现在开始!!!AORUS系列享3期免息(部分型号)!!!技嘉电源,这个夏天,低价冲浪!!",技嘉京东自营官方旗舰店,1159,300+条评价,https://item.jd.com/100003138843.html,30:42.2

"盈通 Yeston RX580-8G D5 游戏高手 OC 游戏独立显卡2304SP 【满减到手1099，关注店铺有礼，618钜惠提前享，送120元暴雪点卡】【3期免息】颜值与实力爆表！豪华三风扇，自带启停技术！中二之光灯效！进店有礼！",盈通显卡京东自营旗舰店,1149,1万+条评价,https://item.jd.com/100002771218.html,30:42.0

"蓝宝石（Sapphire）RX580 2048SP 8G D5 白金版 OC 1306MHz/8000MHz 8GB/256bit GDDR5 DX12 吃鸡显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",蓝宝石京东自营旗舰店,1099,6100+条评价,https://item.jd.com/100000784748.html,29:45.5

"讯景（XFX）RX 580 8G 黑狼版 1366MHz/8GHz-1386MHz/8.1GHz 256bit GDDR5 显卡【下单赠120元暴雪点卡】DOTA2游戏推荐显卡，8G显存吃的饱，freeSync拒绝画面撕裂。618狂欢节，保价618",XFX京东自营旗舰店,1099,"二手有售 6300+条评价",https://item.jd.com/4075141.html,30:41.7

"华硕（ASUS）EX-RX580 2048SP-8G 1284-1294MHz 4G/256bit GDDR5 DX12 Apex英雄 8G独立显卡【到手价1099】双滚珠静音风扇,畅玩热门游戏!全自动工艺制程！点我》》580雪豹人气爆款！！",华硕京东自营旗舰店,1099,900+条评价,https://item.jd.com/100002131055.html,31:34.2

"七彩虹（Colorful）战斧 GeForce GTX 1650 4G GDDR5 电竞游戏显卡【白条6期免息，满500-50】黑红配色！智能调速风扇！装甲型金属背板！S型热管设计！抢购2070火神",七彩虹京东自营旗舰店,1049,1200+条评价,https://item.jd.com/100003061369.html,29:46.2

"七彩虹（Colorful）iGame GeForce GTX 1650 Ultra 4G GDDR5 电竞游戏显卡【白条6期免息，满500-50】一体式装甲！RGB灯效！装甲型金属背板！U型热管设计！抢购2070火神",七彩虹京东自营旗舰店,1049,600+条评价,https://item.jd.com/100003061325.html,30:41.4

"微星（MSI）至简万图师 GeForce GTX 1650 VENTUS XS 4G OC 游戏电竞电脑独立小卡显卡小巧更好搭！优化风扇强散热，OC强性能！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,1049,100+条评价,https://item.jd.com/100003206323.html,31:34.6

"铭瑄（MAXSUN）MS-RX580 巨无霸PLUS 8G 1340MHz/8000MHz/GDDR5/256bit 电竞游戏显卡【直降叠满减低至959！】618提前放价，王炸级钜惠！RX580-2048SP显卡低至799！B360主板低至369更多板卡钜惠请猛戳！",铭瑄京东自营旗舰店,1009,8800+条评价,https://item.jd.com/7340907.html,30:41.2

"微星（MSI）GeForce GTX 1050 Ti GAMING X 4G 1290-1493MHZ 128BIT GDDR5 PCI-E 3.0 旗舰红龙吃鸡显卡炫白龙魂灯,智能启停风扇！【显卡618，优惠可达2000！部分还赠TI9小紫本！点此",微星京东自营旗舰店,999,2.2万+条评价,https://item.jd.com/3977224.html,29:46.2

"迪兰（Dataland）RX 580 2048SP 8G X-Serial 战将 1284-1310/8000MHz 8GB/256-bit GDDR5 DX12独立游戏显卡此商品将于2019-06-17,00点结束闪购特卖，游戏装备闪购专场",迪兰京东自营旗舰店,999,2900+条评价,https://item.jd.com/100001232432.html,29:46.6

"索泰(ZOTAC)GTX1050Ti X-GAMING OC显卡自营/台式机游戏吃鸡独立显卡4GD5/1354-1468/7008MHz 【616直接干!价格血拼!】LOGO信仰灯!静音2热管双风扇强化散热!第II代白金效能用料更节能!不挑机箱和电源!点击进入618索泰专场",索泰京东自营旗舰店,999,"二手有售 1.1万+条评价",https://item.jd.com/3528459.html,30:41.7

"迪兰（Dataland） RX580 2048SP X-Serial战将吃鸡游戏独立显卡 RX580-8G战将（HDMI/DP/DVI接口）关注店铺领券下单更优惠，3种规格产品，显示接口不一样，各位按需自助下单!各位按需下单!各位按需下单!",迪兰旗舰店,999,4300+条评价,https://item.jd.com/36529198359.html,31:34.4

"技嘉(GIGABYTE)GTX 1050 OC 1379-1493MHz/7008MHz 2G/128bit GDDR5显卡进阶版风之力2X散热系统/全新耐久用料品质/技嘉1050 OC,高性价比显卡助你轻松游戏!★京东热销高规1050Ti-G1★",技嘉京东自营官方旗舰店,949,"二手有售 1.5万+条评价",https://item.jd.com/4055764.html,30:42.4

"华硕（ASUS ）EX-RX580 2048SP-4G 1284-1294MHz 4G/256bit GDDR5 DX12 Apex英雄 4G独立游戏显卡【到手价949】全自动工艺制程,双滚珠静音风扇,畅玩热门游戏！点我》》升级8G大显存！！",华硕京东自营旗舰店,949,1900+条评价,https://item.jd.com/100001895376.html,31:33.8

"铭瑄（MAXSUN） MS-RX580 2048SP 巨无霸 8G 1284MHz/7000MHz GDDR5/256bit 游戏显卡/吃鸡显卡【满减低至799！】618提前放价，王炸级钜惠！RX588满血版显卡低至959！B360主板低至369！更多板卡大料请猛戳",铭瑄京东自营旗舰店,899,8800+条评价,https://item.jd.com/100001937411.html,29:45.3

"盈通（yeston） RX580-2048SP 8G D5 大地之神吃鸡独立游戏显卡【满减到手829！618钜惠提前享，关注店铺有惊喜！3期免息】6+2相稳定供电，独立mos散热，四根大号纯铜热管+底座！性价比优选！赢AMD50周年CPU！",盈通显卡京东自营旗舰店,869,1万+条评价,https://item.jd.com/100001266765.html,29:46.7

"盈通 (yeston) RX580-2048SP 4G D5 大地之神游戏独立显卡【沸腾6月，钜惠脱光，裸价来袭，关注店铺再减10】【3期免息】全尺寸金属背板，6+2相数字供电，4热管散热器！性价比优选显卡！猛戳升级8G钜惠",盈通显卡京东自营旗舰店,789,1万+条评价,https://item.jd.com/100001477561.html,31:33.7

"华擎（ASRock）RX580 2048SP? 4G 幻影电竞阿波罗 1284-1335 MHz / 7000 MHz GDDR5 吃鸡显卡此商品将于2019-06-17,00点结束闪购特卖，这就是生活24期",华擎京东自营旗舰店,779,200+条评价,https://item.jd.com/100001660608.html,31:33.6

"铭瑄（MAXSUN）MS-RX560D终结者4G 1176MHz/6000MHz/128Bit/GDDR5/电竞游戏显卡/AMD显卡/A卡【限时秒杀！仅659！】618提前放价，王炸级钜惠！RX580-2048SP显卡低至799！B360主板低至369！更多板卡大料请猛戳",铭瑄京东自营旗舰店,659,900+条评价,https://item.jd.com/4886805.html,31:34.6

"盈通（yeston）RX560D-4G D5大地之神 1200/6000MHz 4G/128bit/GDDR5显卡【沸腾6月，钜惠脱光，裸价来袭，关注店铺再减10】【3期免息】人气单品！4+2相全数字供电,4G显存，畅游主流网游！性价比超值显卡！618狂欢购",盈通显卡京东自营旗舰店,599,"二手有售 2500+条评价",https://item.jd.com/5318560.html,29:46.0

 ```

 ```scala

 package com.ronnie.scala

 import java.io.StringReader

 import au.com.bytecode.opencsv.CSVReader

 import org.apache.spark.rdd.RDD

 import org.apache.spark.{SparkConf, SparkContext}

 object DataExtraction {

   def main(args: Array[String]): Unit = {

     val conf = new SparkConf()

     conf.setMaster("local").setAppName("WC")

     val sc = new SparkContext(conf)

     val input: RDD[String] = sc.textFile("./resources/gpu.csv")

     val result: RDD[Array[String]] = input.map { line =>

       val reader = new CSVReader(new StringReader(line))

       reader.readNext()

     }

     result.foreach(x => {

       x.flatMap(_.split(" ")).foreach(_.split(" ").filter(y =>y.contains("580") ).foreach(_.split(" ").filter(x => x.equals("RX580")).foreach(println)))

     })

   }

 }

 ```

Spark笔记(一)的更多相关文章

spark笔记环境配置
spark笔记 spark简介 saprk 有六个核心组件: SparkCore.SparkSQL.SparkStreaming.StructedStreaming.MLlib,Graphx Spar ...
大数据学习——spark笔记
变量的定义 val a: Int = 1 var b = 2 方法和函数区别:函数可以作为参数传递给方法方法: def test(arg: Int): Int=>Int ={ 方法体 } v ...
spark 笔记 16： BlockManager
先看一下原理性的文章:http://jerryshao.me/architecture/2013/10/08/spark-storage-module-analysis/ ,http://jerrys ...
spark 笔记 15: ShuffleManager，shuffle map两端的stage/task的桥梁
无论是Hadoop还是spark,shuffle操作都是决定其性能的重要因素.在不能减少shuffle的情况下,使用一个好的shuffle管理器也是优化性能的重要手段. ShuffleManager的 ...
spark 笔记 14: spark中的delay scheduling实现
延迟调度算法的实现是在TaskSetManager类中的,它通过将task存放在四个不同级别的hash表里,当有可用的资源时,resourceOffer函数的参数之一(maxLocality)就是这些 ...
spark 笔记 12: Executor，task最后的归宿
spark的Executor是执行task的容器.和java的executor概念类似. ===================start executor runs task============ ...
spark 笔记 11: SchedulingAlgorithm 两种调度算法的优先级比较
调度算法的最基本工作之一,就是比较两个可执行的task的优先级.spark提供的FIFO和FAIR的优先级比较在SchedulingAlgorithm这个接口体现.) { ) { ) { ) { fa ...
spark 笔记 10: TaskScheduler相关
任务调度器的接口类.应用程序可以定制自己的调度器来执行.当前spark只实现了一个任务调度器) )))))val createTime = System.currentTimeMillis()clas ...
spark 笔记 8: Stage
Stage 是一组独立的任务,他们在一个job中执行相同的功能(function),功能的划分是以shuffle为边界的.DAG调度器以拓扑顺序执行同一个Stage中的task. /** * A st ...
spark 笔记 9: Task/TaskContext
DAGScheduler最终创建了task set,并提交给了taskScheduler.那先得看看task是怎么定义和执行的. Task是execution执行的一个单元. Task: execut ...

随机推荐

token和session的区别
session和token都是用来保持会话,功能相同一.session机制,原理 session是服务端存储的一个对象,主要用来存储所有访问过该服务端的客户端的用户信息(也可以存储其他信息),从而实 ...
idea增删改查
idea应用mybatis写增删改查 entity层 private Integer id;private String userCode;private String userName;privat ...
Vue 项目开发
目录 Vue 项目开发项目目录结构解析入口文件 main.js (项目入口) 根组件 app.vue index.html 文件入口 router 路由 components 子组件项目初始化 ...
java并发之Future与Callable使用
java并发之Future与Callable使用这篇文章需要大家知道线程.线程池的知识,尤其是线程池. 有的时候我们要获取线程的执行结果,这个时候就需要用到Callable.Future.Futur ...
Hadoop的伪分布式安装和部署的流程
1.准备工作下载一些用到的命令 yum install -y vim yum install -y lrzsz yum install net-tools 目录约定 /opt #工作目录 /opt/ ...
Android中ListView结合CheckBox判断选中项
本文主要实现在自定义的ListView布局中加入CheckBox控件,通过判断用户是否选中CheckBox来对ListView的选中项进行相应的操作.通过一个Demo来展示该功能,选中ListView ...
RCast 66: 射影几何与Rho演算
Greg Meredith与Isaac DeFrain和Christian Williams一起讨论了射影几何及其在Rho演算中的作用. 原文链接及音频 https://blog.rchain.coo ...
JSTL1.0和JSTL1.1的区别
这要从一个异常说起 According to TLD or attribute directive in tag file, attribute value does not accept any e ...
攻防世界--web新手练习区（1）
1. 题目描述:X老师想让小明同学查看一个网页的源代码,但小明却发现鼠标右键不管用了. http://111.198.29.45:53629 通过阅读题目描述分析,我们需要查看源码,但是鼠标右键 ...
C++ 动态多态
背景以前的学习,只是简单地知道:面向对象的三大特性(封装.继承.多态) ,在项目开发中,用到了多态而自己却不知道. 多态(Polymorphism)按字面的意思就是"多种状态". ...

Spark笔记(一)

简介

总体技术栈

Spark 与 MapReduce的对比

Spark 核心

Spark笔记(一)的更多相关文章

随机推荐

热门专题