下载Sqoop ，直接解压缩;然后导入2个环境变量

1、导入oracle数据库中表emp的数据到hive表中

1、导入到HDFS中

$ sqoop import --connect jdbc:mysql://database.example.com/employees \

    --username aaron --password 12345
--connect用来链接数据库，--table选择一个表，--colums选择列，-m选择mapreduce任务数量，--target-dir选择导入到HDFS的路径
2、导入Hive数据仓库中

3、制定表的名字，导入到hive中指定的表中

4、制定条件

--hive-table导入到hive'中制定的emp2表中，若不存在，则创建，--where指明条件

5、查询语句 query

6、导出数据

												


											
hive数据导入Sqoop工具的更多相关文章
	

    
								
  1. sqoop用法之mysql与hive数据导入导出
		
    目录 一. Sqoop介绍 二. Mysql 数据导入到 Hive 三. Hive数据导入到Mysql 四. mysql数据增量导入hive 1. 基于递增列Append导入 1). 创建hive表  ...
    
		
    2. 
						
  2. 利用sqoop将hive数据导入导出数据到mysql
		
    一.导入导出数据库常用命令语句 1)列出mysql数据库中的所有数据库命令  #  sqoop list-databases --connect jdbc:mysql://localhost:3306 ...
    
		
    3. 
						
  3. Nebula Exchange 工具 Hive 数据导入的踩坑之旅
		
    摘要:本文由社区用户 xrfinbj 贡献,主要介绍 Exchange 工具从 Hive 数仓导入数据到 Nebula Graph 的流程及相关的注意事项. 1 背景 公司内部有使用图数据库的场景,内 ...
    
		
    4. 
						
  4. HData——ETL 数据导入/导出工具
		
    HData是一个异构的ETL数据导入/导出工具,致力于使用一个工具解决不同数据源(JDBC.Hive.HDFS.HBase.MongoDB.FTP.Http.CSV.Excel.Kafka等)之间数据 ...
    
		
    5. 
						
  5. Hive数据导入导出的几种方式
		
    一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到Hive表; 创建表的过程中从其他 ...
    
		
    6. 
						
  6. pt-archiver（数据导入导出工具）
		
    数据导入导出工具pt-archiver 工具可以将MySQL的表数据导出到一个新表或者一个文件,也有自己的应用场景,比如数据归档,删除数据,数据合并等. 具体用法: pt-archiver [OPTI ...
    
		
    7. 
						
  7. MySQL多线程数据导入导出工具Mydumper
		
    http://afei2.sinaapp.com/?p=456 今天在线上使用mysqldump将数据表从一个库导入到另外一个库,结果速度特别慢,印象中有个多线程的数据导入导出工具Mydumper,于 ...
    
		
    8. 
						
  8. KUDU数据导入尝试一：TextFile数据导入Hive,Hive数据导入KUDU
		
    背景 SQLSERVER数据库中单表数据几十亿,分区方案也已经无法查询出结果.故:采用导出功能,导出数据到Text文本(文本>40G)中. 因上原因,所以本次的实验样本为:[数据量:61w条,文 ...
    
		
    9. 
						
  9. 如何利用sqoop将hive数据导入导出数据到mysql
		
    运行环境  centos 5.6   hadoop  hive sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具. 上海尚学堂 ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. 转载 jQuery和js自定义函数和文件的方法（全网最全）
			
    jQuery和js自定义函数和文件的方法(全网最全)    版权声明:本文为像雾像雨又像风_http://blog.csdn.net/topdandan的原创文章,未经允许不得转载. https:// ...
    
			
    2. 
						
  2. django_redis作为 session backend 使用配置
			
    Django 默认可以使用任何 cache backend 作为 session backend, 将 django-redis 作为 session 储存后端不用安装任何额外的 backend #  ...
    
			
    3. 
						
  3. async源码学习 - 控制流程waterfall函数
			
    waterfall函数会连续执行数组中的函数,每次通过数组下一个函数的结果.然而,数组任务中的任意一个函数结果传递失败,那么该函数的下一个函数将不会执行,并且主回调函数立马把错误作为参数执行. 以上是 ...
    
			
    4. 
						
  4. 洛谷 P2256 一中校运会之百米跑
			
    题目链接 https://www.luogu.org/problemnew/show/P2256 题目背景 在一大堆秀恩爱的**之中,来不及秀恩爱的苏大学神踏着坚定(?)的步伐走向了100米跑的起点. ...
    
			
    5. 
						
  5. Oracle 在函数或存储过程中执行sql查询字符串并将结果值赋值给变量
			
    请看黄色部分 --区县指标 THEN TVALUE_SQL := 'SELECT TO_CHAR(' || CUR_ROW.MAIN_FIELD || ') FROM ' || CUR_ROW.END ...
    
			
    6. 
						
  6. 深入理解 JVM(上)
			
    菜鸟拙见,望请纠正(首先:推荐一本书[链接:https://pan.baidu.com/s/15I062n5LPYtRmueAAUFuFA 密码:kyo1]) 一:JVM体系概述 1:JVM是运行在操 ...
    
			
    7. 
						
  7. BZOJ1816 CQOI2010 扑克牌 贪心
			
    题目传送门:https://www.lydsy.com/JudgeOnline/problem.php?id=1816 题意:有$N$堆牌,第$i$堆牌有$c_i$张牌,还有$M$张$joker$,每 ...
    
			
    8. 
						
  8. [Spark][Hive][Python][SQL]Spark 读取Hive表的小例子
			
    [Spark][Hive][Python][SQL]Spark 读取Hive表的小例子$ cat customers.txt 1 Ali us 2 Bsb ca 3 Carls mx $ hive h ...
    
			
    9. 
						
  9. （10）学习笔记 ） ASP.NET CORE微服务 Micro-Service ---- Ocelot+Identity Server
			
    用 JWT 机制实现验证的原理如下图:  认证服务器负责颁发 Token(相当于 JWT 值)和校验 Token 的合法性. 一. 相关概念 API 资源(API Resource):微博服务器接口. ...
    
			
    10. 
						
  10. 《DISTRIBUTED SYSTEMS Concepts and Design》读书笔记 一
			
    第二章 系统模型 描述分布式系统的三种模型 Physical models : 用机器,网络,硬件等语言去描述整个系统. Architectural models : 用计算.计算任务.计算单元等语言 ...
    
			
    11.