下载Sqoop ，直接解压缩;然后导入2个环境变量

1、导入oracle数据库中表emp的数据到hive表中

1、导入到HDFS中

$ sqoop import --connect jdbc:mysql://database.example.com/employees \

    --username aaron --password 12345
--connect用来链接数据库，--table选择一个表，--colums选择列，-m选择mapreduce任务数量，--target-dir选择导入到HDFS的路径
2、导入Hive数据仓库中

3、制定表的名字，导入到hive中指定的表中

4、制定条件

--hive-table导入到hive'中制定的emp2表中，若不存在，则创建，--where指明条件

5、查询语句 query

6、导出数据

												


											
hive数据导入Sqoop工具的更多相关文章
	

    
								
  1. sqoop用法之mysql与hive数据导入导出
		
    目录 一. Sqoop介绍 二. Mysql 数据导入到 Hive 三. Hive数据导入到Mysql 四. mysql数据增量导入hive 1. 基于递增列Append导入 1). 创建hive表  ...
    
		
    2. 
						
  2. 利用sqoop将hive数据导入导出数据到mysql
		
    一.导入导出数据库常用命令语句 1)列出mysql数据库中的所有数据库命令  #  sqoop list-databases --connect jdbc:mysql://localhost:3306 ...
    
		
    3. 
						
  3. Nebula Exchange 工具 Hive 数据导入的踩坑之旅
		
    摘要:本文由社区用户 xrfinbj 贡献,主要介绍 Exchange 工具从 Hive 数仓导入数据到 Nebula Graph 的流程及相关的注意事项. 1 背景 公司内部有使用图数据库的场景,内 ...
    
		
    4. 
						
  4. HData——ETL 数据导入/导出工具
		
    HData是一个异构的ETL数据导入/导出工具,致力于使用一个工具解决不同数据源(JDBC.Hive.HDFS.HBase.MongoDB.FTP.Http.CSV.Excel.Kafka等)之间数据 ...
    
		
    5. 
						
  5. Hive数据导入导出的几种方式
		
    一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到Hive表; 创建表的过程中从其他 ...
    
		
    6. 
						
  6. pt-archiver（数据导入导出工具）
		
    数据导入导出工具pt-archiver 工具可以将MySQL的表数据导出到一个新表或者一个文件,也有自己的应用场景,比如数据归档,删除数据,数据合并等. 具体用法: pt-archiver [OPTI ...
    
		
    7. 
						
  7. MySQL多线程数据导入导出工具Mydumper
		
    http://afei2.sinaapp.com/?p=456 今天在线上使用mysqldump将数据表从一个库导入到另外一个库,结果速度特别慢,印象中有个多线程的数据导入导出工具Mydumper,于 ...
    
		
    8. 
						
  8. KUDU数据导入尝试一：TextFile数据导入Hive,Hive数据导入KUDU
		
    背景 SQLSERVER数据库中单表数据几十亿,分区方案也已经无法查询出结果.故:采用导出功能,导出数据到Text文本(文本>40G)中. 因上原因,所以本次的实验样本为:[数据量:61w条,文 ...
    
		
    9. 
						
  9. 如何利用sqoop将hive数据导入导出数据到mysql
		
    运行环境  centos 5.6   hadoop  hive sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具. 上海尚学堂 ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. ethereum/EIPs-1271 smart contract
			
    https://github.com/PhABC/EIPs/blob/is-valid-signature/EIPS/eip-1271.md Standard Signature Validation ...
    
			
    2. 
						
  2. promise-不使用catch出现warning的原因
			
    今天在使用node运行js文件时,返回了下面的错误和警告,警告部分主要是因为使用了promise,但是没有使用catch来捕捉错误.更详细的解释在下面,这是nodejs文档的process模块的一部分 ...
    
			
    3. 
						
  3. python3 练习题 day01
			
    #练习题:'''1.简述变量命名规范'''#变量名由数字.字母.下划线组成#变量名可以字母和下划线开头,不能以数字开头,并且不能全为数字#变量名不能太长,且要有意义#最好使用驼峰或下划线格式命令#变量 ...
    
			
    4. 
						
  4. fatal error LNK1169: 找到一个或多个多重定义的符号或多个.c/.cpp文件想同时调用定义在.h文件里面的全局变量，防止重定义变量问题。
			
    为什么.h文件中不能定义全局变量? 原因: 存在多次创建变量.如果头文件中可以定义全局变量,那么每个包含该头文件的文件里都会有该全局变量的定义.因为C语言的include是直接将文件嵌入到includ ...
    
			
    5. 
						
  5. MySQL（十）操纵表及全文本搜索
			
    一.创建表 MySQL不仅用于表数据操作,还可以用来执行数据库和表的所有操作,包括表本身的创建和处理. 创建表一般有如下两种方式: ①使用具有交互式创建和管理表的工具: ②直接使用MySQL语句操纵表 ...
    
			
    6. 
						
  6. TCP/IP协议--TCP的超时和重传
			
    TCP是可靠传输.可靠之一体现在收到数据后,返回去一个确认.但是不能完全避免的是,数据和确认都可能丢失.解决这个办法就是,提供一个发送的重传定时器:如果定时器溢出时还没收到确认,它就重传这个报文段.  ...
    
			
    7. 
						
  7. C# Hashtable vs Dictionary 学习笔记
			
    Hashtable 和 Dictionary 存储的都是键值对,我的理解是Dictionary是Hashtable的泛型实现. Hashtable的键和值都是object类型.所以,key和value ...
    
			
    8. 
						
  8. python学习总结---学习交流群里的问题总结
			
    xml里面的过滤: <record id="action_partner_supplier_form_demo_ms" model="ir.actions.act_ ...
    
			
    9. 
						
  9. linux编程头文件所在路径的问题
			
    一.问题引入 1.头文件与库 当我们在PC主机linux环境下(如ubuntu),编写linux应用程序,然后利用gcc来编译.在源代码的开始位置会写入头文件,那是因为我们使用了系统提供的库函数,例如 ...
    
			
    10. 
						
  10. chrome浏览器直接打印 - z
			
    在地址栏敲: about:flags ,打开设置界面:停用:Enable Print Preview Registration PromosChrome快捷方式增加:--kiosk-printing这 ...
    
			
    11.