下载Sqoop ，直接解压缩;然后导入2个环境变量

1、导入oracle数据库中表emp的数据到hive表中

1、导入到HDFS中

$ sqoop import --connect jdbc:mysql://database.example.com/employees \

    --username aaron --password 12345
--connect用来链接数据库，--table选择一个表，--colums选择列，-m选择mapreduce任务数量，--target-dir选择导入到HDFS的路径
2、导入Hive数据仓库中

3、制定表的名字，导入到hive中指定的表中

4、制定条件

--hive-table导入到hive'中制定的emp2表中，若不存在，则创建，--where指明条件

5、查询语句 query

6、导出数据

												


											
hive数据导入Sqoop工具的更多相关文章
	

    
								
  1. sqoop用法之mysql与hive数据导入导出
		
    目录 一. Sqoop介绍 二. Mysql 数据导入到 Hive 三. Hive数据导入到Mysql 四. mysql数据增量导入hive 1. 基于递增列Append导入 1). 创建hive表  ...
    
		
    2. 
						
  2. 利用sqoop将hive数据导入导出数据到mysql
		
    一.导入导出数据库常用命令语句 1)列出mysql数据库中的所有数据库命令  #  sqoop list-databases --connect jdbc:mysql://localhost:3306 ...
    
		
    3. 
						
  3. Nebula Exchange 工具 Hive 数据导入的踩坑之旅
		
    摘要:本文由社区用户 xrfinbj 贡献,主要介绍 Exchange 工具从 Hive 数仓导入数据到 Nebula Graph 的流程及相关的注意事项. 1 背景 公司内部有使用图数据库的场景,内 ...
    
		
    4. 
						
  4. HData——ETL 数据导入/导出工具
		
    HData是一个异构的ETL数据导入/导出工具,致力于使用一个工具解决不同数据源(JDBC.Hive.HDFS.HBase.MongoDB.FTP.Http.CSV.Excel.Kafka等)之间数据 ...
    
		
    5. 
						
  5. Hive数据导入导出的几种方式
		
    一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到Hive表; 创建表的过程中从其他 ...
    
		
    6. 
						
  6. pt-archiver（数据导入导出工具）
		
    数据导入导出工具pt-archiver 工具可以将MySQL的表数据导出到一个新表或者一个文件,也有自己的应用场景,比如数据归档,删除数据,数据合并等. 具体用法: pt-archiver [OPTI ...
    
		
    7. 
						
  7. MySQL多线程数据导入导出工具Mydumper
		
    http://afei2.sinaapp.com/?p=456 今天在线上使用mysqldump将数据表从一个库导入到另外一个库,结果速度特别慢,印象中有个多线程的数据导入导出工具Mydumper,于 ...
    
		
    8. 
						
  8. KUDU数据导入尝试一：TextFile数据导入Hive,Hive数据导入KUDU
		
    背景 SQLSERVER数据库中单表数据几十亿,分区方案也已经无法查询出结果.故:采用导出功能,导出数据到Text文本(文本>40G)中. 因上原因,所以本次的实验样本为:[数据量:61w条,文 ...
    
		
    9. 
						
  9. 如何利用sqoop将hive数据导入导出数据到mysql
		
    运行环境  centos 5.6   hadoop  hive sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具. 上海尚学堂 ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. wordpress之插件安装和主题安装(包含常见问题)
			
    问题描述:安装WordPress主题及插件需要输入FTP问题,要执行请求的操作,WordPress需要访问您网页服务器的权限.请输入您的FTP登陆凭据以继续 执行如下两条命令即可安装成功: sudo  ...
    
			
    2. 
						
  2. Python2.7-内置类型
			
    1.布尔型:True.False 2.数值型:int.float.long.complex 3.迭代器型:有 __iter__() 方法和 next() 方法,生成器也是其中一种 4.序列型(sequ ...
    
			
    3. 
						
  3. 如何应用ML的建议-下
			
    正则化与过拟合(highvariance)和欠拟合(highbias)的关系-部分(五) ML的诊断方法-部分(六) 如何采取下一步-部分(七) 部分(五) 从图中可以看出,正则化项可以用来影响模型函 ...
    
			
    4. 
						
  4. ADO.NET分享
			
    看到<c#从入门到精通(第三版)>书中对ado.net里几种方法打的比方,很有意思就发一下. 1)这张图中,把数据比作水,储存了大量数据. 2)Connection对象好像进水龙头,插在水 ...
    
			
    5. 
						
  5. 3.《想成为黑客，不知道这些命令行可不行》(Learn Enough Command Line to Be Dangerous)——检查文件
			
    上面我们已经学过如何创建及操作文件,现在我们再来学习检查内容.当文件太长以至于屏幕一页显示不完时,这显得尤其重要.特殊情形下,如我们在第2.1章节开始部分中使用cat命令将内容展示到屏幕上,但这对于长 ...
    
			
    6. 
						
  6. WPF中, 启用添加到RichTextBox中的控件
			
    原文:WPF中, 启用添加到RichTextBox中的控件   WPF中, 启用添加到RichTextBox中的控件                                           ...
    
			
    7. 
						
  7. JS_各种排序方法
			
    排序有内部排序和外部排序,内部排序是数据记录在内存中进行排序,而外部排序是因排序的数据很大,一次不能容纳全部的排序记录,在排序过程中需要访问外存. 我们这里说说八大排序就是内部排序. 当n较大,则应采 ...
    
			
    8. 
						
  8. sudo 与输出重定向
			
    本文介绍如何使用 sudo 将输出重定向到当前用户没有权限的文件.注意:本文中 demo 的演示环境为 ubuntu 18.04. Permission denied 问题 如果当前用户没有某个文件的 ...
    
			
    9. 
						
  9. 使用阿里云cli管理安全组
			
    相比于python SDK方式,阿里云基于GO SDK开发了一整套CLI工具,可以通过调用RPC API来管理云资源,对编程能力不够的人来说是个福音. 而且,阿里云CLI的文档比SDK的文档更加全面, ...
    
			
    10. 
						
  10. OSGI的WEB开发环境搭建
			
    第一步,搭建OSGI环境: 打开eclipse,点击run->run configration..,配置如下,点击run. 运行结果如下图所示:说明OSGI环境搭建完毕. 第二步:搭建基于OSG ...
    
			
    11.