下载Sqoop ，直接解压缩;然后导入2个环境变量

1、导入oracle数据库中表emp的数据到hive表中

1、导入到HDFS中

$ sqoop import --connect jdbc:mysql://database.example.com/employees \

    --username aaron --password 12345
--connect用来链接数据库，--table选择一个表，--colums选择列，-m选择mapreduce任务数量，--target-dir选择导入到HDFS的路径
2、导入Hive数据仓库中

3、制定表的名字，导入到hive中指定的表中

4、制定条件

--hive-table导入到hive'中制定的emp2表中，若不存在，则创建，--where指明条件

5、查询语句 query

6、导出数据

												


											
hive数据导入Sqoop工具的更多相关文章
	

    
								
  1. sqoop用法之mysql与hive数据导入导出
		
    目录 一. Sqoop介绍 二. Mysql 数据导入到 Hive 三. Hive数据导入到Mysql 四. mysql数据增量导入hive 1. 基于递增列Append导入 1). 创建hive表  ...
    
		
    2. 
						
  2. 利用sqoop将hive数据导入导出数据到mysql
		
    一.导入导出数据库常用命令语句 1)列出mysql数据库中的所有数据库命令  #  sqoop list-databases --connect jdbc:mysql://localhost:3306 ...
    
		
    3. 
						
  3. Nebula Exchange 工具 Hive 数据导入的踩坑之旅
		
    摘要:本文由社区用户 xrfinbj 贡献,主要介绍 Exchange 工具从 Hive 数仓导入数据到 Nebula Graph 的流程及相关的注意事项. 1 背景 公司内部有使用图数据库的场景,内 ...
    
		
    4. 
						
  4. HData——ETL 数据导入/导出工具
		
    HData是一个异构的ETL数据导入/导出工具,致力于使用一个工具解决不同数据源(JDBC.Hive.HDFS.HBase.MongoDB.FTP.Http.CSV.Excel.Kafka等)之间数据 ...
    
		
    5. 
						
  5. Hive数据导入导出的几种方式
		
    一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到Hive表; 创建表的过程中从其他 ...
    
		
    6. 
						
  6. pt-archiver（数据导入导出工具）
		
    数据导入导出工具pt-archiver 工具可以将MySQL的表数据导出到一个新表或者一个文件,也有自己的应用场景,比如数据归档,删除数据,数据合并等. 具体用法: pt-archiver [OPTI ...
    
		
    7. 
						
  7. MySQL多线程数据导入导出工具Mydumper
		
    http://afei2.sinaapp.com/?p=456 今天在线上使用mysqldump将数据表从一个库导入到另外一个库,结果速度特别慢,印象中有个多线程的数据导入导出工具Mydumper,于 ...
    
		
    8. 
						
  8. KUDU数据导入尝试一：TextFile数据导入Hive,Hive数据导入KUDU
		
    背景 SQLSERVER数据库中单表数据几十亿,分区方案也已经无法查询出结果.故:采用导出功能,导出数据到Text文本(文本>40G)中. 因上原因,所以本次的实验样本为:[数据量:61w条,文 ...
    
		
    9. 
						
  9. 如何利用sqoop将hive数据导入导出数据到mysql
		
    运行环境  centos 5.6   hadoop  hive sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具. 上海尚学堂 ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. Spring配置文件中的那些标签意味着什么(持续更新)
			
    前言 在看这边博客时,如果遇到有什么不清楚的地方,可以参考我另外一边博文.Spring标签的探索,根据这边文章自己来深入源码一探究竟.这里自己只是简单记录一下各标签作用,每个人困惑不同,自然需求也不一 ...
    
			
    2. 
						
  2. Bug 14143011 : ORA-19606: CANNOT COPY OR RESTORE TO SNAPSHOT CONTROL FILE
			
    Bug 14143011 : ORA-19606: CANNOT COPY OR RESTORE TO SNAPSHOT CONTROL FILE [oracle@test]$ tail -f rma ...
    
			
    3. 
						
  3. MATLAB中的FOR循环问题
			
    做量化操作的时候经常需要使用到matlab编写策略或者计算多因子,for循环非常慢,自己找了一些matlab中for循环的优化方法,for的部分每处理一个大矩阵都要花费大量的时间,这是不可避免需要遇到 ...
    
			
    4. 
						
  4. Python脱产8期 Day01
			
    一 编程语言与目的 1.有特定语法,可以通过编程的方式,让计算机进行识别,从而让计算机根据人的意愿完成人想让其完成的事 2.控制奴役计算机,让其完成你想让它完成的事,从而解放人力. 二 计算机 五大组 ...
    
			
    5. 
						
  5. 【Codeforces 115D】Unambiguous Arithmetic Expression
			
    Codeforces 115 D 题意:给一个没有括号的表达式,问有多少种添加括号的方法使得这是一个合法的表达式?输入可能有正负号.加减乘除.数字. 思路1: 这是不能过的\(naive\)的\(dp ...
    
			
    6. 
						
  6. root密码重置（Centos 7）
			
    1.系统启动时出现操作系统的选择界面,按e进入grub编辑模式. 2.选择linux16开头这一行在最后加上  \re.break 按ctrl+x 3.进入switch-root:# 输入 mount ...
    
			
    7. 
						
  7. Android Canvas saveLayerAlpha使用
			
    Canvas.saveLayerAlpha(float left, float top, float right, float bottom, int alpha, int saveFlags): 本 ...
    
			
    8. 
						
  8. ArrayList源码中的两个值得注意的问题
			
    1.“拖泥带水”的删除 测试代码: package com.demo; import java.util.ArrayList; public class TestArrayList { public  ...
    
			
    9. 
						
  9. (转)Linux SSH配置和禁止Root远程登陆设置
			
    原文 一.修改vi /etc/ssh/sshd_config 文件 1.修改默认端口:默认Port为22,并且已经注释掉了:修改是把注释去掉,并修改成其它的端口. 2.禁止root用户远程登陆:修改P ...
    
			
    10. 
						
  10. Java中clone的写法
			
    Cloneable这个接口设计得十分奇葩,不符合正常人的使用习惯,然而用这个接口的人很多也很有必要,所以还是有必要了解一下这套扭曲的机制.以下内容来自于对Effective Java ed 2. it ...
    
			
    11.