【hive】关于浮点数比较的问题
当在hive中写下浮点数(例如:0.2)
hive会把浮点数(0.2)存储为double类型
但是系统中并不能精准表示0.2这个浮点数
正确的浮点数表示
float 0.2 —> 0.2000000
double 0.2 —> 0.200000000000
但是系统中表示为
float 0.2 —> 0.2000001
double 0.2 —> 0.200000000001
如果我们在hive中把 float(0.2)转化成为double(0.2)
实际上是 0.2000001 —> 0.200000100000
并不是 0.2000001 —> 0.200000000001
所以
float(0.2)转化的double(0.2) 是大于直接存储的double(0.2)
float类型和double类型相比较,hive中是自动把范围小的类型转化成为范围大的类型的,也就是float转化为doule
导致float转化成为的double类型的数字大于比较的double数字
所以我们在使用浮点数比较的时候,不要用hive的自动扩充精度来比较,尽量使用较小精度来比较.
也就是float和double比较的时候,把double cast( as float)才能显示正确结果.
示例:
TABLE table1
id (INT) ,taxes(float)
1 0.2
2 0.2
3 0.3
我们要找出大于0.2的id有哪些
select id,taxes from table1 where taxes > 0.2;
结果显示:
1 0.2
2 0.2
3 0.3
为什么会把0.2本身也显示呢?
因为hive把0.2存储为double类型,
0.2 —> 0.200000000001
而taxes为float类型
id (INT) ,taxes(float)
1 0.2 —> 0.2000001
2 0.2 —> 0.2000001
3 0.3 —> 0.3000001
当我们用float类型和double类型比较的时候
hive自动将taxes转化为double类型
id (INT) ,taxes(float) —> taxes(float_to_double)
1 0.2 —> 0.200000100000
2 0.2 —> 0.200000100000
3 0.3 —> 0.300000100000
所以实际上,float(0.2) —> float_to_double(0.2) > double(0.2)
怎么才能正确显示呢?
不使用hive的自动扩充精度机制,直接把double减少精度
也就是double —> float,
select id,taxes from table1 where taxes > cast(0.2 as float);
结果:
3 0.3
【hive】关于浮点数比较的问题的更多相关文章
- Hive函数大全
一.关系运算: 1. 等值比较: = 语法:A=B 操作类型:所有基本类型 描述: 如果表达式A与表达式B相等,则为TRUE:否则为FALSE 举例: hive> select 1 from l ...
- Spark入门实战系列--5.Hive(上)--Hive介绍及部署
[注]该系列文章以及使用到安装包/测试数据 可以在<倾情大奉送--Spark入门实战系列>获取 .Hive介绍 1.1 Hive介绍 月开源的一个数据仓库框架,提供了类似于SQL语法的HQ ...
- Hive介绍、安装(转)
1.Hive介绍 1.1 Hive介绍 Hive是一个基于Hadoop的开源数据仓库工具,用于存储和处理海量结构化数据.它是Facebook 2008年8月开源的一个数据仓库框架,提供了类似于SQL语 ...
- hive函数参考手册
hive函数参考手册 原文见:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1.内置运算符1.1关系运算符 运 ...
- hive[3] 数据类型和文件格式
Hive 支持关系型数据库中的大多数据基本数据类型,同时也支持3种集合类型: 3.1 Hive 的基本数据类型 支持多种不同他度的整形和浮点型数据类型,具体如下(全都是保留字): tinyint ...
- 【转】hive简介安装 配置常见问题和例子
原文来自: http://blog.csdn.net/zhumin726/article/details/8027802 1 HIVE概述 Hive是基于Hadoop的一个数据仓库工具,可以将结构化 ...
- 【转】 hive简介,安装 配置常见问题和例子
原文来自: http://blog.csdn.net/zhumin726/article/details/8027802 1 HIVE概述 Hive是基于Hadoop的一个数据仓库工具,可以将结构化 ...
- 大数据时代的技术hive:hive的数据类型和数据模型
在上篇文章里,我列举了一个简单的hive操作实例,创建了一张表test,并且向这张表加载了数据,这些操作和关系数据库操作类似,我们常把hive和关系数据库进行比较,也正是因为hive很多知识点和关系数 ...
- HIVE编程指南之HiveQL的学习笔记1
// HiveQLa) 数据定义语言1 数据库表的一个目录或命名空间,如果用户没有指定数据库的话,那么将会使用默认的数据库default-----创建数据库CREATE DATABASE guoyon ...
随机推荐
- oracle 数据库误删数据,误删表的恢复
1.某表的数据误删了,那么可以查询这个表某一时间节点之前的数据,并放到一个新建的表里. create table temptable as select * from t_billdefi as O ...
- Mybatis入门配置
MyBatis 本是apache的一个开源项目iBatis, 2010年这个项目由apache software foundation 迁移到了google code,并且改名为MyBatis .20 ...
- intellij-idea+maven搭建scala环境
一 . 安装JDK 1. 下载地址: http://download.oracle.com/otn-pub/java/jdk/8u181-b13/96a7b8442fe848ef90c96a2fad6 ...
- 20145316《Java程序设计》实验二报告
20145316<Java程序设计>实验二报告 一.实验目的与要求 1.初步掌握单元测试和TDD. 2.理解并掌握面向对象三要素:封装.继承.多态. 3.初步掌握UML建模. 4.熟悉S. ...
- iOS 开发,混合使用 ARC 和非ARC
[前提知识] ARC:Automatic Reference Counting,自动引用计数 在开发 iOS 3 以及之前的版本的项目时我们要自己负责使用引用计数来管理内存,比如要手动 retain. ...
- 巨坑:jqgrid竟然取不到编辑模式下input的值
今天遇到最奇葩的问题,竟然取不到input的值,感觉世界观都颠覆了.后来一搜资料,又是jqgrid框架搞的鬼,真搞不明白,开发框架就好好开发框架,留这么多坑有意思吗? jqgrid编辑模式下不要调用g ...
- NSURLSession 的学习资料
一个nsurlsession的一些学习资料 http://www.cocoachina.com/ios/20161018/17785.html
- PHP的memory_limit引起的问题
在运行PHP程序,通常会遇到下面的错误, 这个意味着PHP脚本使用了过多的内存,并超出了系统对其设置的允许最大内存.解决这个问题,首先需要查看你的程序是否分配了过多的内存,在程序没有问题的情况下,你可 ...
- js去除前后空格
<script language="javascript"> String.prototype.trim=function(){ return this.rep ...
- git gc内存错误的解决方案
Auto packing the repository for optimum performance. You may alsorun "git gc" manually. Se ...