Hive基础学习

Hive 学习记录Hive介绍：Hive 是起源于Facebook，使得Hadoop进行SQL查询成为可能，进而使得非程序员也可以进进行对其使用；它是一种数据仓库工具，将结构化的数据文件 映射为一张数据库表，并提供完整的SQL查询功能，可以将SQL语句转换为MapReduce任务运行。其优点是学习成本低，可以通过类SQL语句快速实 现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析

Hive 学习知识点：

HIVE 的优势：

1). 帮助无开发经验的数据分析人员，有能力处理大数据

完全符合与Hive的设计理念，一直在强调，无需多言。

2). 构建标准化的MapReduce开发过程

这个方面是需要努力的方向。

Hive的运维：
因为Hive是基于Hadoop构建的，简单地说就是一套Hadoop的访问接口，Hive本身并没有太多的东西，所以运维上面我们注意下面几个问题就行了。

• 1. 使用单独的数据库存储元数据
• 2. 定义合理的表分区和键
• 3. 设置合理的bucket数据量
• 4. 进行表压缩
• 5. 定义外部表使用规范
• 6. 合理的控制Mapper, Reducer数量
• 来源于张丹的博客