Hive概述


发布于 2017-03-11 / 37 阅读 / 0 评论 /
Hive的来源以及优缺点

1.Hive的来源

Hive是Facebook开源用于解决海量结构化日志的数据统计工具。

Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。

2.Hive的本质

将HQL转化成MapReduce程序。

Hive的官方文档可参考https://cwiki.apache.org/confluence/display/Hive/Home。

3.Hive的优点

Hive有以下五个优点:

(1)操作接口采用类SQL语法,提供快速开发的能力,简单、容易上手。

(2)避免去写MapReduce,减少开发人员的学习2成本。

(3)Hive的执行延迟比较高,因此Hive常用语数据分析,对实时性要求不高的场合。

(4)Hive优势在于处理大数据,对于处理小数据没有优势,因为Hive的执行延迟比较高。

(5)Hive支持用户自定义函数,用户可以根据自己的需求来实现自己的函数。

4.Hive的缺点

Hive有以下几个缺点:

(1)Hive的HQL表达能力有限——迭代语法无法表达;数据挖掘方面不擅长,由于MapReduce数据处理流程的限制,效率更高的算法却无法实现。

(2)Hive的效率比较低——Hive自动生成的MapReduce作业,通常情况下不够智能化;Hive调优比较困难,粒度较粗。