hg17+hive
@第许1262：如何使用kettle连接hive和hive2 -
微盾13971955765…… 连接hive的方法:进入hive所在的服务器,输入:hive --service hiveserver(目的:启动thrift) 打开kettle配置连接界面,输入hive所在服务器的ip、所需要的hive库、端口号(thrift默认端口为:10000) 测试连接,即可 连接hive2的方法:[plain] ...
@第许1262：如何在Java中执行Hive命令或HiveQL -
微盾13971955765…… 这里所说的在Java中执行Hive命令或HiveQL并不是指Hive Client通过JDBC的方式连接HiveServer(or HiveServer2)执行查询,而是简单的在部署了HiveServer的服务器上执行Hive命令.当然这是一个简单的事情,平常我们通过Hive做简单的数据...
@第许1262：为什么linux的hive无法启动hiveserver2 -
微盾13971955765…… 需要先启动Hive的thriftserver:hiveserver2,然后在beelin命令行中通过!connect jdbc:hive2://localhost:10000 scott tiger org.apache.hive.jdbc.HiveDriver命令来连接Hive.
@第许1262：hbase和hive的差别是什么,各自适用在什么场景中 -
微盾13971955765…… hbase和hive的主要区别是:他们对于其内部的数据的存储和管理方式是不同的,hbase其主要特点是仿照bigtable的列势存储,对于大型的数据的存储,查询比传统数据库有巨大的优势,而hive其产生主要应对的数据仓库问题,其将存在在hdfs上...
@第许1262：如何配置hive,使hive能使用spark引擎 -
微盾13971955765…… 1、为了让Spark能够连接到Hive的原有数据仓库,我们需要将Hive中的hive-site.xml文件拷贝到Spark的conf目录下,这样就可以通过这个配置文件找到Hive的元数据以及数据存放. 在这里由于我的Spark是自动安装和部署的,因此需要知道CDH...
@第许1262：如何配置hive访问其他服务器的hadoop -
微盾13971955765…… 1、下载hive(http://archive.cloudera.com/cdh/testing/hive-0.3.99.1+0.tar.gz),解包把它放到目录 /usr/local/hadoop/contrib并改名为hive,改属主(chown -R hadoop:hadoop). 2、下载ant (http://labs.xiaonei.com/apache-mirror/ant/binaries/apache-...
@第许1262：如何在伪分布式环境下安装配置hive -
微盾13971955765…… STEP 1:安装JDK 1.配置安装JDK,将JDK解压, tar -zxvf jdk-8u-45-linux-i586.tar.gz /usr/lib/jkd/ 2.再配置/etc/profile文件 sudo gedit /etc/profile3.配置默认JDK版本 为了将我们安装的JDK设置为默认JDK版本,还要进行如下工作.执行代码:...
@第许1262：从架构和功能层次说明hbase与hive的区别 -
微盾13971955765…… 共同点:1.hbase与hive都是架构在hadoop之上的.都是用hadoop作为底层存储 区别:2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统,HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 .3.想象你在操作...
@第许1262：如何判断hive的远程服务接口已经打开 -
微盾13971955765…… 1、hive 命令行模式,直接输入/hive/bin/hive的执行程序,或者输入 hive --service cli 用于linux平台命令行查询,查询语句基本跟mysql查询语句类似2、 hive web界面的 (端口号9999) 启动方式 hive –service hwi & 用于通过浏览器来访问hive,感...
@第许1262：hadoop学习之hbase和hive的区别 -
微盾13971955765…… 这个要根据自己处理数据的方式来选择.1、Hive是支持SQL语句的,执行会调用mapreduce,所以延迟比较高;2、HBase是面向列的分布式数据库,使用集群环境的内存做处理,效率会比hive要高,但是不支持sql语句.Hadoop开发和运行处理大规模数据,需要用hbase做数据库,但由于hbase没有类sql查询方式,所以操作和计算数据非常不方便,于是整合hive,让hive支撑在hbase数据库层面的 hql查询,hive也即做数据仓库.
微盾13971955765…… 连接hive的方法:进入hive所在的服务器,输入:hive --service hiveserver(目的:启动thrift) 打开kettle配置连接界面,输入hive所在服务器的ip、所需要的hive库、端口号(thrift默认端口为:10000) 测试连接,即可 连接hive2的方法:[plain] ...
@第许1262：如何在Java中执行Hive命令或HiveQL -
微盾13971955765…… 这里所说的在Java中执行Hive命令或HiveQL并不是指Hive Client通过JDBC的方式连接HiveServer(or HiveServer2)执行查询,而是简单的在部署了HiveServer的服务器上执行Hive命令.当然这是一个简单的事情,平常我们通过Hive做简单的数据...
@第许1262：为什么linux的hive无法启动hiveserver2 -
微盾13971955765…… 需要先启动Hive的thriftserver:hiveserver2,然后在beelin命令行中通过!connect jdbc:hive2://localhost:10000 scott tiger org.apache.hive.jdbc.HiveDriver命令来连接Hive.
@第许1262：hbase和hive的差别是什么,各自适用在什么场景中 -
微盾13971955765…… hbase和hive的主要区别是:他们对于其内部的数据的存储和管理方式是不同的,hbase其主要特点是仿照bigtable的列势存储,对于大型的数据的存储,查询比传统数据库有巨大的优势,而hive其产生主要应对的数据仓库问题,其将存在在hdfs上...
@第许1262：如何配置hive,使hive能使用spark引擎 -
微盾13971955765…… 1、为了让Spark能够连接到Hive的原有数据仓库,我们需要将Hive中的hive-site.xml文件拷贝到Spark的conf目录下,这样就可以通过这个配置文件找到Hive的元数据以及数据存放. 在这里由于我的Spark是自动安装和部署的,因此需要知道CDH...
@第许1262：如何配置hive访问其他服务器的hadoop -
微盾13971955765…… 1、下载hive(http://archive.cloudera.com/cdh/testing/hive-0.3.99.1+0.tar.gz),解包把它放到目录 /usr/local/hadoop/contrib并改名为hive,改属主(chown -R hadoop:hadoop). 2、下载ant (http://labs.xiaonei.com/apache-mirror/ant/binaries/apache-...
@第许1262：如何在伪分布式环境下安装配置hive -
微盾13971955765…… STEP 1:安装JDK 1.配置安装JDK,将JDK解压, tar -zxvf jdk-8u-45-linux-i586.tar.gz /usr/lib/jkd/ 2.再配置/etc/profile文件 sudo gedit /etc/profile3.配置默认JDK版本 为了将我们安装的JDK设置为默认JDK版本,还要进行如下工作.执行代码:...
@第许1262：从架构和功能层次说明hbase与hive的区别 -
微盾13971955765…… 共同点:1.hbase与hive都是架构在hadoop之上的.都是用hadoop作为底层存储 区别:2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统,HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 .3.想象你在操作...
@第许1262：如何判断hive的远程服务接口已经打开 -
微盾13971955765…… 1、hive 命令行模式,直接输入/hive/bin/hive的执行程序,或者输入 hive --service cli 用于linux平台命令行查询,查询语句基本跟mysql查询语句类似2、 hive web界面的 (端口号9999) 启动方式 hive –service hwi & 用于通过浏览器来访问hive,感...
@第许1262：hadoop学习之hbase和hive的区别 -
微盾13971955765…… 这个要根据自己处理数据的方式来选择.1、Hive是支持SQL语句的,执行会调用mapreduce,所以延迟比较高;2、HBase是面向列的分布式数据库,使用集群环境的内存做处理,效率会比hive要高,但是不支持sql语句.Hadoop开发和运行处理大规模数据,需要用hbase做数据库,但由于hbase没有类sql查询方式,所以操作和计算数据非常不方便,于是整合hive,让hive支撑在hbase数据库层面的 hql查询,hive也即做数据仓库.
