• 关于

    hive

    的搜索结果

回答

也可以使用本地系统的命令去执行Hive的shell hive-e 'select*from userinfo'执行HiveQL语句 hive-config/hive-0.7.1/conf重新载入新的配置文件 hive-service hiveserver启动服务 2.JDBC/ODBC JDBC Hive的jar包中"org...
游客gk53hfj7mlezo 2022-04-03 17:24:25 0 浏览量 回答数 0

回答

默认模式是MaxCompute模式,如果要切换至Hive模式,需要开启odps.sql.hive.compatible为True。odps.sql.hive.compatible表示是否打开Hive兼容模式,其值默认为False。可通过以下两种方法开启Hive兼容模式。开启后才...
游客yzrzs5mf6j7yy 2022-04-02 23:12:13 0 浏览量 回答数 0

回答

392)at org.apache.hadoop.hive.ql.metadata.Hive.moveFile(Hive.java:2418)at org.apache.hadoop.hive.ql.metadata.Hive.replaceFiles(Hive.java:2747)at org.apache.hadoop.hive.ql.metadata.Table.replaceFiles...
爱吃鱼的程序员 2022-04-06 17:28:25 272 浏览量 回答数 1

回答

将我们mysql表当中的数据直接导入到hive表中的话,我们需要将hive的一个叫做hive-exec-1.1.0-cdh5.14.0.jar的jar包拷贝到sqoop的lib目录下 cp/export/servers/hive-1.1.0-cdh5.14.0/lib/hive-exec-1.1.0-cdh5.14.0....
游客wyvq5mjsckydw 2022-04-03 00:52:42 0 浏览量 回答数 0

回答

hdfs dfs-mkdir-p/tmp/hive/test_table_hive_data_backups hdfs dfs-mv/warehouse/tablespace/managed/hive/test.db/test_table_hive/*/tmp/hive/test_table_hive_data_backups/ hdfs dfs-cp-f/warehouse/tablespace...
游客yzrzs5mf6j7yy 2022-04-02 23:39:15 0 浏览量 回答数 0

回答

其中SparkSQL作为Spark生态的一员继续发展,而不再受限于Hive,只是兼容Hive;而Hive on Spark是一个Hive的发展计划,该计划将Spark作为Hive的底层引擎之一,也就是说,Hive将不再受限于一个引擎,可以采用Map-...
游客wyvq5mjsckydw 2022-04-02 22:39:37 0 浏览量 回答数 0

回答

1、解压并配置环境变量 2、配置hive的配置文件cp hive-env.sh.template hive-env.sh vi hive-env.sh(可以配置jdk、hive的conf路径) 3、在Hive的conf配置hive的自定义配置文件 vi hive-site.xml
游客3htxdkat3ir3e 2022-04-03 17:24:14 0 浏览量 回答数 0

回答

在项目内的pom上,所有相关hive相关依赖都是provided,在flink lib下放进flink-sql-connector-hive-2.2.0_2.11-1.11.1.jar,提交任务的时候,会出现hive-exec.jar的冲突导致java.lang.NoClassDefFoundError:Could ...
游客sadna6pkvqnz6 2022-04-07 04:24:14 114 浏览量 回答数 1

回答

新手实验storm-hive插件的使用遇到下面的问题:代码:连接的远程集群,结果,创建文件却在本地计算机,请问该怎么修改呢?重新建立maven项目后,运行topo 报错:java.lang.RuntimeException:The root scratch dir:/...
爱吃鱼的程序员 2022-04-07 11:08:38 234 浏览量 回答数 1

回答

Hive提供了三种用户接口:CLI、HWI和客户端方式。其中最常用的的就是CLI,CLI启动的时候,会同时启动一个Hive副本。Client是Hive的客户端,用户连接至Hive Server。在启动 Client模式的时候,需要指出Hive Server...
游客gk53hfj7mlezo 2022-04-03 17:24:16 0 浏览量 回答数 0

回答

Hive的metastore组件是hive元数据集中存放地。Metastore组件包括两个部分:metastore服务和后台数据的存储。后台数据存储的介质就是关系数据库,例如hive默认的嵌入式磁盘数据库derby,还有mysql数据库。Metastore...
游客3htxdkat3ir3e 2022-04-03 17:22:58 0 浏览量 回答数 0

回答

默认模式是MaxCompute模式,如果要切换至Hive模式,需要开启odps.sql.hive.compatible为True。odps.sql.hive.compatible表示是否打开Hive兼容模式,其值默认为False。可通过以下两种方法开启Hive兼容模式。开启后才...
游客daliwbfb2wo66 2022-04-02 22:37:36 0 浏览量 回答数 0

回答

flink 批模式 写出hive 不显示 流程是 flink批模式使用 TableEnvironment tableEnv 通过hiveCataLog 读取hive数据,经过计算处理,注册成临时表.又设置 tableEnv.getConfig().setSqlDialect(SqlDialect.HIVE);...
游客dtkqqfednv6qy 2022-04-06 17:36:26 174 浏览量 回答数 1

回答

您好 您在hive-site.xml里面设置了engine为tez然后/etc/ecm/spark-conf/下面有个hive-site.xml软链接,直接链接到了/etc/ecm/hive-conf/hive-site.xml所以可以这样你把/etc/ecm/spark-conf/下面的hive-site.xml软...
寒沙牧 2022-04-03 11:58:45 0 浏览量 回答数 0

回答

hive-site: javax.jdo.option.ConnectionURL jdbc:mysql:/localhost:3306/hive javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver javax.jdo.option.ConnectionPassword hive hive.hwi.listen.port ...
爱吃鱼的程序员 2022-04-06 16:51:22 234 浏览量 回答数 1

回答

SET hive.exec.dynamic.partition=true;SET hive.exec.dynamic.partition.mode=nonstrict;SET hive.exec.max.dynamic.partitions=3000;SET hive.exec.max.dynamic.partitions.pernode=500;SET hive.merge.tezfiles=...
游客yzrzs5mf6j7yy 2022-04-02 23:39:07 0 浏览量 回答数 0

回答

由于公司要求,我从一个啥都不知道的小菜鸟开始摸索 用hadoop+hive+hbase做集成,其中 hadoop 2.7.2 hive 1.2.1 hbase 0.98.20,做的单机伪分布集成 单独启动全部没有问题,插入读取数据也全都可以。用sqoop给hbase...
爱吃鱼的程序员 2022-04-06 15:50:30 457 浏览量 回答数 1

回答

元数据对于hive十分重要,因此hive支持把metastore服务独立出来,安装到远程的服务器集群里,从而解耦hive服务和metastore服务,保证hive运行的健壮性,这个方面的知识,我会在后面的metastore小节里做详细的讲解。...
游客3htxdkat3ir3e 2022-04-03 17:22:28 0 浏览量 回答数 0

回答

16/12/09 17:18:47 ERROR hive.HiveConfig:Could not load org.apache.hadoop.hive.conf.HiveConf.Make sure HIVE_CONF_DIR is set correctly. 16/12/09 17:18:47 ERROR tool.ImportTool:Encountered IOException ...
爱吃鱼的程序员 2022-04-06 15:47:27 258 浏览量 回答数 1

回答

求助,jdk从8升级到11后使用hive作为flink table的catalog抛错,排查是bsTableEnv.registerCatalog(catalogName,catalog)抛错,具体异常为:11:55:22.343[main]ERROR hive.log-Got exception:java.lang....
moonlightdisco 2022-04-07 04:24:47 118 浏览量 回答数 1

回答

搭建的一个spark集群,集群所有服务都可以正常运行 现在想装一个hive2.1.1,MySQL作为元数据库,装好后初始化元数据库成功,可以启动./bin/hive 后来想讲spark和hive整合,使spark能访问hive,因此将hive配置文件...
爱吃鱼的程序员 2022-04-07 11:10:17 718 浏览量 回答数 1

回答

Hive Connector 可以分为2个层面:首先在元数据上,我们通过 HiveCatalog 来对接Hive 元数据,同时我们提供 HiveTableSource、HiveTableSink 来读写 Hive 的表数据;其次,使用 Hive Connector 需要指定 Hive ...
Medusa 2022-04-03 10:26:05 0 浏览量 回答数 0

回答

hive的缺点:(1)hive的HQL表达能力有限迭代式算法无法表达,比如kmeans (2)hive的效率比较低hive自动生成的mapreduce作业,通常情况下不够智能化hive调优比较困难,粒度较粗 (3)hive可控性差
游客dn7w5h5cqwjbu 2022-04-03 17:09:41 0 浏览量 回答数 0

回答

请教下,为啥写进hive的数据,我在hive通过hive语句查不出来,但是我看hdfs是已经有文件了,cat也能查出文件容易#Flink
黄一刀 2022-04-06 22:40:04 727 浏览量 回答数 1

回答

试验了一下 Flink-1.11 hive streaming 的功能 https://ci.apache.org/projects/flink/flink-docs-release-1.11/dev/table/hive/hive_streaming.html 创建 kafka 表,通过 SQL 实时写入 Hive. 但我再通过 flink sql-...
小阿矿 2022-04-07 03:21:57 94 浏览量 回答数 1

回答

试验了一下 Flink-1.11 hive streaming 的功能 https://ci.apache.org/projects/flink/flink-docs-release-1.11/dev/table/hive/hive_streaming.html 创建 kafka 表,通过 SQL 实时写入 Hive. 但我再通过 flink sql-...
EXCEED 2022-04-07 04:17:52 101 浏览量 回答数 1

回答

hive_catalog=HiveCatalog("hive_catalog") t_env.register_catalog("hive_catalog",hive_catalog) t_env.use_catalog("hive_catalog") 假设hive catalog中已经定义了一个名字为source_table的表 tab=t_env.from_...
游客yzrzs5mf6j7yy 2022-04-03 17:37:03 0 浏览量 回答数 0

回答

我们可以为hive创建与spark相同的元数据。Spark为您做到了这一点,您不必单独安装Hive,也不必使用其中的一部分(例如Hive Metastore)。无论您使用何种安装的Apache Spark,Spark SQL都会在内部使用Hive Metastore...
社区小助手 2022-04-03 01:57:42 0 浏览量 回答数 0

回答

flink版本1.12.2,在交互式界面执行flink sql 连接hive操作时,出现连接拒绝异常,内容如下:Flink SQL>use catalog myhive;Flink SQL>show tables;dim_kcl_customer_source_1h_all mytest Flink SQL>select*from ...
毛毛虫雨 2022-04-07 02:52:17 159 浏览量 回答数 1

回答

flink版本1.12.2,在交互式界面执行flink sql 连接hive操作时,出现连接拒绝异常,内容如下:Flink SQL>use catalog myhive;Flink SQL>show tables;dim_kcl_customer_source_1h_all mytest Flink SQL>select*from ...
雪哥哥 2022-04-07 02:03:13 83 浏览量 回答数 0

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化