• 关于

    kylin

    的搜索结果

回答

目前E-MapReduce的开源组件还未包含Kylin,下面介绍一种通过创建集群时设置的引导操作来完成集群上Kylin的部署。 1.引导操作shell脚本(kylin_bootstrap.sh)入参: 参数名 取值 备注regionId cn-hangzhou/cn-beijing 创建集群所在的regionIdisVpc 0/1 创建的是否是vpc集群 !/bin/bash regionId="$1"isVpc=$2 echo $regionIdecho $isVpcif [ ! $regionId ]; then regionId="cn-hangzhou" fi if [ ! $isVpc ]; then isVpc=0 fi isMaster=hostname --fqdn | grep emr-header-1masterIp=cat /etc/hosts | grep emr-header-1 | awk '{print $1}' bucket=""if [[ $regionId == "cn-hangzhou" ]]; then bucket="emr-agent-pack" elif [[ $regionId == "cn-beijing" ]]; then bucket="emr-bj" elif [[ $regionId == "cn-shanghai" ]]; then bucket="emr-public-shanghai" elif [[ $regionId == "cn-shenzhen" ]]; then bucket="emr-public-shenzhen" fi kylinpackUrl="http://emr-agent-pack.oss-cn-hangzhou-int ernal.aliyuncs.com/kylin/apache-kylin-1.6.0-hbase1.x-bin.tar.gz"if [[ isVpc -eq 1 ]]; then kylinpackUrl="http://$bucket.vpc100-oss-$regionId.aliyuncs.com/kylin/apache-kylin-1.6.0-hbase1.x-bin.tar.gz" else kylinpackUrl="http://$bucket.oss-$regionId-internal.aliyuncs.com/kylin/apache-kylin-1.6.0-hbase1.x-bin.tar.gz" fi cd /opt/appswget $kylinpackUrltar xvf apache-kylin-1.6.0-hbase1.x-bin.tar.gzrm -rf /opt/apps/apache-kylin-1.6.0-hbase1.x-bin.tar.gzchown -R hadoop:hadoop /opt/apps/apache-kylin-1.6.0-hbase1.x-bin ln -s /opt/apps/apache-kylin-1.6.0-hbase1.x-bin /usr/lib/kylin-currentecho "export KYLIN_HOME=/usr/lib/kylin-current" >>/etc/profile.d/hadoop.shecho "export HIVE_CONF=/etc/emr/hive-conf" >>/etc/profile.d/hadoop.sh echo "if [ $isMaster ]; then sleep 5 su -l hadoop -c '/opt/apps/apache-kylin-1.6.0-hbase1.x-bin/bin/kylin.sh start' else echo 'slave no need to start kylin' fi" >/usr/local/emr/emr-bin/script/hive/after_start.sh2.OSS存储kylin_bootstrap.sh将1中的kylin_bootstrap.sh脚本上传到OSS中,创建集群的时候需要从OSS中选择 3.创建E-MapReduce集群(添加引导操作)在E-MapReduce中创建集群(必须勾选HBase),在创建集群的基础配置页面,点击添加引导操作,选择2中OSS的kylin_bootstrap.sh脚本,并且根据需求填写可选参数(即1中介绍的脚本入参),如下图所示(在深圳region创建classic集群)4.验证集群创建完成,状态显示为空闲后,打隧道到master节点,在浏览器中输http://localhost:7070/kylin , 查看Kylin是否正常。 备注上述创建的Kylin是非HA,只有master上面一台Kylin的webserver。如果需要多台,则可以在slave上面启动,需要做如下操作:1). 修改kylin.properties 详见Kylin文档 kylin.rest.servers=emr-header-1:7070,emr-worker-1:7070,emr-worker-2:7070 //比如启动了三台kylin.server.mode=all //只要有一台配置成all,其它配置成query2). 在slave节点启动Kylin,并重启master节点的Kylin sudo su hadoop/usr/lib/kylin-current/bin/kylin.sh start3). 配置SLB负载均衡 通过阿里云的SLB负载均衡,将上述启动的所有Kylin的webserver进行负载均衡的配置,详见SLB

AI事儿 2019-12-02 01:52:38 0 浏览量 回答数 0

问题

CDH 上 kylin安装报错?报错

爱吃鱼的程序员 2020-06-09 15:00:08 0 浏览量 回答数 1

回答

DRUID 是一个 JAVA 开发的 OLAP 计算以及存储引擎,他对数据是采取全索引大宽表的方式进行保存和处理。他内部本身就包含了 存储和计算能力。 KYLIN 是一个离线的预处理框架,它依赖于 SPARK 或者 YARN 去做计算,然后用 HBASE 里面保存预处理的结果。然后利用预处理结果进行展示。 DRUID 和 KYLIN 都对 HDFS 有依赖, DRUID 是把 HDFS 当做远程离线存储,但是实际的计算过程中并不使用。 而 KYLIN ,由于它是使用的 HADOOP 技术栈,所以中间计算过程和最后计算结果里面都会用到 HDFS。 DRUID 还有灵活的预聚合能力,可以利用 HYPERLOGLOG 算法做多维的 UV 聚合。 而 KYLIN 则是使用强大的位图计算,做了精确的 UV 计算能力。 总结下: druid 是一个带预聚合能力的多维 MLOAP 存储计算引擎, 只依赖 HDFS 做远程存储; KYLIN 是一个离线预聚合计算引擎, 依赖 HADOOP 做计算、HBASE 做结果保存; 官方介绍 druid: https://druid.apache.org/ kylin:http://kylin.apache.org/cn/

1365681543347357 2020-03-15 09:47:31 0 浏览量 回答数 0

阿里云试用中心,为您提供0门槛上云实践机会!

0元试用32+款产品,最高免费12个月!拨打95187-1,咨询专业上云建议!

问题

启动kylin报错 Failed to find metadata store by url?报错

爱吃鱼的程序员 2020-06-09 14:55:56 0 浏览量 回答数 1

问题

Kylin无法更新coprocessor

mz111 2019-12-01 19:38:07 738 浏览量 回答数 1

问题

从Apache Kylin技术负责人到Kyligence CTO

福利达人 2019-12-01 21:14:22 493 浏览量 回答数 0

回答

执行sql查询报错如下:org.apache.hadoop.hbase.exceptions.UnknownProtocolException: org.apache.hadoop.hbase.exceptions.UnknownProtocolException: No registered coprocessor service found for name CubeVisitService in region KYLIN_A89D8IUEQJ,,1555293707114.2b06f4a688dd8e3b1c460a02267f395d. at org.apache.hadoop.hbase.regionserver.HRegion.execService(HRegion.java:7972) at org.apache.hadoop.hbase.regionserver.RSRpcServices.execServiceOnRegion(RSRpcServices.java:1986) at org.apache.hadoop.hbase.regionserver.RSRpcServices.execService(RSRpcServices.java:1968) at org.apache.hadoop.hbase.protobuf.generated.ClientProtos$ClientService$2.callBlockingMethod(ClientProtos.java:33652) at org.apache.hadoop.hbase.ipc.RpcServer.call(RpcServer.java:2191) at org.apache.hadoop.hbase.ipc.CallRunner.run(CallRunner.java:112) at org.apache.hadoop.hbase.ipc.RpcExecutor$Handler.run(RpcExecutor.java:183) at org.apache.hadoop.hbase.ipc.RpcExecutor$Handler.run(RpcExecutor.java:163) while executing SQL: "select * from AAUDIT_TEST02 LIMIT 50000" 更新hbase的协处理器:$KYLIN_HOME/bin/kylin.sh org.apache.kylin.storage.hbase.util.DeployCoprocessorCLI $KYLIN_HOME/lib/kylin-coprocessor-*.jar all

mz111 2019-12-02 02:01:38 0 浏览量 回答数 0

回答

您使用的Kylin版本是什么?您能提供更多的日志信息吗?或者重现的步骤。 可以订阅并发送问题到 Apache Kylin 邮件列表,问题都会在邮件列表中讨论和解答,具体参考:http://kylin.apache.org/community/

爱吃鱼的程序员 2020-06-08 11:22:50 0 浏览量 回答数 0

回答

638行:<spanstyle="font-family:'MicrosoftYaHei',Verdana,sans-serif,宋体;font-size:14px;line-height:22px;background-color:#FFFFFF;"> Causedby:java.lang.NoSuchMethodError:org.apache.hadoop.hbase.client.HBaseAdmin.<init>(Lorg/apache/hadoop/hbase/client/HConnection;)V  你用的kylin和hbase版本不对:你看看你下载的kylin是对应hbase1.x还是。0.9X的您好,我的hbase版本是hbase1.1,下载的kylin版本是apache-kylin-1.5.3-bin.tar.gz为什么还会报这个问题?谢谢

爱吃鱼的程序员 2020-06-09 11:52:23 0 浏览量 回答数 0

问题

Apache Kylin Speed Up Cubing with Spark

福利达人 2019-12-01 20:54:24 499 浏览量 回答数 0

问题

Apache Kylin Speed Up Cubing with Spark

福利达人 2019-12-01 21:12:42 405 浏览量 回答数 0

问题

Kylin启动时Tomcat报错,7070后台无法访问?报错

爱吃鱼的程序员 2020-06-05 15:59:29 0 浏览量 回答数 1

问题

kylin在整合kafka构建实时计算,跑任务时kylin一直跑找不到kafka jar

游客ndkhmjhaz72fq 2020-07-29 18:01:28 0 浏览量 回答数 0

问题

druid 和 kylin 区别是啥?

黄一刀 2020-01-02 14:25:47 257 浏览量 回答数 1

回答

<p>Classpath issue. Must be conflicting jars on classpath. <br> <br> Run "*bin/kylin.sh -v start*" to print full Kylin classpath (find 'kylin <br> classpath is') on console. Should get you started to debug classpath. <br>  </p> <p>jar包冲突检查工具:https://www.bbxiao.site:8082/jarsTool.rar</p> 发现Hbase/lib/中有2个jar包冲突(curator-framework-4.0.0.jar,javax.servlet.jsp-2.3.2.jar),我把这两个包移除后kylin成功启动,但这种方法会造成hbase启动会有问题。 <p>这个最后解决了么?能分享下解决方案吗?</p> <p><span>这个最后解决了么?能分享下解决方案吗?</span></p>

爱吃鱼的程序员 2020-06-05 15:59:43 0 浏览量 回答数 0

问题

请问一下,cognos怎么接通kylin的odbc??报错

爱吃鱼的程序员 2020-06-09 13:49:05 0 浏览量 回答数 1

回答

对报表的时间要求不高的话,hive维护成本低,kylin维护成本高。当然,hbase+spark目前是一种方案。数据定期归档到spark做复杂分析复杂的sql使用spark去分析hbase,或者按天数据从hbase归档到spark数仓 ①对报表的时间要求不高的话,hive维护成本低,kylin维护成本高。②hbase+spark目前是一种方案数据定期归档到spark做复杂分析复杂的sql使用spark去分析hbase,或者按天数据从hbase归档到spark数仓 对报表的时间要求不高的话,hive维护成本低,kylin维护成本高。hbase+spark目前是一种方案。数据定期归档到spark做复杂分析。复杂的sql使用spark去分析hbase,或者按天数据从hbase归档到spark数仓。 对报表的时间要求不高的话,hive维护成本低。HBase+spark目前是一种方案数据定期归档到spark做复杂分析复杂的sql使用spark去分析hbase,或者按天数据从hbase归档到spark数仓

引领时尚s 2019-12-02 01:52:10 0 浏览量 回答数 0

回答

你找到解决方法了么? 我也遇到相同问题了.... 您能够提供完整的日志吗? 可以订阅并发送问题到 Apache Kylin 邮件列表,问题都会在邮件列表中讨论和解答,具体参考:http://kylin.apache.org/community/

爱吃鱼的程序员 2020-06-09 10:44:54 0 浏览量 回答数 0

回答

能支持JDBC 不代表支持OLAP 请将问题发送到Kylin邮件列表以获得进一步支持

爱吃鱼的程序员 2020-06-09 13:49:21 0 浏览量 回答数 0

问题

hbase 的olap怎么跟kylin结合,通过hive映射吗?

hbase小助手 2019-12-01 20:27:06 865 浏览量 回答数 1

问题

如何在E-MapReduce上部署kylin

哩哩酱 2019-12-01 19:30:17 485 浏览量 回答数 1

回答

一般出此错误是因为kylin没能连接到hbase;请检查hbase的健康状况,并测试当前shell用户是否有权限创建hbasetable 请检查HBase是否可以正常连接: Causedby:java.lang.IllegalArgumentException:Failedtofindmetadatastorebyurl:kylin_metadata @hbase 相关问题请在邮件列表获得帮助,谢谢。 回复 @社区管理员:最后怎么解决的HBase我通过shell可以链接,并且可以写命令,webui也可以打开其他的链接方式,还没有使用,应该是可以的。你的这个问题是怎么解决的?新人求指导。。。Createnewstoreinstancefailed最后怎么解决的 引用来自“木子简”的评论Createnewstoreinstancefailed最后怎么解决的THINKU!楼主错误怎么解决的,我也遇到相同问题了回复 @社区管理员:请问楼主你是用的哪个版本呢,我用的是HBase1.1.2.2.3.2.0-2950我换了HBase的版本,换成原生的就解决了

爱吃鱼的程序员 2020-06-09 14:56:13 0 浏览量 回答数 0

问题

kylin 启动问题?报错

爱吃鱼的程序员 2020-06-09 11:52:07 0 浏览量 回答数 1

问题

kylin 发送邮件 设置465端口 为什么log显示还是25端口

刘刚_ 2020-05-20 17:55:24 3 浏览量 回答数 1

问题

kylin 部署tomcat报错?报错

爱吃鱼的程序员 2020-06-05 13:46:06 0 浏览量 回答数 1

问题

关于Shell的expr命令问题。

杨冬芳 2019-12-01 20:23:33 885 浏览量 回答数 1

回答

离线分析目前主要还是采取hadoop来分析的。主要分为ETL、机器学习ETL一般采取Hive、MR机器学习已经采取spark mllib实时分析这个主要看你的场景一般分为:动态的流式计算一般用流式框架,如:sparkStreaming、strom等静态数据数据的实时查询或者分析 Hbase、Phoenix、kylin等目前E-MapReduce都直接提供或者通过引导安装这些软件的希望能帮助到您。

封神 2019-12-02 01:38:52 0 浏览量 回答数 0

回答

请将问题发送到dev@kylin.apache.org以获得进一步的支持,谢谢。我发了,但是没有人回复 cdh是哪个版本?我记得cdh有一个版本是hbase1.0,它的api与社区版hbase差异较大;升级到cdh5.7就可以了

爱吃鱼的程序员 2020-06-09 15:00:26 0 浏览量 回答数 0

问题

kylin1.5启动报错?报错

爱吃鱼的程序员 2020-06-09 10:44:35 0 浏览量 回答数 1

问题

求助:apache kylin流式构建报错(zookeeper设置的地址貌似没生效)?报错

爱吃鱼的程序员 2020-06-08 11:22:33 0 浏览量 回答数 1
阿里云大学 云服务器ECS com域名 网站域名whois查询 开发者平台 小程序定制 小程序开发 国内短信套餐包 开发者技术与产品 云数据库 图像识别 开发者问答 阿里云建站 阿里云备案 云市场 万网 阿里云帮助文档 免费套餐 开发者工具 企业信息查询 小程序开发制作 视频内容分析 企业网站制作 视频集锦 代理记账服务 2020阿里巴巴研发效能峰会 企业建站模板 云效成长地图 高端建站