首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Apache :多维数据集构建在步骤3中失败

Apache :多维数据集构建在步骤3中失败
EN

Stack Overflow用户
提问于 2017-03-14 05:32:41
回答 1查看 608关注 0票数 0

我正在尝试构建一个Apache多维数据集,但是在步骤3中使用以下日志msg失败了:

NoSuchObjectException(message:default.kylin_intermediate_t3cube_47ec8760_55ce_445d_a91b_0c33957690bf表未找到) org.apache.kylin.source.hive.HiveMRInput$HiveTableInputFormat.configureJob(HiveMRInput.java:110) at org.apache.kylin.engine.mr.steps.FactDistinctColumnsJob.setupMapper(FactDistinctColumnsJob.java:119) at org.apache.kylin.engine.mr.steps.FactDistinctColumnsJob.run(FactDistinctColumnsJob.java:103) at org.apache.kylin.engine.mr.MRUtil.runMRJob(MRUtil.java:92) at org.apache.kylin.engine.mr.common.MapReduceExecutable.doWork(MapReduceExecutable.java:120) at org.apache.kylin.job.execution.AbstractExecutable.execute(AbstractExecutable.java:113) at org.apache.kylin.job.execution.DefaultChainedExecutable.doWork(DefaultChainedExecutable.java:57) at org.apache.kylin.job.execution.AbstractExecutable.execute(AbstractExecutable.java:113) at org.apache.kylin.job.impl.threadpool.DefaultScheduler$JobRunner.run(DefaultScheduler.java:136) at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617) at java.lang.Thread.run(Thread.java:745)由: java.io.IOException: NoSuchObjectException(message:default.kylin_intermediate_t3cube_47ec8760_55ce_445d_a91b_0c33957690bf table引起)apache.hive.hcatalog.mapreduce.HCatInputFormat.setInput(HCatInputFormat.java:97) at org.apache.hive.hcatalog.mapreduce.HCatInputFormat.setInput(HCatInputFormat.java:51) at org.apache.kylin.source.hive.HiveMRInput$HiveTableInputFormat.configureJob(HiveMRInput.java:105) . 11更多的原因是: NoSuchObjectException(message:default.kylin_intermediate_t3cube_47ec8760_55ce_445d_a91b_0c33957690bf表未找到)在org.apache.hadoop.hive.metastore.HiveMetaStore$HMSHandler.org.apache.hadoop.hive.metastore.HiveMetaStore$HMSHandler.get_table(HiveMetaStore.java:1899) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native get_table_core(HiveMetaStore.java:1946) ) sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.hive.metastore.RetryingHMSHandler.invokeInternal(RetryingHMSHandler.java:140) at org.apache.hadoop.hive.metastore.RetryingHMSHandler.invoke(RetryingHMSHandler.java:99) at com.sun.proxy.$Proxy47.get_table(不明来源) at org.apache.hadoop.hive.metastore.HiveMetaStoreClient.getTable(HiveMetaStoreClient.java:1332) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)在sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.hive.metastore.RetryingMetaStoreClient.invoke(RetryingMetaStoreClient.java:150) at com.sun.Proxy.$Proxy48.getTable(未知来源) org.apache.hive.hcatalog.common.HCatUtil.getTable(HCatUtil.java:180) at org.apache.hive.hcatalog.mapreduce.InitializeInput.getInputJobInfo(InitializeInput.java:105)在org.apache.hive.hcatalog.mapreduce.InitializeInput.setInput(InitializeInput.java:88) at org.apache.hive.hcatalog.mapreduce.HCatInputFormat.setInput(HCatInputFormat.java:95) . 13更多的结果代码:2

消息显示kylin无法找到"default.kylin_intermediate_t3cube_47ec8760_55ce_445d_a91b_0c33957690bf表",但是当我登录到hive时,这个表就存在了。

有人能给我点光来解决这个问题吗?

编辑:我已经解决了这个问题。Kylin使用HCatelog来获取表格信息,但我没有正确配置蜂箱。

EN

回答 1

Stack Overflow用户

发布于 2017-04-04 09:00:50

Kylin通过hcatalog直接连接到细胞转移。这需要类路径上的hivesite.xml,并且它必须包含足够的信息(如'hive.metastore.uris'),以连接到正确的蜂巢转移。否则,如果与错误的亚稳态相连接,就会出现这样的无表异常.

检查纱线资源管理器或作业历史服务器中失败的“提取事实表不同列”作业的MR配置。搜索类路径属性,如“map还原.. classpath”。检查hive-site.xml在类路径上,它包含正确的亚稳态连接信息。

注意,有“$kylin_HOME/conf/kylin_ job _con.xml”,您可以使用它来覆盖任何MR作业配置,例如‘map还原e.application.classpath’。

KYLIN-2530是一种改进方法。假设这个问题将从Kylin2.0开始缓解。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/42778412

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档