标签-bigdata

最近在帮忙客户分析Hive Metastore慢的问题，从CDH监控上有个关于canary duration的数据指标，这个指标背后对应的到底是怎样的一种统计没有细究过。 以往主要关注的是Apache Hive的相关能力，对于Metastore的单次RPC请求应该是毫秒级的，那么这个canary duration是否可以对应到rpc请求上有些疑惑，于是深入了解了下这个指标的含义。 在Hive 阅读全文...

假设这里出错的表为test表。 ## 现象 Hive读取正常，不会报错，Spark读取就会出现： ``` org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: hdfs://testcluster/user/hive/warehouse/.... ``` 在hive中执行`desc format 阅读全文...