
HDFS
吃辣椒的喵
测试狗一枚, 没事就分享一些杂七杂八的知识
展开
-
如何查看HDFS中表存储的数据
1.先通过showtable找到存储路径,得到路径信息/apps/hive/warehouse/dm_gcyth.db/ 2.然后执行 sudo -su hdfs hadoop fs -ls /apps/hive/warehouse/dm_gcyth.db/,找到该db库。 3.最后执行sudo -su hdfs hadoop fs -ls /apps/hive/warehouse/dm_gcyth.db/dm_gcyth_cw_t_budget_after_share_cost查看库下的表 ...原创 2021-12-01 09:54:23 · 3938 阅读 · 0 评论 -
如何查看存储在HDFS中表数据的字段类型
在某次查询中,发现用spark引擎查询表报错,但是用MR引擎查询同一张表却正常,经过分析,发现是表的定义字段类型和实际存储的字段类型不一样,那么,如何查看字段的存储类型呢? 1.: 先通过show create tablename,找到表的存储路径:hdfs://whchem/apps/hive/warehouse/ods_lms.db/bl_charge_order_dtl 2.然后通过 su hdfs切换到hdfs用户,查看存储目录下的数据块信息,语句如下 hdfs dfs -ls hdfs://原创 2021-12-01 09:50:04 · 1297 阅读 · 0 评论