大数据
关注
分享
扫一扫
分享大数据领域相关的技术知识，包括：流式计算、hadoop批处理、文件格式、压缩格式等等
lihaojie9047
这个作者很懒，什么都没留下…
展开
-
连接kyuubi，执行 create table xxx as select 报错 can not be cast to orag.apache.spark.sql.execution.command
解决方案:kyuubi kyuubi-defaults.conf 文件中的spark.sql.extensions 改为 Spark 文件中的值org.apache.ranger.authorization.spark.authorizer.RangerSparkSQLExtension，重启下Kyuubi 服务验证。原创 2025-03-31 09:42:26 · 148 阅读 · 0 评论 -
spark引擎与hive引擎查出来的数据不一致的情况，解决方法
（就是说hive中能读到这个字段的值，但是在spark中却无法读取到该字段的值。很多时候可能还是由于大小写的混乱所导致的）2、更多的时候确实是由于元数据混乱导致的。1、由于精度不一样导致的。原创 2019-10-15 16:07:06 · 2005 阅读 · 0 评论 -
处理hive中的客户号变成科学计数法的问题
问题描述：存在这样的一种情况，客户号custno使用double类型，会导致custno变成科学计数法，这样的话，客户号没有办法关联。这种情况该如何解决？？解决方法：cast(cast (custno as bigint) as string) as custno先将custno转化为bigint类型，然后在转化为string类型。这样就能完美的解决这个问题。...原创 2019-10-15 16:02:09 · 2342 阅读 · 0 评论