没有合适的昵称

java.io.IOException: org.apache.parquet.io.ParquetDecodingException: Can not read value at 0 in block -1 in file hdfs://test:9999/user…000.snappy.parquet由于 Hive 和 SparkSQL 在 Decimal 类型上使用了不同的转换方式写入 Parquet，导致 Hive 无法正确读取 SparkSQL 所导入的数据。对于已有的使用 SparkSQL 导

参考:https://blog.youkuaiyun.com/x950913/article/details/106810376/

public class SumStringUdf implements UDF1<String, Double> {@Overridepublic Double call(String sumStr) throws Exception {// 处理规则}}写法上不会报错,但是一旦执行,就会报错: of the type (java.lang.Double) cannot be converted to the string type 不管是...

–shardsvr启动时加上这个参数就可以了

问题描述:早上上班突然看到服务器资源被占满,查找原因发现全部是yarn的资源占用,于是去找相关的进程,杀死进程,但是依旧没用,在不影响生产的前提下,将中毒的机器重启后,依旧存在一个进程占用太多的内存及CPU资源,参考https://blog.51cto.com/hashlinux/2296233,做了之后还是存在,其文件会自动的生成,怎么都删不掉,最后的处理办法:将文件的权限改为000后,杀死进程...