sql语句
关注
分享
扫一扫
文章平均质量分 74
光圈1001
从事于金融反欺诈系统大数据研发工作
展开
-
sql语句中select语句检索的过滤
限制结果：1.distinct关键字 只返回不同的行，放在列名前，作用于查询的所有的列select distinc 列名 from 表名2.top 返回前多少行的数据select top 5 列名 form 表名 返回前5的行3.limit 5 offset 5 limit：返回多少行 offset 从第几行开始，默认是0开始，offset 1 是第二行sel...原创 2018-10-22 22:59:52 · 4984 阅读 · 2 评论 -
关于parkSQL读取Parquet数据源之合并元数据schema
【问题】-在读取小量数据时，会加载出最新的一个新加的列的数据，没有的值，为null，但是当加载的数据量偏大的时候，会出现加载字段不全的情况，没有达到预期【原因】从Spark 1.5.0版本开始，默认是关闭Parquet文件的自动合并元数据的特性的当数据量过大，sparksql，出于性能的考虑，没有合并字段的信息，也就是schema，造成了字段不全的问题【解决办法】read 数据源...原创 2019-03-13 20:57:15 · 495 阅读 · 0 评论