- 博客(6)
- 问答 (1)
- 收藏
- 关注
原创 hive 性能优化
目录1.sql语法优化1.使用explain 查询计划优化sql2.使用analyze分析器3.谓词下推2.数据存储优化1.设计分区表2.设计分桶表3.采用列式存储(orc格式存储)1.开启orc索引2.开启orc布隆过滤器(布隆过滤器:没有一定没有,有可能没有,还有查数据)3.开启orc 矢量化查询4.使用文件snappy压缩5.小文件优化1.避免生成小文件2.合并小文件3.hive参数优化1.hive 中mr相关参数优化(1)...
2021-10-14 17:07:43
595
原创 MySQL 导入csv 文件语句
LOAD DATA LOCAL INFILE 'C:\\Users\\wey\\Desktop\\import\\ping.csv' /*导入本地文件用LOCAL,路径中不能有中文*/INTO TABLE `test_wey`.`safety_index`CHARACTER SET 'gbk' FIELDS TERMINATED BY ',' /*报string' '错误指定gbk*...
2019-09-07 23:47:31
648
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人