- 博客(7)
- 收藏
- 关注
RSS订阅原创 sqoop导入MySQL加密字段
最近学习使用数仓，将MySQL中的数据导入hive做分析。因敏感性问题，业务方给的表中有几个字段是加密的，用的mysql自带的aes_encrypt，解密也简单，自带的aes_decrypt就可以。在MySQL中测试密码没问题后，就开始导数。我导数用的是sqoop-import,导入的orc格式的hive分区表。#将拜博超体数据导入hive#!/usr/bin/env bashcal_date=$1workdir=$(cd $(dirname $0); pwd)sql=$workdir/..
2022-04-29 15:17:25
1948
1
原创 restTemplate学习笔记-20210226
之前用过很多次restTemplate，主要用的get请求和post请求的getForObject和postForObject方法get请求一般我用的是：restTemplate.getForObject(String var1, Class var2)参数分别为请求url，返回体类型举个例子：String forObject = restTemplate.getForObject(“https://www.baidu.com?userId=1111”, String.class);对返回参数我习
2021-02-26 14:50:39
270
原创 Lucence初学小记
Lucence初学小记一. 流程1.索引流程：采集数据 --> 构建文档对象 -->创建索引（文档写入索引库）2.搜索流程：创建查询 --> 执行搜索 --> 渲染结果二. 具体过程 1. 索引流程 （1） 构建索引库Directory directory = FSDectory.open(new File("索引"))； （2） 指定分词器Analyzer analyzer = new StandardAnalyzer(Version.LUCENCE_40
2020-12-15 11:19:54
133
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人