aiyinsitan215的专栏

从指定的网站读取内容，将内容转为json，将json转为sql，然后插入到数据库 1、读取网站内容， ExecuteScript 处理器，脚本语言 grrovy，jsoup做解析网页信息，提取公司门户网站的所有的新闻 /usr/nifi/jars/jsoup-1.12.1.jar, 脚本代码如下： import groovy.json.JsonBuilder import org.jso...

1、在hive中创建一张外部表 create external table news2(id string,title string,url string,content string) row format delimited fields terminated by '\t'; 之前的想法是从mysql读取数据，将数据转为json，再用ConvertJSONToSQL 转为hive ...