
groovy
轨迹bucter
这个作者很懒,什么都没留下…
展开
-
groovy分析脚本基本组成文件详解和运行过程中出错分析
在本公司搭建的hadoop运行平台上,主要利用groovy进行数据分析并输出分析结果到数据库报表。每一个分析需要编写DataTypeConfig.xml、ReportConfig.xml和.groovy脚本文件。在进行数据分析的过程中,也会出现一些常见的错误,现在逐步总结如下。一、DataTypeConfig.xml、ReportConfig.xml和.groovy脚本文件字段分析原创 2015-01-30 10:31:52 · 1250 阅读 · 0 评论 -
groovy脚本使用map
private Map parseUrl(String str) { Map rsltMap = new HashMap(); String[] strList = str.split("&"); for(int i=0; i String[] kv = strList[i].split("=");原创 2015-02-02 16:52:41 · 1025 阅读 · 0 评论 -
array数组中数据的读取
在用groovy脚本分析用户模型数据的过程中,由于用户模型数据中有一个字段是appInfo, 该字段是一个自定义AppInfoModel类的列表List ,那在groovy脚本中应该如何获取该列表进而获取AppInfoModel中的内容呢?也很简单。在groovy脚本中:public class xxxxxxxx extends ScriptOper { public v原创 2015-01-21 17:28:31 · 2037 阅读 · 0 评论 -
txt格式数据的逐条处理
最近在搞hadoop和mapreduce处理大数据,在用groovy脚本编写分析(需要编写DataTypeConfig.xml、ReportConfig.xml、.groovy脚本)时遇到一个问题:就是数据格式为txt,非avro数据;那要如何读取呢?其实很简单,在几个地方设置一下就可以了。具体说明如下:DataTypeConfig.xml中:txtline.groovy脚本中原创 2015-01-21 16:31:54 · 814 阅读 · 0 评论 -
groovy脚本中输出调试信息到文件
在进行本地调试时,有时需要将相关的调试信息输出到文件中进行分析,那要怎么做呢?很简单。.groovy脚本中:public class xxxxxxxx extends ScriptOper { public void preProc_xxxx (DataRecord record, List lstMap) { ScriptMap map = Scrip原创 2015-01-22 22:42:59 · 4995 阅读 · 0 评论