- 博客(23)
- 资源 (6)
- 收藏
- 关注
原创 idea 使用maven的archetype模板来创建Spark 项目
idea 创建spark 项目,总的来说就是用idea创建完成scala工程后,加入Spark sdk的jar 包,即可完成spark 工程的创建。
2019-12-02 13:31:25
1546
原创 DataX 数据全量,增量同步方案
关于DataX 增量更新实现注:参考来源文章增量更新总体思路:从目标数据库读取一个最大值的记录,可以是DataTime 或者 RowVersion 类型,然后根据这个最大值对源数据库要同步的表进行过滤,然后再进行同步即可。由于DataX 支持多种数据库的读写,一种相对简单并且可靠的思路就是:从csv 文件读取目标数据库上次抽取数据的一个最大值;动态修改json配置文件(增加过滤条件...
2019-04-26 23:38:42
23116
18
原创 使用maven的模板archetype 来创建scala项目
文档参考:https://docs.scala-lang.org/tutorials/scala-with-maven.htmlnew project—>maven—>create from archetype—>add archetype填入模板的gav - g:net.alchim31.maven - a: scala-archetype-simple ...
2018-07-16 19:25:00
3252
原创 Authentication plugin 'caching_sha2_password' cannot be loaded
1.在用mysql 8.0 版本时连接数据库遇到问题,提示如下Authentication plugin 'caching_sha2_password' cannot be loaded: dlopen(/usr/local/mysql/lib/plugin/caching_sha2_password.so, 2): image not found字面意思看起来似乎是认证插件无法加载,...
2018-07-11 20:56:50
2209
原创 Flume实战(1)—single agent flow的实现
1.理论基础# 列出agent的 sources, sinks and channels <Agent>.sources = <Source><Agent>.sinks = <Sink><Agent>.channels = <Channel1> <Channel2># 设置source的cha
2018-07-06 17:28:36
870
原创 Flume 基础知识
1. Flume 简介 Flume 是一个分布式的海量日志采集,聚合,转移工具。大数据常用数据处理框架graph LR实时流数据采集--> flume,kafka实时流数据处理--> spark,storm实时数据查询处理--> impala批数据导入导出-->Sqoop批数据查询处理--> hive这里只是给flume一个定位,清楚...
2018-07-06 17:26:25
415
原创 iOS 项目自动化打包实践
iOS 项目自动化打包实践 本文总结了最近的自动化打包实践的一些经验,希望可以帮到有需要的同学,同时还有一些小问题,有看到的大神,可以留言指点一下。
2016-12-27 19:15:04
765
原创 使用Xcode的Targets来管理开发和生产版本的构建.
技术总是需要在不断地学习,实践中获得进步,最近看到一篇文章挺好的,拿出来跟大家分享一下。
2016-04-06 17:01:03
624
原创 Objective-C编码规范(二)
对于易维护的代码而言,命名规则非常重要。Objective-C 的方法名往往十分长,但代码块读起来就像散文一样,不需要太多的代码注释。
2015-10-12 10:20:58
604
原创 NSLog再见!!你好,CocoaLumberjack
CocoaLumberjack提供了一个app企业级日志框架,对于app开发有着非常重要的作用。
2015-09-22 19:29:01
4502
原创 自定义button(标题+ 图片)
自定义button(标题+ 图片) 在项目中经常会用到带图片,标题的button,例如自定义的tabbar的底部按钮,返回按钮等。 系统为我们提供了一些方法来构建这样的button。 [btn setImageEdgeInsets:UIEdgeInsetsMake(5, 26, 16, 26)]; [btn setTitleEdgeInsets:UIEdge
2015-07-21 16:25:10
762
原创 如何在Xcode6中新建pch文件
关于pch文件 Xcode6之前,新建工程都会自带pch文件,但到了6时代,pch悄然从工程中消失了,在[stackOverflow](http://stackoverflow.com)上有关于它的一些讨论。 somebody say:pch文件会延长build的时间,基于这点苹果才把它移除掉了。(不过开发者还是可以手动添加的) But,对于某些情况,pch文件还是有必要添加的
2015-07-14 12:02:10
614
原创 解决tableView cellForRowAtIndex 返回nil 的问题
*版权所有,尊重原创,转载请注明出处**本文解决cellForRow 返回值 为 nil 的问题*
2015-05-18 15:32:36
2313
idea 配置连接远程hadoop 插件
2019-04-23
kettle 7.1 官方例子(附带文档整理-中英文对照)
2018-10-24
kettle 7.1 使用文档(初级)
2018-10-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人