- 博客(6)
- 资源 (2)
- 收藏
- 关注
原创 Spark-1.4.0定时任务
应工作要求,将hdfs中的logs文件转换成parquet文件,日志文件是追加型、分天存储的。粗略了解spark,故设计启动时跑一次,其余每天3点跑源码:https://github.com/zjf92/spark-1.4.0-TimerTaskpackage com.spark.parquet;import java.text.SimpleDateFormat;
2015-07-23 13:57:31
5427
原创 Apache error
1.The requested operation has failed!使用cmd运行httpd.exe,可看到报错信息2.#OS 10060(一段时间后假死)改ServerName localhost:80为ServerName {ip}:80
2015-07-15 14:11:36
783
原创 Apache资源gzip压缩
LoadModule expires_module modules/mod_expires.soLoadModule filter_module modules/mod_filter.soLoadModule deflate_module modules/mod_deflate.soLoadModule headers_module modules/mod_headers.so
2015-07-15 14:08:38
397
原创 Apache通过rewrite实现,url后追加“/”
LoadModule rewrite_module modules/mod_rewrite.soRewriteEngine onRewriteCond %{REQUEST_URI} .*[^//]$RewriteRule .*/htdocs/(.+)$ $1/ [L,R=301]Options FollowSymLinksAllowOverride AllOrder a
2015-07-15 14:05:46
993
原创 Apache反向代理
LoadModule proxy_module modules/mod_proxy.soLoadModule proxy_connect_module modules/mod_proxy_connect.soLoadModule proxy_ftp_module modules/mod_proxy_ftp.soLoadModule proxy_http_module modules/m
2015-07-15 13:59:16
860
原创 Flume-1.6.0修改
DirRegexSource功能设计递归监控目录(筛选文件)正则提取数据按字节数核对,重启续读参数monitorDir 必填 监控目录monitorFileRegex [\\W\\w]+ 选择监控文件名的正则checkFile 必填 读取的历史记录文件contentRegex 必填 从change file中循环取content的正则delayTime 30s 扫描目录间隔
2015-07-01 16:54:08
770
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅