<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[dear_csdn的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/dear_csdn</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; dear_csdn]]></copyright><item><title><![CDATA[异步记录日志获取不到HttpServletRequest中的URI]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/116539133</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/116539133</guid><author>dear_csdn</author><pubDate>Sat, 08 May 2021 19:02:22 +0800</pubDate><description><![CDATA[异步记录日志获取不到HttpServletRequest中的URI@NPE异常
现象
侵入业务代码中记录审计日志时，需要根据HttpServletRequest请求获取需要的URI，但是获取为null
@Service
public class LogService {
    @Autowired
    private LogMapper logMapper;
    
    @Async
    @Transactional
    public void saveOptLog(String use]]></description><category></category></item><item><title><![CDATA[yarn 架构]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/103308025</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/103308025</guid><author>dear_csdn</author><pubDate>Fri, 29 Nov 2019 11:46:21 +0800</pubDate><description><![CDATA[yarn的机构说明：

来自官网

]]></description><category></category></item><item><title><![CDATA[安装pyspider时，需要安装pycurl，但是报错specify the SSL backend manually]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/81289364</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/81289364</guid><author>dear_csdn</author><pubDate>Mon, 30 Jul 2018 17:53:08 +0800</pubDate><description><![CDATA[Curl is configured to use SSL, but we have not been able to determine which SSL backend it is using. Please see PycURL documentation for how to specify the SSL backend manually.

也有人作出解答点击跳转

我是从官方文档中...]]></description><category></category></item><item><title><![CDATA[python中main函数的作用以及解释]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/80007464</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/80007464</guid><author>dear_csdn</author><pubDate>Thu, 19 Apr 2018 16:53:18 +0800</pubDate><description><![CDATA[
  python 中name == ‘__main__’ 的作用
  
  经典的英文解释：Make a script both importable and executable 
  中文解释：使脚本可以被调用import并且也可以直接运行


1、直接运行

# cat test_fun.py
def fun():
    print(__name__)
    print('this i...]]></description><category></category></item><item><title><![CDATA[git 使用]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/79446052</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/79446052</guid><author>dear_csdn</author><pubDate>Mon, 05 Mar 2018 15:08:24 +0800</pubDate><description><![CDATA[创建与合并分支


  应用场景：多人协作时，需要共同开发同一个功能时，就是对同一个文件进行操作，可以采用在本地创建分支并提交修改后的文件到master分支，进行合并，形成一个完成的文件。


# 创建本地分支并切换到分支dev_author
git checkout -b dev_author

# 查看当前所在分支
git branch

# 添加修改过的文件并提交
git add test_...]]></description><category></category></item><item><title><![CDATA[hive 导出数据之一列多行，转为一行多列]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/79220435</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/79220435</guid><author>dear_csdn</author><pubDate>Wed, 31 Jan 2018 17:57:25 +0800</pubDate><description><![CDATA[需求：提取数据 
说明：原数据是一列多行，需要转化为一行多列

待查询表为：temp_05

hive> desc temp_05;
OK
data_dt                 string
zhanghao                string
booking_time_final      string
sign                    string
hname]]></description><category></category></item><item><title><![CDATA[hive sql 优化]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/78900190</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/78900190</guid><author>dear_csdn</author><pubDate>Tue, 26 Dec 2017 11:11:50 +0800</pubDate><description><![CDATA[insert overwrite local directory'/tmp/100'
row format delimited fields TERMINATED by'\t'
select
  b.hid,b.comment_id,b.comment_time
from tmp_for_agoda_fix_date_format a
left join hotel_info_customer_co]]></description><category></category></item><item><title><![CDATA[sql 连续两个月活跃的用户]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/78365454</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/78365454</guid><author>dear_csdn</author><pubDate>Fri, 27 Oct 2017 15:29:30 +0800</pubDate><description><![CDATA[题目如图： 
环境：mysql 数据库建表：CREATE TABLE `T1` (
  `userID` int(11) NOT NULL,
  `monthID` int(11) NOT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8全部记录：SELECT * FROM T1;10002   2
10003   2
10002   3
10001   2
100]]></description><category></category></item><item><title><![CDATA[安装配置Supervisor]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/76595117</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/76595117</guid><author>dear_csdn</author><pubDate>Wed, 02 Aug 2017 18:55:46 +0800</pubDate><description><![CDATA[应用场景
  
  应用程序需要24小时不间断运行，这时可使用 supervisor 监控应用程序的进程，当发生应用程序内部错误退出、进程被杀死等情况时，自动重启应用程序。
  
  官方网站 http://supervisord.org





  支持的系统
  
  Supervisor 是一个 UNIX 下的进程管理软件 
  Supervisor 不可以在任何版本的 Windows 上]]></description><category></category></item><item><title><![CDATA[生产环境 hadoop集群监控工具--ganglia的搭建（YUM的方式）]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/76549760</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/76549760</guid><author>dear_csdn</author><pubDate>Tue, 01 Aug 2017 18:39:19 +0800</pubDate><description><![CDATA[集群简介：ip              主机名       集群角色     监控角色
192.168.20.161  oncloud0    NameNode    gmond，gmetad
192.168.20.162  oncloud1    DataNode    gmond
192.168.20.163  oncloud2    DataNode    gmond
192.168.20.]]></description><category></category></item><item><title><![CDATA[hadoop集群监控工具--ganglia的搭建（YUM的方式）]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/76528750</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/76528750</guid><author>dear_csdn</author><pubDate>Tue, 01 Aug 2017 14:58:24 +0800</pubDate><description><![CDATA[Ganglia架构简介：  
Ganglia 是一款为HPC(高性能计算) 集群设计的可扩展性的分布式监控系统，它可以监视和显示集群中节点的各种状态信息，它由运行在各个节点上的守护进程gmond 采集 CPU、内存、磁盘利用率、I/O负载、网络流量情况等方面的数据，然后汇总到守护进程gmetad下，使用rrdtool存储数据，然后将历史数据以曲线方式通过PHP页面呈现，通过曲线很容易见到每个节点的工]]></description><category></category></item><item><title><![CDATA[awk 传参]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/72461564</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/72461564</guid><author>dear_csdn</author><pubDate>Thu, 18 May 2017 11:57:47 +0800</pubDate><description><![CDATA[功能：向awk传递多个参数，执行同样的步骤—>查找计数#!/bin/bash#以下两种方式都可以传递awk参数
test1="hello"
test2="world"
echo |awk -vt1=$test1 -vt2=$test2 'BEGIN{print t1" "t2}'
echo ${test1} ${test2} | awk '{print "'$test1'","'$test2'"}']]></description><category></category></item><item><title><![CDATA[hive 同一个表不同分区的数据求和]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/71747343</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/71747343</guid><author>dear_csdn</author><pubDate>Fri, 12 May 2017 16:53:08 +0800</pubDate><description><![CDATA[业务表如下：hive> desc sc_kekaoxing;
OK
id                      string                  可靠小表id              
car_id                  string                  car表id              
month                   strin]]></description><category></category></item><item><title><![CDATA[hive任务卡在个别reduce的问题分析]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/70788455</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/70788455</guid><author>dear_csdn</author><pubDate>Wed, 26 Apr 2017 10:43:42 +0800</pubDate><description><![CDATA[hive任务卡在个别reduce的问题分析]]></description><category></category></item><item><title><![CDATA[hive 添加字段导致数据出错]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/70738241</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/70738241</guid><author>dear_csdn</author><pubDate>Tue, 25 Apr 2017 13:24:02 +0800</pubDate><description><![CDATA[【数据查询为null】

有一张表是已经存在的历史表：表名为code，
由于业务需要新增加了一个字段：
alter table code add COLUMNS (tag_sentence string comment '分割的句子，test') ；
然后load相对应的数据，查询发现  tag_sentence 的值有的是显示正确的，有的显示为null


解决方案：

在创]]></description><category></category></item><item><title><![CDATA[hadoop 运维]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/70157520</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/70157520</guid><author>dear_csdn</author><pubDate>Fri, 14 Apr 2017 15:48:44 +0800</pubDate><description><![CDATA[netstat -n | awk  '/^tcp/ {++S[$NF]} END {for(a in S) print a,s[a]}'

ALTER TABLE logs DROP IF EXISTS PARTITION(year = 2012, month = 12, day = 18);


ALTER TABLE hotel_info_customer_comment_format]]></description><category></category></item><item><title><![CDATA[执行 hive sql ，报错：断开的管道]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/70049678</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/70049678</guid><author>dear_csdn</author><pubDate>Tue, 11 Apr 2017 11:42:53 +0800</pubDate><description><![CDATA[在集群正常的情况下，执行hql会报错：断开的管道，由于hql已经运行很久了，保证并不是hql的语句错误，
所以查看磁盘使用情况，执行命令： df -lh 
文件系统                 容量  已用  可用 已用% 挂载点
/dev/mapper/centos-root   50G   17G   34G   33% /
devtmpfs                  16]]></description><category></category></item><item><title><![CDATA[定时任务crontab报错]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/69978483</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/69978483</guid><author>dear_csdn</author><pubDate>Mon, 10 Apr 2017 18:25:05 +0800</pubDate><description><![CDATA[新增一条定时任务命令之后，在保存时，报错信息如下：
"/tmp/crontab.fe4L4V" 31L, 1656C written
crontab: installing new crontab
"/tmp/crontab.fe4L4V":19: bad minute
errors in crontab file, can't install.
Do you want to retry]]></description><category></category></item><item><title><![CDATA[关于hive分析函数]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/69396661</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/69396661</guid><author>dear_csdn</author><pubDate>Thu, 06 Apr 2017 16:46:05 +0800</pubDate><description><![CDATA[Hive分析窗口函数(一)
 SUM,AVG,MIN,MAX

http://lxw1234.com/archives/2015/04/176.htm



hive建表的location问题？

https://www.zhihu.com/question/23138769




Hive分析窗口函数(二) NTILE,ROW_NUMBER,RANK,DENSE_R]]></description><category></category></item><item><title><![CDATA[awk把所有日期下的内容输出到同一个文件中]]></title><link>https://blog.youkuaiyun.com/dear_csdn/article/details/69389930</link><guid>https://blog.youkuaiyun.com/dear_csdn/article/details/69389930</guid><author>dear_csdn</author><pubDate>Thu, 06 Apr 2017 15:15:07 +0800</pubDate><description><![CDATA[功能：awk把所有日期下的内容输出到同一个文件中，
没有使用cat命令的原因是多个文件衔接的地方有的可能有换行符有的可能没有换行符
文件名为a.sh
#!/bin/bash
dts=$1
for dt in $dts
  do
    cat ${dt}/result/hotel_ranking_info_tb |awk -F "\t" '{print $0}'
  done
运]]></description><category></category></item></channel></rss>