<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[wanglei It的专栏]]></title><description><![CDATA[技术需要不断学习整理中，坚持下去，让技术不断进步]]></description><link>https://blog.youkuaiyun.com/wangleittt</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; wangleittt]]></copyright><item><title><![CDATA[hive下1.5亿数据统计数据]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/108057549</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/108057549</guid><author>wangleittt</author><pubDate>Mon, 24 Aug 2020 14:44:00 +0800</pubDate><description><![CDATA[select
 g.inc_day,
 count(
  case
   when g.position_attr in ('一线', '二线') then g.emp_code
  end
 ) as one_two_total,
 count(
  case
   when g.position_attr = '三线' THEN g.emp_code
  end
 ) as three_total,
 count(
  case
   when g.po...]]></description><category></category></item><item><title><![CDATA[mysql处理打卡外勤主键，联合主键约束更新不了数据]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/78578291</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/78578291</guid><author>wangleittt</author><pubDate>Mon, 02 Mar 2020 10:05:16 +0800</pubDate><description><![CDATA[(maxU.singletodaymax-minU.singletodaymin)/2+minU.singletodaymin

singleCode



11

1



24.43

2



30.65

4



5.755

5



8.29

8



8.58

9



6.135

10
]]></description><category></category></item><item><title><![CDATA[大数据hive统计全年每天上班在9:00-9:30的数据，通用sql]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/104015282</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/104015282</guid><author>wangleittt</author><pubDate>Fri, 17 Jan 2020 10:30:56 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

统计全年每天上班在9:00-9:30的数据
select
 count(1),
 t.clock_time_b
from
 (
  select
   DATE_FORMAT(clock_time, 'HH:mm') as clock_time_a,
   DATE_FORMAT(clock_time, 'yyyy-M...]]></description><category></category></item><item><title><![CDATA[研发人员研究性能调优方面入手]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/103960544</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/103960544</guid><author>wangleittt</author><pubDate>Wed, 15 Jan 2020 14:37:47 +0800</pubDate><description><![CDATA[CPU 使用率

CPU负载

内存使用率

磁盘I/O

网络流量

磁盘空间

系统进程

服务的性能监控

数据库查询吞吐率，包括Change DB、Select、Insert、Update、Delete

数据库持久连接利用率

数据库查询缓存空间使用率

数据库查询缓存命中率

数据库缓存查询数

数据库索引缓存命中率

数据库索引读取统计

数据库连接吞吐率

数据库连接缓存命中...]]></description><category></category></item><item><title><![CDATA[SpringCloud和Dubbo的区别与SpringCloud核心组件]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/103959821</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/103959821</guid><author>wangleittt</author><pubDate>Mon, 13 Jan 2020 16:23:31 +0800</pubDate><description><![CDATA[SpringCloud和Dubbo的区别

作者官方网站:http://www.wxl568.cn

最大区别：SpringCloud抛弃了Dubbo的RPC通信，采用的是基于HTTP的REST方式。  总体来说，两者各有优势。虽说后者服务调用的功能，但也避免了上面提到的原生RPC带来的问题。而且REST相比RPC更为灵活，服务提供方和调用方的依赖只依靠一纸契约，不存在代码级别的依赖，这在强调快...]]></description><category></category></item><item><title><![CDATA[MySql日常监控运营系统状况]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/103959297</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/103959297</guid><author>wangleittt</author><pubDate>Mon, 13 Jan 2020 15:54:51 +0800</pubDate><description><![CDATA[MySql日常监控运营系统状况

作者官方网站:http://www.wxl568.cn

1. 查看事务隔离级别
SELECT @@global.tx_isolation;
SELECT @@session.tx_isolation;
SELECT @@tx_isolation;
2. 设置隔离级别
SET [SESSION | GLOBAL] TRANSACTION ISOLATION LEV...]]></description><category></category></item><item><title><![CDATA[Python开发我用了这2款开发软件都不错]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/80160719</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/80160719</guid><author>wangleittt</author><pubDate>Tue, 07 Jan 2020 10:43:45 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

Python开发我用了这2款开发软件都不错



Python开发我用了这2款开发软件都不错
Python开发就是太多引用的包兼容不好搞，开发环境也是版本不是一般的多
PyCharm开发IDE
PyCharm 是由 JetBrains 打造的一款 Python IDE。
PyCharm 具备一般 Python IDE 的功能，比如：...]]></description><category></category></item><item><title><![CDATA[工作中开发sql语句case when  else使用]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/103782299</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/103782299</guid><author>wangleittt</author><pubDate>Tue, 31 Dec 2019 14:39:06 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

sql语句统计case when else 输出状态类型实例

case event_id when 'hrss_clock_001' then '员工登陆打卡微服务'
        when 'hrss_clock_002' then '请求服务器失败2'
     ...]]></description><category></category></item><item><title><![CDATA[DataX介绍]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/80233452</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/80233452</guid><author>wangleittt</author><pubDate>Tue, 31 Dec 2019 14:27:09 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

DataX介绍

一. DataX3.0概览

DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。

DataX在阿里巴巴集团内被广泛使用，承担了所有大数据的离线同步业务，并已持续稳定运行了6年之久。...]]></description><category></category></item><item><title><![CDATA[nginx配置固定访问配置sticky-module模块实现http及tcp健康检查]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/103179679</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/103179679</guid><author>wangleittt</author><pubDate>Thu, 21 Nov 2019 13:55:12 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

user mwopr;
worker_processes 1;

error_log logs/error.log info;

pid    logs/nginx.pid;
events {
  worker_connections 2048;
}

http {
  include /app/nginx/co...]]></description><category></category></item><item><title><![CDATA[日常启动大数据]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/100145562</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/100145562</guid><author>wangleittt</author><pubDate>Thu, 29 Aug 2019 20:04:18 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

日常启动大数据

ps aux|grep elasticsearch

./elasticsearch
命令验证curl -X GET http://127.0.0.1:9200/

logstash启动
./logstash -f logstash_A.conf


kibana启动
./kibana

如果此时看到表中只有localh...]]></description><category></category></item><item><title><![CDATA[Hive之列转行,通用sql写法]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/99543536</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/99543536</guid><author>wangleittt</author><pubDate>Wed, 14 Aug 2019 10:04:13 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

实例数据图



转换换行

select uid,
   concat_ws (',', collect_list(date_time)) as date_time
 from dm_hrssgps.timeaaa
group by uid

使用函数：concat_ws(',',collect_set(column)) 
...]]></description><category></category></item><item><title><![CDATA[服务器nas目录挂载]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/95632934</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/95632934</guid><author>wangleittt</author><pubDate>Fri, 12 Jul 2019 16:47:24 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

1. 重启后，如果df -h看不见挂载点，请尝试直接cd /nfsc/NAS卷名（autofs，无访问不显示）；
2. 如果不能cd到挂载点里，请检查主机IP到NAS服务器2049端口是否联通， telnet NAS服务器IP 2049。
3. 如果可以telnet NAS服务器IP 2049通，进行showmount -e 加nas服务器...]]></description><category></category></item><item><title><![CDATA[java本地缓存实战项目]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/93999637</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/93999637</guid><author>wangleittt</author><pubDate>Fri, 28 Jun 2019 14:32:56 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

import java.util.ArrayList;
import java.util.Date;
import java.util.HashMap;
import java.util.HashSet;
import java.util.List;
import java.util.Map;
import java.util.Set;

...]]></description><category></category></item><item><title><![CDATA[Java 动态根据模板创建 html]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/93998464</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/93998464</guid><author>wangleittt</author><pubDate>Fri, 28 Jun 2019 14:15:42 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

Java 动态根据模板创建 html
import java.io.File;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.util.Date;
import java.util.HashMap;
import java.util....]]></description><category></category></item><item><title><![CDATA[日常工作优化数据较大数据、提升表分区]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/93193481</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/93193481</guid><author>wangleittt</author><pubDate>Fri, 21 Jun 2019 14:50:19 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

##查询自己表分区情况
select
partition_name part,
partition_expression expr,
partition_description descr,
table_rows
from information_schema.partitions where
table_schema = schema()...]]></description><category></category></item><item><title><![CDATA[环境数据部署]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/83660631</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/83660631</guid><author>wangleittt</author><pubDate>Fri, 21 Jun 2019 14:32:13 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

1、前端服务器：
账号：appdeploy/sf123456
nginx服务器地址：
10.202.160.11
10.202.160.13

前端包路径：/app/nginx/html

npm run dev
打包
npm run build

启动路径：
/app/nginx
sudo ./startNginx.sh
sudo ./s...]]></description><category></category></item><item><title><![CDATA[前端技术vue环节与代码结构层整理，nginx配置参考]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/90516357</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/90516357</guid><author>wangleittt</author><pubDate>Fri, 24 May 2019 14:54:43 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

## 准备工作
- node.js环境（npm包管理器）
- vue-cli 脚手架构建工具
- cnpm npm的淘宝镜像

## 开发运行
```bash
 
  # 安装依赖
  npm install
//or # 建议不要用cnpm 安装有各种诡异的bug 可以通过如下操作解决npm速度慢的问题
  n...]]></description><category></category></item><item><title><![CDATA[WebService对接对方WebService的数据格式]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/90482953</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/90482953</guid><author>wangleittt</author><pubDate>Thu, 23 May 2019 16:27:06 +0800</pubDate><description><![CDATA[作者官方网站:http://www.wxl568.cn

/** 
* @Description: 与ECP接口相关工具类
*/
public class EcpCallBackUtil {
 private static final String SYSTEM_ID = "HRSS-GPS";
 private static final Logger logger = Logger...]]></description><category></category></item><item><title><![CDATA[怎样学习Hadoop大数据体系方向知识技术点覆盖日常整理]]></title><link>https://blog.youkuaiyun.com/wangleittt/article/details/81218629</link><guid>https://blog.youkuaiyun.com/wangleittt/article/details/81218629</guid><author>wangleittt</author><pubDate>Mon, 13 May 2019 16:10:22 +0800</pubDate><description><![CDATA[大数据需要掌握哪些技术知识 

作者官方网站:http://www.wxl568.cn

下面经过碎片时间搜集学习Hadoop大数据方向技术心得整理，内容覆盖全面知识，学会满足当前企业发展，请大家检阅















要学习研究大数据体系架构方向

要学习大数据方向的知识面很多，要坚持









小象网站学习整理



作者官方网站:http://www.wxl56...]]></description><category></category></item></channel></rss>