wj的博客

原创 centos下Hadoop集群安装

1. 主机操作系统版本：**Windows 10**, 64-bit (Build 18362) 10.0.18362； 2. 虚拟机：**VMware**® Workstation 14 Pro； 3. 虚拟机操作系统版本：**Centos** 7 64 位; 4. Linux version： 3.10.0-514.el7.x86_64； 5. Hadoop version：2.10.0 6. jdk version：1.8.0_231

原创 HIVE库查询表报错：[Error 10001]: Line 1:14 Table not found无法找到表

hive客户端执行SELECT * FROM mdm_entity_person_id_map where 1=1;报错： [SELECT - 0 row(s), 0.000 secs] [Error Code: 10001, SQL State: 42S02] Error while compiling statement: FAILED: SemanticException [Error 10001]: Line 1:14 Table not found 'mdm_entity_person_id

原创 批量统计Oracle库表数据

create or replace procedure count_t is type type1 is table of number index by pls_integer; type type2 is table of varchar2(200) index by pls_integer; t_count type1; sql_states type2; t type2; var_counter integer :=0; cursor my_

原创 clickhouse linux安装使用以及Oracle数据库导入

安装下载clickhouseyum install clickhouse-server clickhouse-client编辑配置文档vi /etc/clickhouse-server/config.xmlsudo rpm --import https://repo.clickhouse.tech/CLICKHOUSE-KEY.GPGsudo -u clickhouse clickhouse-server --config-file=/etc/clickhouse-server/config.

原创 elasticsearch导入之前删除的数据，doc状态为一直为deleted，无法查询

之前使用logstash导入到该index下一百多万条数据有问题，删除该节点后，又重新创建该节点；再次导入原先删除的数据，docs下“count”的数据一直保持为1，只有“deleted”的数量在不停增长。尝试了：重新安装eslasticsearch；替换版本后导入；建立不同名称的index后导入；删除temp文件夹下的eslasticsearch文件后导入；forcemerge清空删除状态的数据后导入；以上操作均无效，数据导入后增长的只有 “deleted”的数量，且每次“count”.

原创 Oracle 查看表锁情况，解锁

http://nianjian.xiaze.com/tags.php?/%E4%B8%AD%E5%9B%BD%E6%99%BA%E8%83%BD%E4%BA%A4%E9%80%9A%E8%A1%8C%E4%B8%9A%E5%8F%91%E5%B1%95%E5%B9%B4%E9%89%B4/1/13625816891/

原创 （MySQL gtid复制）设置从库跳过一个报错的事务

查看当前报错事务以及报错事务GTID节点：mysql> show slave status\G*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.0.192 Master_User: r

原创 2021-07-01

报错从库show slave status\G显示有错误：mysql> show slave status\G*************************** 1. row *************************** Slave_IO_State: Master_Host: 192.168.0.195 Master_User: repl M

原创 mysql 查询事务对应线程

-- 查看事务对应的线程select t1.trx_id, t1.trx_state, t1.trx_query, t2.id, t2.state, t2.command from information_schema.innodb_trx t1, information_schema.processlist t2 where t1.trx_mysql_thread_id =t2.id\G-- 查询正在进行的事务select * from information_schema.innodb_trx;

原创 联机配置MySQL的GTID复制(XtraBackup)

文章目录1. 准备1.1 在主库建立复制专属用户1.2 在主、从库安装XtraBackup1.3 配置主库到从库的SSH免密码连接1.4 停止从库的MySQL实例，以及清空其数据目录2. 环境检查2.1 检查主库中是否有不支持GTID的操作2.2 在主库联机设置GTID参数3. 备份3.1 主库备份并传输备份文件至从库3.2 从库根据备份文件进行数据恢复3.3 修改从库配置文件3.4 启动从库3.5 启动从库复制3.5 主库配置文件修改4. 报错处理4.1 Unknown redo log format

原创 PYTHON pdf根据指定页数生成新文件

from PyPDF2 import PdfFileReader ,PdfFileWriter# 提取PDF文件if __name__ == "__main__": pdffile=test.pdf' reader=PdfFileReader(pdffile) writer=PdfFileWriter() # 开始和结束的页面号 start=134 stop=260 # 生成新的pdf文件 with open('new.pdf','wb')

原创 mysql 8 Linux企业版本安装

tar -Jxvf mysql-commercial-8.0.25-linux-glibc2.12-x86_64.tar.xzmv mysql-commercial-8.0.25-linux-glibc2.12-x86_64 /usr/local/# 软连接ln -s /usr/local/mysql-commercial-8.0.25-linux-glibc2.12-x86_64 /usr/local/mysql8# 创建MySQL组和用户groupadd mysqluseradd -r -g

原创 linux 将所有find到的文件重命名

比如都在文件末尾加上 ’bak‘ ； find /usr/local/src/mysql-5.7.31/ -name CMakeLists.txt -exec mv {} {}bak \; find /usr/local/src/mysql-5.7.31/ ：在 /usr/local/src/mysql-5.7.31/ 文件夹下查找；-name CMakeLists.txt : 查找文件全名为 CMakeLists.txt 的文件；-exec：对每个查找到的匹配项要执行的操作；mv {}

原创 linux yum install 失败报错：Transaction check error:

Transaction check error: file /usr/share/dbus-1/services/org.freedesktop.PackageKit.service from install of gnome-software-3.28.2-3.el7.x86_64 conflicts with file from package gnome-packagekit-common-3.14.3-7.el7.x86_64

原创 excel目录超链接（公式生成，无工具）超好用

N张工作表，第一张是目录，第二至第N张是内容，目录表和内容表以名称对应地建立超链接，如果一张一张地做太麻烦，如何批量完成？下面的方法，两步实现目录生成。宏3.0取出各工作表的名称，方法：ctrl+f3出现自定义名称对话框，取名为X，引用位置栏输入：=MID(GET.WORKBOOK(1),FIND("]",GET.WORKBOOK(1))+1,100)确定HYPERLINK函数批量插入连接，方法：插入目录表格（一般为第一个sheet）在A2单元输入公式=HYPERLINK("#'

转载 VB合并excel表格（工作表和工作簿）

作者：提姆葉yezhongli链接：https://www.zhihu.com/question/298117231/answer/1240632641来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。关于表格合并，一般会有3种情况：（p.s：请注意工作簿跟工作表的区别）将一个 Excel 工作簿中的多个工作表合并成一个工作表将多个 Excel 工作簿合并成一个工作簿将多个 Excel 工作簿的工作表合并成一个工作表下面分别根据3种情况进行详细的步骤说明，请读

原创 excel利用公式提取括号前、括号中的数据

excel获取括号前的数据：在E14单元格输入公式 =LEFT(D14,FIND("(",D14)-1) 即可将D14单元格括号前数据提取出来；将E14单元格公式下拉填充，即可将D列所有括号前的数据提取出来excel获取括号中的数据：在F14单元格输入公式 =LEFT(RIGHT(D14,FIND(")",D14)-FIND("(",D14)),FIND(")",D14)-FIND("(",D14)-1) 即可将D14单元格括号中数据提取出来；将F14单元格公式下拉填充，即可将D列所有括号中的数据提

原创 python转换doc文档为docx格式后，提取文档段落内容后保存

python转换doc文档为docx格式后，提取文档段落内容后保存#导入所需库from docx import Documentimport osimport docximport win32com.client as wc #文件地址后的/不能省略filePath = "C:/Users/现有数据字典/"word = wc.Dispatch("Word.Application")os.chdir(filePath)for root, dirs, files in os.walk(r

原创 vba：EXCEL按照空行分割工作表并保存为独立工作簿后按照指定表名重命名

参考原代码：Sub 插入()On Error GoTo errHandlerDim i As Long '按照标题插入空行For i = 2 To Range("A1").CurrentRegion.Count - 1Selection.End(xlDown).SelectSelection.EntireRow.Insert , CopyOrigin:=xlFormatFromLeftOrAboveActiveCell.Offset(1, 0).Range("A1").SelectNex

转载 如何快速自动填充空白单元格上一行的内容

原创 python词频统计（re和jieba模块的使用），获取词频TOP50的词组

参考https://www.jianshu.com/p/28718ba04bc9?from=groupmessagehttps://blog.youkuaiyun.com/qq_32392597/article/details/96147620爬虫内容对应于代码# -*- coding: utf-8 -*-# import requestsimport refrom bs4 import BeautifulSoupfrom urllib.request import urlopenimpor

原创 VUE引用和使用echarts4/echarts5的差别

原因由于echarts5中的热力图样式和4不一样，为了少在options中修改，直接升级echarts版本，便于使用echarts5中自带样式。echarts升级卸载：npm uninstall echarts 无需声明版本安装5.0.2版本：npm install echarts@5.0.2 这里需要声明，避免下载之前重复版本echarts引用echarts4的引入是：import echarts from 'echarts'Vue.prototype.$echarts = echar

原创 使用github提供的webhook服务完成自动部署网站

参考https://blog.youkuaiyun.com/weixin_33922670/article/details/87983409?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-2.control&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-2.cont

原创 Vue 点击获得父元素，子元素，兄弟元素（DOM操作）|| 添加元素 元素属性（jQuery）

<ul @click ="clickfun($event)"> <li></li></ul>获取元素methods: { clickfun(e) { e.target //是你当前点击的元素 e.currentTarget //是你绑定事件的元素 //获得点击元素的前一个元素 e.currentTarget.previousElementSibling

原创 Linux下文件夹下子文件全部复制到多个文件夹中

ex:echo dir1 dir2 dir3 | xargs -n 1 cp -v /root/0111jzfp2/*将/root/0111jzfp2/下的所有文件复制到 dir1 dir2 dir3 三个文件夹中

原创 docker启动报错unable to configure the Docker daemon with file /etc/docker/daemon.json

service start docker启动docker服务报错，根据提示运行journalctl -xe查看报错情况如下：仅能看到unable to configure the Docker daemon with file /etc/docker/daemon.json, 后面因为屏幕没有全部显示出来，无法查看。运行journalctl -xe > 1.log将内容输出到文本中查看：原因是：/etc/docker/daemon.json 和 /usr/lib/systemd/syste

原创 python安装django-auth-ldap报错fatal error: sasl/sasl.h: No such file or directory

python安装django-auth-ldap报错内容：根据报错提示，应该要安装python-ldap；安装python-ldap还是报错：参考：apt-get install libsasl2-dev安装libsasl2-dev，再安装python-ldap，最后安装django-auth-ldap，成功。

原创 pycharm 出现 Try to run this command from the system terminal. Make sure that you use the correct vers

在pycharm上install模块时，报错由于我配置的是远程服务器接口，根据网上的方法在~/.pip/pip.conf文件上添加镜像源，然并。。。没啥用。后来在file–settings–project–project interpreter中修改下载repository...

原创 阿里云轻量应用服务器CPU过高导致无法远程连接问题

今天把应用服务器打开时，服务器监控显示CPU直奔100%。在页面中打开远程连接直接显示失败，22端口无法连接。咨询客服：根据客服提示，找到服务器面板中的远程连接—救援----救援连接然后直接输入救援密码即可登陆远程界面，如果忘记密码，可直接重置。（注意密码要求）连接后输入用户名root和用户密码，再输入命令TOP查看进程状态：可以看到SSHD进程占用了90%以上的CPU，直接CTRL+c退出监测，top -H -p 2547查看sshd进程具体信息：参考：因为救援连接无

原创 linux下 docker 启动报错：Failed to start Docker Application Container Engine（docker.service，daemon.json两文）

运行以下命令重启docker后竟然报错了systemctl daemon-reloadsystemctl restart dockerJob for docker.service failed because the control process exited with error code. See "systemctl

原创 阿里云轻量应用服务器环境搭建（docker+tomcat安装校验）

阿里云轻量应用服务器环境搭建（docker+tomcat安装校验）一条语句即可搭建~

原创 tomcat开机自启动设置----系统找不到文件 .bat || 报错问题处理

Microsoft Windows [版本 10.0.17134.1902](c) 2018 Microsoft Corporation。保留所有权利。D:\apache-tomcat-9.0.21\bin>D:\apache-tomcat-9.0.21\bin\service.batThe tomcat9.exe was not found...The CATALINA_HOME environment variable is not defined correctly.This env

原创 git push origin master报错error: src refspec master does not match any || git commit报错nothing to commi

C:\Users\Administrator\Desktop\新建文件夹\精准扶贫>git push origin mastererror: src refspec master does not match anyerror: failed to push some refs to 'http://106.55.250.239:3000/GovAppGroup/JZFP.git'C:\Users\Administrator\Desktop\新建文件夹\精准扶贫>git commit -

原创 阿里云服务器 安装 轻量级OracleXE版本 过程

参考官方文档： 《Installing Oracle Database XE Using RPM Packages》大佬博客1：《CentOS7 静默安装Oracle XE 11g》大佬博客2：《阿里云centos 7.2安装oracle11gr2详细教程》[oracle@izbp15488qcahuq3k0n0qiz ~]$ sqlplus systemSQL*Plus: Release 18.0.0.0.0 - Production on Mon Dec 21 23:56:32

原创 OmniDB 连接 ORACLE 报错提示DP-1047:Cannot locate a 32-bit Oracle Client library

使用 OmniDB 软件 连接Oracle数据库时 ，报错 Cannot locate a 32-bit Oracle Client library ;在网上查看说这是由于Oracle客户端instanceclient， 系统， Python 三者版本位数不对应。解决过程首先查看数据库服务端的版本：SELECT * FROM V$VERSION查询结果是64位查看python版本：也是64位；按理说Oracle客户端instanceclient不匹配的话应该要报错Canno

原创 VUE npm打包报错This is probably not a problem with npm. There is likely additional logging output above.

npm run build 打包vue文件报错：npm ERR! This is probably not a problem with npm. There is likely additional logging output above.网上搜索到的是先 npm install ，再。。。。反正试了不行。重新 npm run build 报错：npm ERR! lead_cockpit@0.1.0 build: `vue-cli-service build’由于没有学过vue前端

原创 Oracle正则表达式匹配

Oracle从10g开始支持正则表达式元字符（metacharacters）POSIX 正则表达式由标准的元字符（metacharacters）所构成：'^' 匹配输入字符串的开始位置，在方括号表达式中使用，此时它表示不接受该字符集合。'$' 匹配输入字符串的结尾位置。如果设置了 RegExp 对象的 Multiline 属性，则 $ 也匹配 '\n' 或 '\r'。'.' 匹配除换行符之外的任何单字符。'?' 匹配前面的子表达式零次或一次。'+' 匹配前面的子表达式一次或多次。'*' 匹

原创 在 Idea 上面使用 Tomcat 时,发现控制台打印信息的时候,出行中文乱码问题；

可以通过以下几种解决办法1：在在vm中设置编码方式 -Dfile.encoding=UTF-8

原创 前端代码|循环遍历数组函数： js forEach()、map() 、for...of || jQuery each() 定义、语法、示例详解

文章目录JavaScript forEach() 方法1. 定义和用法：注意:2. 语法：参数：3. 返回值：undefined4. 示例：jQuery 遍历 - each() 方法1. 定义和用法：2. 语法3. 示例3.1 $(selector).each(function(index,element)) 函数示例：3.2 $.each(dataresource,function(index,element)) 函数示例：JavaScript Array map() 方法1. 定义和用法注意：2. 语法

原创 Oracle 拼接字段

使用 listagg(合并字段,‘连接符号’) within group (order by 字段) 来实现列转行（需要oracle是11或以上）举个例子：WM_CONCAT()函数，默认用，隔开select t.table_key, wmsys.wm_concat(t.name) AS result from TEST_TABLE t where t.id = #{id} group by t.table_key order by t.create_time替换后 listagg()函