- 博客(20)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 PG重启异常处理
现象异常描述：FATAL: the database system is starting upLOG: database system shutdown was interrupted; last known up at 2021-08-14 11:37:30 CSTFATAL: the database system is starting upFATAL: the database system is starting upFATAL: the database system i...
2021-08-16 11:35:55
5553
原创 未授权导致jenkins启动异常处理示例
1、Jenkins启动，但未建立监听端口和未查到对应服务进程2、经排查发现日志文件清空后，未宿主文件权限授予给jenkins账号，导致读写访问异常。3、最终发现/var/log/jenkins创建的日志文件没有授权给jenkins用户。chown -R jenkins:jenkins /var/log/jenkins4、再使用service jenkins start，启动后如下：[root@oracle jenkins]# service jenkins status●.
2021-01-11 17:12:08
4186
3
原创 Oracle12c连接时报ORA-00257: 归档程序错误。只有在解析完成后才以 AS SYSDBA 方式连接
今天开发人员报公司测试环境昨天能正常连接数据库，现在不能连接报“ORA-00257: 归档程序错误。只有在解析完成后才以 AS SYSDBA 方式连接”错误提示。我接到问题后，排查分析如下：一、怀疑空间不足1、检查数据库服务器磁盘空间存储情况通过查看判断，空间存储虽然不多，但在测试场景下是足够用的。此点可以排除在外，继续往下排查。二、检查空间归档相关1、检查空间redo log\recovery file\flash_recovery_area_usage使用情况select *
2020-09-05 17:11:56
4700
原创 keepalived版本引发故障解决分析
近期在研究实证PG+Keepalived构建高可用集群时，在验证keepalived自动实现主库故障自动切换中，遇到keepalived触发vrrp_script脚本调用一直不正常。即如下图情况所示：开始怀疑是shell脚本有问题，导致不能正常执行。于是我采取下列步骤处理：1).简化shell脚本内容，只保留echo显示语句，然后手工执行shell脚本验证是否正常。2).重新启动k...
2020-04-22 13:33:03
1274
原创 PostGreSQL主从库环境下的从节点故障恢复
已搭建的PostGreSQL11.6主从环境，因批量导入大量数据导致主从节点异常宕机，导致主节点重新启动系统，从节点wal同步信息也不完整。从节点重启pg数据库，出现下图问题：经过分析，主从节点之间wal段缺少1天的量，很难恢复过来。所以依照以主库为基础，重置备库节点。注意：在重置备库节点时，需要清空data下的内容，即rm -rf /opt/pgsql/data（根据自己...
2020-02-27 10:15:32
5104
原创 Oracle11g下导入SDO_GEOMETRY类型的数据异常处理
关于云浮图元数据导入异常问题，由于最近展开研究PostGreSQL过程中需要通过Oracle加载以前的数据，在使用Oracle11g的数据泵导入SDO_GEOMETRY类型的地址图元数据，在导入过程中可导入结构但不能导入数据，导入时会报"MDSYS"."SDO_GEOMETRY" not found or conversion to latest version is not p...
2020-01-07 19:51:15
1255
原创 PostGreSql性能压测一次奇葩之旅
由于最近一段时间在针对Oracle、MySQL和PostgreSql数据库的选型技术比较时，需要对它们三者进行单库性能压测比较作为重要判断依据。1、目标要求比较Oracle、Postgres、Mysql、Mycat数据库在100、500、1000、1500、2000、3000用户（线程）并发量的读取驱动基表为100w\500w\1000w\2000w\5000w的三表关联时候各个数据库...
2019-12-30 10:33:06
1469
原创 Google Chrome网页保存为无损图片—秘籍
最近遇到需要将打开的网页内容，保存成无损图片。可自己电脑上只装了chrome浏览器，自己不想电脑上装太多的。经过摸索和借鉴。发现该浏览器，其实隐藏了一种挺好用的功能—网页下载为无损图片。它的操作如下：1、打开网页后，按住Ctrl+Shift+I开启浏览器的开发工具；2、按Ctrl+Shift+P调出开发工具的面板，输入cap后会弹出“Capture full size screensho...
2019-09-06 09:40:12
2797
原创 Oracle数据库Session飙升和行锁也飙升问题解决方法
背景：性能测试现在压力和瓶颈都体现在OM系统上，张同学尝试了很多种方案，解决结果不是很理想。表象就是：Oracle数据库Session飙升厉害，当Session达到最大配置后系统会由于很多应用请求得不到可用Session而超时。Oracle数据库大部分Session被OM锁占用。同时在此期间，数据库表行锁也飙升，最近一次甚至飙升到了40K。处理过程方法：结合AWR和ADDM报...
2019-08-30 17:06:04
1439
原创 1000组以上坐标点集合转换成shape空间类型坐标处理方法
最近在做一个有关地图面上的点坐标集合存放在Clob字段中，遇到了个比较难搞定的事情。当clob字段中的坐标点集合超过1000组的时候发现，通过动态sql+加变量定义执行一次性转换成shape的空间类型时无法加入，抛出有关长度超出的错误。因为动态sql执行在匿名块中最大只支持32767，而转换后的坐标集合已超过32767，实际长度已达到了39100。咨询同事们当时也没找到合适的办法，经过不断尝试...
2019-08-21 10:20:42
910
翻译 PostGreSql判断字符串中含中文方法
最近在做POC演示，需要把原来中文转换成拼音的过程中，需要用到如何判断字符串含有中文的需求。借鉴Oracle方面的经验、参考PostGreSql社区资料和实践，对在判断中文字符小结如下：一、采用正则表达式方法主要基于数据库采用UTF-8和客户端也是用UTF-8的字符集方式生成的数据，这样可以结合中文字体库设定起止来筛选。select id,name from ma_net where ...
2019-07-25 18:12:15
11335
原创 Apache Zeppelin部署及案例验证指引
作为大数据研究分析，我越发觉得有必要能有一款快速上手，能够适合单一数据处理、但后端处理语言繁多的场景相关的开源工具。最近我找到了一款Apache Zeppelin，下面是我初步实战初步收获。 简要介绍 Apache Zeppelin是一款基于Web的Notebook(类似于jupyter notebook)，支持交互式地数据分析。Zeppelin可实现数据采集、数据发现、数据分析、数...
2018-08-30 09:41:31
3970
原创 ORA-01940: 无法删除当前连接的用户
昨天接到公司项目现场反馈在一套测试Oracle11g RAC环境下，发现有一个Netgt的用户删除不掉。问题处理经过步骤说明：1、询问问题现象情况经过了解同事此类现象已经出现多次了，而且RAC的两个节点上都没有发现还有连接的Session会话了。据他所说这个现象就很奇怪了，第一次遇到。2、排查问题1）、通过select * from gv$session排查是否存在NETGT会话，...
2018-08-09 09:36:42
672
翻译 基于CDH版本5.13.3验证Spark Streaming
实现背景由于部门及已上项目使用的是CDH版本大数据平台，为了更好改善在线生产系统日志实时抓取分析。需要加装Kafka作为采集数据源，使用SparkStreaming处理数据。安装环境 硬件规划 CPU 物理内存 磁盘存储 节点 1核X2颗 Intel Core Processor 2295MH...
2018-07-23 23:13:30
1612
转载 maven settings.xml详解
maven settings.xml详解setting.xml配置文件http://blog.youkuaiyun.com/u012152619/article/details/51485152https://www.cnblogs.com/yanghongfei/p/6995613.htmlmaven的配置文件settings.xml存在于两个地方：1.安装的地方：${M2_HOME}/conf/setti...
2018-07-12 11:18:18
300
原创 基于CDH版本5.13.3实现原生版Spark集群及问题记录
基于CDH版本5.13.3实现Spark集群1. 安装背景由于部门及已上项目使用的是CDH版本大数据平台，为了充分更好使用Spark集群Spark引擎运算，解决基于CDH版本下可支持3种大数据运算分析方式Hive on MR、Hive on Spark和Spark Sql。2. 安装环境2.1. 硬件规划CPU 物理内存 磁盘存储 节点 1核X2颗 Intel Core P...
2018-06-29 10:43:27
2607
2
转载 local_listener 与 remote_listener 参数说明
local_listener 与 remote_listener 参数说明转载说明：David Dai -- Focus on Oracle 链接：https://blog.youkuaiyun.com/tianlesoftware/article/details/6087045一. LOCAL_LISTENER 和 REMOTE_LISTENER说明1.1 LOCAL_LISTENER官网信息如下： ...
2018-06-15 15:16:34
1212
转载 CentOS 7下Cloudera Manager及CDH 5.14.0安装过程详解
大家都知道，Apache Hadoop的配置很繁琐，而且很零散，为此Cloudera公司提供了Clouder Manager工具，而且还封装了Apache Hadoop,flume,spark，hive,hbase等大数据产品形成自己特色的CDH产品，再使用CM进行安装，很大程度上方便了集群的搭建，并提供了集群的监控功能。转载：点击打开链接一、环境:1.三台VMware虚拟机(一个做为主节点，两个...
2018-06-14 23:45:49
1288
原创 某应用系统采用RAC集群方式配置访问，出现间隙性重定向返回无法访问主机
排查分析： 现场排查分析以及结合tcpdump抓包发现重定向数据库服务器10.230.161.17返回主机名suse-db1异常，发现下面与此有关的线索：1、通过对rac的节点16、17两个服务实例的remote_listener，local_listener参数配置发现16节点没有对local_listener设置值，而17上则配置虚拟IP的访问方式。由于它们配置不一致，根据rac集群运行方式及...
2018-06-14 21:29:10
480
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人