Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理

1、基础环境

操作系统:unix&solaris 11.3

数据库版本:oracle 12.2 CDB&PDB

数据库补丁信息

oracle@QSSJJZDB2:~$ opatch lspatches
23333567;
27959048;
26187578;OCW Interim patch for 26187578
27674384;Database Apr 2018 Release Update : 12.2.0.1.180417 (27674384)

出问题的这套RAC是给应用做数据转换用的,没有实时的生产业务,所以平时不怎么注意这台,有问题都是临时处理一下。

2、问题现像

应用端的人员反映,这个库总出现连不上的问题,报错如下图所示

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第1张图片

根目录满了,因为TRC文件几十个G

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第2张图片

查看生成的TRC文件,每次出现这个问题,我都是临时把所有的TRC清空了,然后让他们用,也没怎么仔细排查,一直以为是他们应用有什么问题导致的。

最近他们用的频繁,发现这个库老是塞满。

image.png

3、处理过程

这回执行删除该TRC文件,发现新生成的CJQ0.trc文件还是在不停的增长,TRC里的内容是下图这个样子的,说实话我确实看不懂,也没有啥头绪

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第3张图片

应为生成的TRC文件都是CJQ,起初以为是库里的JOB导致,于是检查了一下库里还真有很多个有问题的JOB任务。

select * from dba_jobs order by failures desc

以下是显示结果

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第4张图片

于是联系了下开发的人员,确认了这些定时任务都没有用了,于是他们把这些任务进行了删除操作,我临时把日志清了,明天再检查结果。

结果第2天查看了,这个文件又是几个G了。

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第5张图片

于是又仔细看了下告警日志,发现是一直有如下图的报错,RAC共2个节点下都有。

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第6张图片

去到CDB里查看有没有表并行度大于1的,确认表级别没有开并行的

SELECT owner, table_name, degree FROM cdb_tables WHERE degree > 1;

问了开发的人员,他们没有写过并行相关的的查询SQL。

最后去MOS上查了一下,确实在这个版本是有个BUG,会导致一直生成TRC文件,奇怪的是我这十多套RAC,只有这一套有不停的生成TRC,也不知道是怎么出发BUG

而且也有人遇到过同样的问题 https://www.cnblogs.com/lkj371/p/14922611.html,据说尤其是安装了2018 4月RU的版本(12.2.0.1.180417),说的这不就是我么。。。

官方的解决办法就是打补丁。p27579159_122010_SOLARIS64

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第7张图片

4、解决办法

补丁暂时没有安装,临时决定写个脚本,定时删除下这个文件,先缓解一下。

在两个RAC节点创建定时任务,每20,40分钟执行一下清理下这个TRC文件(solaris不支持 20/* 这种写法,只能写0,20,40)

0,20,40 * * * * sh /root/crontab/rm_cjq.sh >>/root/rmcjq.log

cat /root/crontab/rm_cjq.sh (写脚本我不擅长,随便写了个,让大家见笑了)

#!/bin/sh
find /u01/app/oracle/diag/rdbms/qsyycdb/qsyycdb2/trace -name "*cjq*" |xargs rm -rf

参考

MOS:OERR: ORA 12805 parallel query server died unexpectedly (Doc ID 1347455.1)

Oracle12c R2注意事项: 因BUG生成大量的trace file 包含KRB: (rman module) | ANBOB

https://www.cnblogs.com/lkj371/p/14922611.html

也欢迎关注我的公众号【徐sir的IT之路】,一起学习!

————————————————————————————
公众号:徐sir的IT之路
CSDN :徐sir(徐慧阳)-CSDN博客
墨天轮:徐sir的个人主页 - 墨天轮
PGFANS:PGFans问答社区:全球唯一的PostgreSQL中文技术交流社区

————————————————————————————

Oracle12c R2 ORA-12805 BUG导致生成巨大TRC文件问题处理_第8张图片

你可能感兴趣的:(数据库记录,bug)