下午四点半开始,公司核心系统数据库长事务回滚,又一个紧急事件!
1.2010-2-26 16:29接到总部告警“Informix数据库Checkpoint时间过长”,onstat –查看数据库状态发现数据库出现“CKPT REQ”,无法访问数据库。
2.2010-2-6 16:30收到紧急事件报告,CBPS8系统无法登陆,无法操作。
3.出现CKPT REQ情况,分析可能是有操作出现长事务导致数据库进行回滚。使用onstat –x|grep LB查找出现回滚的进程,用onstat –g sql检查数据库进程操作,发现其中最大的回滚事务是镜像库抽取,暂时停止了镜像库抽取程序。
4.在出现问题期间,onstat –m检查数据库日志,发现大量KAIO: out of OS resources, errno = 11, pid = 278824报错
5.试图使用onmode –c强制进行checkpoint以缩短时间,但是操作报错,checkpoint失败。
6.使用onstat –g seg,发现大量占用
$ onstat -g seg
45分钟才回滚结束,tmd!问题是症结仍然没有找到,这是最致命的,下周要用时间好好的折腾这颗了!
晚上免费的票,去福建歌剧院看了《大兵小将》,蛮好看的。
出来的时候正好是一场大雨后,整个空气都弥漫着清新的味道,广场上有很多花灯,用手机拍了几张
回家,把猎天使魔女进行到第十关左右,最近贝姐是偶的挚爱啊!
看了艾薇尔的多伦多演唱会,一边看一边在touch上看reader上的订阅新闻。
连续上了七天的班,真的有点疲倦了!