tsingfu1986
tsingfu1986

DSG RealSync复制软件一个故障处理案例

分享一个DSG RealSync复制软件故障处理案例，讲讲DSG RealSync实时复制软件在故障情况下的恢复。

案例中要点：

1目标端loader加载报错无法正常恢复的情况，使用工具xfview删除交易文件中的部分交易（支持删除某一条记录/某个分区/某个表的交易，具体看需要，以最小影响处理为原则）

2源端vagentd修复指定的分区（支持表级、分区级、子分区级、记录级修复），使用的是RealSync自身提供初始化的功能


与oracle goldengate对比：

在此类故障情况下，DSG RealSync复制软件的处理要比OGG简单方便很多。当然，相信oracle在OGG以后的版本中，肯定会针对oracle数据库复制进行优化，增强数据初始化功能。


部分说明：

1修复功能内部调用xexp，xexp是从DSG Snapassure/SnapDBP物理备份软件的功能引入的，能够从物理数据文件或者物理备份文件中导出相关表的逻辑记录

2DSG Snapassure/SnapDBP是DSG数据库备份恢复软件产品，特别是对oracle数据库的备份恢复很有特色，支持非归档数据库在线热备，支持物理备份中快速恢复表，支持使用备份文件直接open数据库验证备份有效性，不需要额外的存储。。。


1问题：复制通道报错目标端loader加载报错

目标端loader报错日志摘要log/log.r0


Loader: 26007612.xf1  2013-05-31:19:17:05: (commit) SCN 0x65315.c03a0001, Time 2013-05-31 19:15:08

2013-05-31:19:17:05: 2-I 0-D 1-U 0-DDL(0 ms) (117 s)


Loader: 26007613.xf1 OCI Error -1 occurred at File xf1_to_oracle_upd_rid.c:1106.

ORA-01410: invalid ROWID


OCI Error -1 occurred at File xf1_to_oracle_upd_rid.c:1106.

ORA-01410: invalid ROWID

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

       : 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15

       :                                          --H-FL-- cc:1      len:17

22764 transactions rollbacked (oci: 1410)

(MARGIN.S_QUERYLOG2 -> MARGIN.S_QUERYLOG2) OCI Error -1 occurred at File xf1_to_oracle_upd_rid.c:1106.

ORA-01410: invalid ROWID

fail to process /realsync/qh_raw_test/rmp/real0/26007613.xf1 xf1_to_oracle.c:3472, retry it.fail to process /realsync/qh_raw_test/rmp/real0/26007613.xf1 xf1_

to_oracle.c:3472, retry it.

2部分诊断步骤

2.1查看问题表的ddl时间

源端查询

15:22:04 SQL> select object_id objn,data_object_id objd,owner,object_name,subobject_name,object_type,created,last_ddl_time,status,temporary,secondary

15:22:04   2  from dba_objects

15:22:04   3  where owner='MARGIN' and object_name='S_QUERYLOG2' and data_object_id=341860

15:22:04   4  ;


     OBJN       OBJD OWNER           OBJECT_NAME                    SUBOBJECT_NAME  OBJECT_TYPE         CREATED           LAST_DDL_TIME     STATUS  T S

---------- ---------- --------------- ------------------------------ --------------- ------------------- ----------------- ----------------- ------- - -

   341860     341860 MARGIN          S_QUERYLOG2                    P20130201       TABLE PARTITION     20130130 11:17:56 20130130 11:17:56 VALID   N N


15:22:04 SQL>

15:22:04 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130201) a;


 COUNT(1)

----------

  4606877


15:36:58 SQL>



目标端查询


15:23:12 SQL> select object_id objn,data_object_id objd,owner,object_name,subobject_name,object_type,created,last_ddl_time,status,temporary,secondary

15:23:12   2  from dba_objects

15:23:12   3  where owner='MARGIN' and object_name='S_QUERYLOG2' and subobject_name='P20130201'

15:23:12   4  ;


     OBJN       OBJD OWNER           OBJECT_NAME                    SUBOBJECT_NAME  OBJECT_TYPE         CREATED           LAST_DDL_TIME     STATUS  T S

---------- ---------- --------------- ------------------------------ --------------- ------------------- ----------------- ----------------- ------- - -

   228472     239409 MARGIN          S_QUERYLOG2                    P20130201       TABLE PARTITION     20130130 10:41:34 20130506 10:14:32 VALID   N N


15:23:12 SQL>


15:36:52 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130201) a;


 COUNT(1)

----------

        0


15:36:53 SQL>

原因分析：目标端相关分区last_ddl_time和源端相差很大，可能目标端有truncate/delete操作，比如业务上删除日志操作，而源端没有这样的操作。


3评估修复方法，分区不大，记录800多万，修复的最佳方法是仅修复问题分区

源端查询分区大小

15:40:46 SQL> select owner,segment_name,partition_name,bytes/1024/1024/1024 size_g

15:41:04   2  from dba_segments

15:41:04   3  where owner='MARGIN' and segment_name='S_QUERYLOG2' and partition_name='P20130201'

15:41:04   4  ;


OWNER           SEGMENT_NAME                   PARTITION_NAME                     SIZE_G

--------------- ------------------------------ ------------------------------ ----------

MARGIN          S_QUERYLOG2                    P20130201                        .4140625


15:41:05 SQL>



4处理方法：


4.1删除问题交易文件 /realsync/qh_raw_test/rmp/real0/26007613.xf1 中问题记录交易

: 0000E3ED.00053764.5F8FFF9D.0012 B5(URP)  --H-FL-- cc:1/6    len:15--》问题交易


../bin/xfview -delrowid 0x00053764 0x5F8FFF9D 0x0012 /realsync/qh_raw_test/rmp/real0/26007613.xf1



依然存在问题，整个分区的交易都存在问题


       : 0000E3ED.00053764.5F8FFF9D.0013 B5(URP)  --H-FL-- cc:1/6    len:15  

       :                                          --H-FL-- cc:1      len:17  

       : 0000E3ED.00053764.5F8FFF9D.0013 B5(URP)  --H-FL-- cc:1/6    len:15  

       :                                          --H-FL-- cc:1      len:17  

22764 transactions rollbacked (oci: 1410)

(MARGIN.S_QUERYLOG2 -> MARGIN.S_QUERYLOG2) OCI Error -1 occurred at File xf1_to_oracle_upd_rid.c:1106.

ORA-01410: invalid ROWID

fail to process /realsync/qh_raw_test/rmp/real0/26007613.xf1 xf1_to_oracle.c:3472, retry it.fail to process /realsync/qh_raw_test/rmp/real0/26007613.xf1 xf1_to_oracle.c:3472, retry it.


../bin/xfview -delrowid 0x00053764 0x5F8FFF9D 0x0012 /realsync/qh_raw_test/rmp/real0/26007613.xf1


4.2删除问题交易文件 /realsync/qh_raw_test/rmp/real0/26007613.xf1 中问题分区的交易

../bin/xfview -delpart 341860 /realsync/qh_raw_test/rmp/real0/26007613.xf1



依然存在问题，发现存在另一个分区也有问题

       : 0000E3ED.00053766.61CFFFC9.0056 B5(URP)  --H-FL-- cc:1/6    len:15  

       :                                          --H-FL-- cc:1      len:17  

22764 transactions rollbacked (oci: 1410)

(MARGIN.S_QUERYLOG2 -> MARGIN.S_QUERYLOG2) OCI Error -1 occurred at File xf1_to_oracle_upd_rid.c:1106.

ORA-01410: invalid ROWID

fail to process /realsync/qh_raw_test/rmp/real0/26007613.xf1 xf1_to_oracle.c:3472, retry it.fail to process /realsync/qh_raw_test/rmp/real0/26007613.xf1 xf1_to_oracle.c:3472, retry it.


5继续诊断新的分区（方法类似步骤2，故障原因相似）

源端查询

15:51:06 SQL> select object_id objn,data_object_id objd,owner,object_name,subobject_name,object_type,created,last_ddl_time,status,temporary,secondary

15:51:07   2  from dba_objects

15:51:07   3  where owner='MARGIN' and object_name='S_QUERYLOG2' and subobject_name='P20130202'

15:51:07   4  ;


     OBJN       OBJD OWNER           OBJECT_NAME                    SUBOBJECT_NAME  OBJECT_TYPE         CREATED           LAST_DDL_TIME     STATUS  T S

---------- ---------- --------------- ------------------------------ --------------- ------------------- ----------------- ----------------- ------- - -

   341862     341862 MARGIN          S_QUERYLOG2                    P20130202       TABLE PARTITION     20130130 11:17:56 20130130 11:17:56 VALID   N N


15:51:07 SQL>


15:52:43 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130202) a;


 COUNT(1)

----------

  6212716


15:52:44 SQL>


目标端查询

15:51:33 SQL> l

 1  select object_id objn,data_object_id objd,owner,object_name,subobject_name,object_type,created,last_ddl_time,status,temporary,secondary

 2  from dba_objects

 3  where owner='MARGIN' and object_name='S_QUERYLOG2' and subobject_name='P20130202'

 4*

15:51:33 SQL> /


     OBJN       OBJD OWNER      OBJECT_NAME                    SUBOBJECT_NAME  OBJECT_TYPE         CREATED      LAST_DDL_TIM STATUS  T S

---------- ---------- ---------- ------------------------------ --------------- ------------------- ------------ ------------ ------- - -

   228473     239410 MARGIN     S_QUERYLOG2                    P20130202       TABLE PARTITION     30-JAN-13    06-MAY-13    VALID   N N


15:51:34 SQL>


15:51:34 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130202) a;


 COUNT(1)

----------

        0


15:52:45 SQL>


6处理方法：

6.1删除问题交易文件 /realsync/qh_raw_test/rmp/real0/26007613.xf1 中问题分区的交易

../bin/xfview -delpart 341862 /realsync/qh_raw_test/rmp/real0/26007613.xf1

6.2复制恢复到实时状态后修复


7修复MARGIN.S_QUERYLOG2.P20130201 和 P20130202 两个分区

7.1在源端修改配置文件（mapping.ini中添加full_part部分，full_where部分也需要注意）

[DB01:/realsync/qh_raw_test/config]$cat mapping.ini

MARGIN   MARGIN


real_where=

       u.name='MARGIN' and o.name in ('S_QUERYLOG2','S_QUERYUSER2')


full_where=

       #u.name='MARGIN' and o.name in ('S_QUERYLOG2','S_QUERYUSER2')

       u.name='MARGIN' and o.name in ('S_QUERYLOG2')

full_part=

       MARGIN.S_QUERYLOG2.P20130201,MARGIN.S_QUERYLOG2.P20130202

[DB01:/realsync/qh_raw_test/config]$


7.2在源端发起修复

[DB01:/realsync/qh_raw_test/config]$../bin/vman

CHECK_MEMLEAK is turned off

VMAN> @../bin/vm

2013/06/04 10:27:19 > connect :55000

Connected.

2013/06/04 10:27:19 > user root/dbps

Authenticated

2013/06/04 10:27:20 > set ds 1 -itvl 3 -state start

2013/06/04 10:27:20 > set dt 1.1 -tgt db 2 -xf1 y -state start

2013/06/04 10:27:20 > set dm 1.1 -cfg -sync ftcqiM1

[DB01:/realsync/qh_raw_test/config]$


7.3修复日志摘要，源端导出耗时26s，目标端导入耗时7min

1）源端vagentd的日志log/log.vagentd


XEXP-BUF: count=5 each-len=13631533--》xexp是从DSG Snapassure/SnapDBP物理备份软件的功能引入的，能够从物理数据文件或者物理备份文件中导出相关表的逻辑记录

。。。。。。

                          P20130101              0 rows   0.00% used

                          P20130102              0 rows   0.00% used

                          P20130201        4606877 rows   0.00% used

                          P20130202        6212716 rows   0.00% used --》仅导出了2个分区的记录

                          P20130301              0 rows   0.00% used

                          P20130302              0 rows   0.00% used

                          P20130401              0 rows   0.00% used

                          P20130402              0 rows   0.00% used

                          P20130501              0 rows   0.00% used

                          P20130502              0 rows   0.00% used

                          P20130601              0 rows   0.00% used

                          P20130602              0 rows   0.00% used


========== Summary of DBPS Express Export ============


  Tables  1 (3)

  Rows  10819593

  Extents  266

  Zip Level 1

  To Read  800.00MB

  Read  982.35MB

  XF1  918.90MB

  XF1 Zipped 172.23MB (81.26%)

  Elapsed  26.18(s)

======================================================

Locking DC ...

DCSave ...

Adding Transactions ...

Exporting Finished...


grp#  size     seq#   bsz      nab flg dup TH Next-SCN  2013/06/04 10:30:34

。。。


2）目标端修复过程中loader加载的日志


[WEBDB01:/realsync/qh_raw_test/log]$tail -30f log.s0

。。。。。。

stmt: alter session set skip_unusable_indexes =TRUE


Loader: 2734.xf1 Performance report is disabled

Detail Performance report is disabled

2013-06-04:10:27:26: 0-I 0-D 0-U 0-DDL(0 ms) (0 s)


Loader: 2735.xf1 2013-06-04:10:27:26: 0-I 0-D 0-U 0-DDL(0 ms) (0 s)


Loader: 2736.xf1 to exec truncate

2013-06-04:10:30:19: ALTER TABLE "MARGIN"."S_QUERYLOG2" TRUNCATE PARTITION "P20130201"  ...

2013-06-04:10:30:19: ALTER TABLE "MARGIN"."S_QUERYLOG2" TRUNCATE PARTITION "P20130202"  ...

[Truncate OK]

2013-06-04:10:30:20: 0-I 0-D 0-U 2-DDL(0 ms) (1 s)


Loader: 2737.xf1  2013-06-04:10:30:21: (commit) SCN 0x0000.00000000, Time 2013-06-04 10:30:18

2013-06-04:10:30:21: 73471-I 0-D 0-U 0-DDL(1920 ms) (3 s)

2013-06-04:10:30:21: 0-I 0-D 0-U 0-DDL(1970 ms) (1 s)


。。。。。

Loader: 2890.xf1  2013-06-04:10:34:34: (commit) SCN 0x0000.00000000, Time 2013-06-04 10:30:33

2013-06-04:10:34:34: 46852-I 0-D 0-U 0-DDL(1050 ms) (241 s)

2013-06-04:10:34:34: 0-I 0-D 0-U 0-DDL(1060 ms) (1 s)


Loader: 2891.xf1 2013-06-04:10:34:34: 0-I 0-D 0-U 0-DDL(0 ms) (0 s)


Loader: 2892.xf1 2013-06-04:10:34:34: 0-I 0-D 0-U 0-DDL(0 ms) (0 s)


Loader: 2893.xf1 2013-06-04:10:34:34: 0-I 0-D 0-U 0-DDL(0 ms) (0 s)

to compile drop constraint

compile num=3

compile try 1 ...

compile "MARGIN"."DELETE_LOG" finish

compile try 2 ...

compile try 3 ...

compile try 4 ...

all compile finish


8对比数据，验证修复

源端查询


12:03:52 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130201) a;


 COUNT(1)

----------

  4606877


12:03:56 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130202) a;


 COUNT(1)

----------

  6212716


12:04:19 SQL>


目标端查询

12:03:33 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130201) a;


 COUNT(1)

----------

  4606877


12:03:37 SQL> select /*+parallel(a,10) */ count(1) from MARGIN.S_QUERYLOG2 partition (P20130202) a;


 COUNT(1)

----------

  6212716


12:04:16 SQL>


修复完成，故障处理完毕。

你可能感兴趣的:(故障处理,DSG,RealSync,数据修复,实时复制软件)

  • aiohttp: AttributeError: ‘NoneType‘ object has no attribute ‘get_extra_info‘ zzzzls~ Pythonpythonaiohttpasyncio
    使用Proxyman分析aiohttp请求时遇到如上错误:报错环境系统:macPython:Python3.8.11aiohttp:3.8.0抓包软件:Proxyman解决方案:修改***/python3.8/site-packages/aiohttp/connector.py1211行:#注释如下行#runtime_has_start_tls=self._loop_supports_start_
  • 第8章 系统质量属性与架构评估（2024） L神0000000000 系统架构
    8.1软件系统质量属性8.1.1质量属性概念开发期质量属性易理解性：指设计被开发人员理解的难易程度可扩展性：软件因活应新需求或需求变化而增加新功能的能力，也称为灵活性可重用性：指重用软件系统或某一部分的难易程度可测试性：对软件测试以证明其满足需求规范的难易程度可维护性：当需要修改缺陷、增加功能、提高质量属性时，识别修改点并实施修改的难易程度可移植性：将软件系统从一个运行环境转移到另一个不同的运行环
  • Holoviews 创建复杂的可视化布局 步入烟尘 Python超入门指南全册Holoviewspython
    如何使用Holoviews创建复杂的可视化布局在数据科学和数据可视化领域，Holoviews是一个非常强大的Python库，它可以帮助我们轻松地创建各种复杂的可视化布局。Holoviews提供了一个高层次的接口，使得创建交互式和静态可视化变得简单而直观。本文将介绍如何使用Holoviews来创建复杂的可视化布局，让你的数据以最直观的方式展现出来。安装Holoviews首先，确保你已经安装了Holo
  • 开源软件新峰商城之DAO接口 ch_s_t Javajava数据库前端
    一、数据表设计管理员用户表tb_newbee_mall_admin_useradmin_user_id：管理员id，自增主键，用于唯一标识每个管理员用户。login_user_name：管理员登陆名称，用于管理员登录系统。login_password：管理员登陆密码，与登录用户名配合进行登录验证。nick_name：管理员显示昵称，用于在系统中显示管理员的称呼。locked：是否锁定0未锁定1已锁
  • 字节架构师：来说说 Kafka 的消费者客户端详解，你都搞懂了吗？ 2401_84049200 程序员kafkalinq分布式
    点对点模式基于队列，类似于同一个消费者组中的数据，由生产者发送数据到分区，然后消费者拉取分区的消息进行消费，此时消息只能被同一个消费者组的消费者消费一次。发布订阅模式模式就是kafka中的分区消息可以被不同消费者组的消费者消费。这就是一对多的广播模式应用。当然，消费者组是一个逻辑的概念，通过客户端参数group.id来配置，默认值为空字符串。而消费者并不是逻辑的概念，它是真正消费数据的实体，可以是
  • Spring Boot 技术提升房屋租赁系统性能 2401_85763803 springboot后端java
    第2章技术介绍2.1相关技术房屋租赁系统是在JSP+MySQL开发环境的基础上开发的。JSP是一种服务器端脚本语言，易于学习，实用且面向用户。全球超过35％的JSP驱动的互联网站点使用JSP。MySQL是一个数据库管理系统，因为它的体积小但速度快，成本低，或者开源受到中小型网站的青睐。因此，JSP+MySQL作为一个成熟的开发环境，可以满足房屋租赁系统设计和开发所需的稳定性，安全性和可扩展性要求。
  • 01-Flink安装部署及入门案例（仅供学习），音视频时代你还不会NDK开发 小猪佩琪962 2024年程序员学习flink学习大数据
    先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！因此收集整理了一份《2024年最新大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵
  • 数据库管理工具：如何使用 Navicat for MySQL 导出导入数据表 Excel 文件？_数据库设计表怎么导出 小猪佩琪962 2024年程序员学习数据库mysqlexcel
    文章目录前言一、使用Navicat导出数据表Excel文件1.1、使用“导出向导”选项1.2、选择数据库导出表的存放位置1.3、选择需要导出的栏位1.4、定义“导出向导”附加选项1.5、执行导出操作1.6、验证导出数据二、将数据表Excel文件导入Navicat2.1、使用“导入向导”选项2.2、选择导入文件数据源2.3、为导入文件定义附加选项2.4、设置目录表2.5、定义源栏位和目标栏位的对应关
  • JsonCpp源码分析——Reader 哎呦，帅小伙哦 #jsoncppjson
    1、与Writer模块功能相反，可以将Reader理解成一个反序列化的工具，Writer的作用主要是将Value对象转成string或者流式的结构，Reader的作用主要是将流式的结构转成Value类型的对象。Reader类的主要职责有3个，解析JSON字符串：将JSON格式的字符串读取并解析成相应的C++数据结构。处理不同的数据类型，支持解析JSON对象、数组、字符串、数字、布尔值和null。处
  • 设计之道：ORM、DAO、Service与三层架构的规范探索 VaporGas Java后端重构java设计规范ORMDAOService三层架构
    引言：实际开发中，遵守一定的开发规范，不仅可以提高开发效率，还可以提高项目的后续维护性以及项目的扩展性；了解一下本博客的项目设计规范，对项目开发很有意义一、ORM思想ORM（Object-Relational-Mapping）在对象模型和关系型模型之间做一个映射（转换）。目的是为了解决面向对象编程语言的发展和关系型数据库的发展不匹配的问题可以理解为：将Java中的数据结构与MySQL数据库中的数据
  • 【系统架构设计师】十二、系统质量属性与架构评估(开发期质量属性|运行期质量属性|面向架构评估的质量属性|质量属性效用树|质量属性场景) 帅次 系统架构设计师(新版)软件工程质量属性质量属性场景系统架构系统架构设计师软考
    目录一、软件系统质量属性1.1开发期质量属性1.2运行期质量属性1.3面向架构评估的质量属性1.4质量属性效用树1.5质量属性场景1.5.1可用性质量属性场景描述1.5.2可修改性质量属性场景描述1.5.3性能质量属性场景描述相关推荐历年真题练习历年真题考情：本章节每年单项选择考8分左右，下午案例、论文也会有涉及，在系统架构设计师中本章节绝对是重点中的重点。主要学习软件系统质量属性、系统架构评估以
  • PB TreeView 属性，事件详解 yujunl PowerBuilder
    ■TreeView控件可以以树型方式来组织项目，不仅显示直观、界面友好，而且项目的管理和操作更为方便，是当前比较流行的一个控件。该控件的特点是在较小的空间可以分层次显示大量的数据，并且可以按照用户的要求检索数据。该控件具有以下功能：通过可以展开或者折叠的节点遍历数据。图形化和文本化的节点显示。拖放操作。包括剪切、复制和粘贴的节点操作。■典型编程通常TreeView控件用来让用户选择数据，或者进行数
  • 2019-5-9周四 荷妍
    从小学习，10年积累受益一生。这是今天一个年近70的老同事总结给我的话。退休返聘的她，写得一手好字，至今令人惊叹。尽管和她相处总是不那么和谐，但每个人总有闪光点，值得令人学习的地方。今天成功继续练字打卡。前几天操作习惯打卡软件续习惯打卡失败了，有些失落。虽然自己还在坚持，没有打卡的仪式，总觉得缺少点感觉。一开始想通过打卡让自己开始工笔画练习，结果失败了。铺开画纸，需要占地，而练字基本是随时随地都可
  • Vue——v-model双向绑定数据原理及用法 樱丸小桃子啊 Vue前端vuevue.js
    vue中双向绑定是一个指令v-model，所谓的双绑就是可以绑定一个响应式数据到视图，同时视图中变化能改变该值。v-model是语法糖，默认情况下相当于:value和@input。使用v-model可以减少大量繁琐的事件处理代码，提高开发效率。通常在表单项上使用v-model，还可以在自定义组件上使用，表示某个值的输入和输出控制。比如说我们在input上使用时，我们将xxx的值绑定到表单元素val
  • mysql是后端还是前端_MySQL数据库之前端和后端的系统优化 草莓西瓜大桃子 mysql是后端还是前端
    本文中介绍的系统优化，主要针对前端和后台这两方面(后台方面主要对SQL语句和数据存储进行了优化)，下文中我们将介绍一些优化技巧和经验。技巧：1.如何查出效率低的语句？在MySQL下，在启动参数中设置--log-slow-queries=[文件名]，就可以在指定的日志文件中记录执行时间超过long_query_time(缺省为10秒)的SQL语句。你也可以在启动配置文件中修改longquery的时间
  • css 个人喜欢的样式 速查笔记 waterHBO css笔记前端
    起因，目的:记录自己喜欢的，觉得比较好看的css.下次用的时候，直接复制，很方便。1.个人html模板，导入常用的link设置英语字体:Noto导入默认的css使用网络icon图标导入Bootstrapcss框架html-->2.常用css模板todo,以后再增加。*{font-family:"NotoSerif",system-ui;font-optical-sizing:auto;}Noto字
  • MATLAB默认工作路径修改 bu_shuo matlab开发语言
    MATLAB默认工作路径修改如下图所示，我的MATLAB默认工作路径为H:\R2020b\bin有时我们需要修改该默认工作路径，以下为修改该默认路径的方法修改步骤一、首先找到MATLAB软件的快捷方式，选中，然后单击鼠标右键，点击属性，可以看到以下画面二、接下来在起始位置一栏，写入我们需要设置修改的工作路径，填入点击确定，重启MATLAB软件后，修改即可生效，例如我把起始位置修改为E:\MATLA
  • 使用java代码实现操作数据库的创建等系列操作 两点王爷 数据库javaoracle
    创作背景：使用代码实现对PostgreSQL数据库的创建用户、授权用户、删除用户系列操作！1、导入相关的依赖org.projectlomboklombokcn.hutoolhutool-all5.8.262、具体实现创建实体类@Data@ApiModel(value="EntityDataBase",description="实体数据库相关内容")publicclassEntityDataBase
  • 6、实现应用上下文 大树~~ #Spring手写系列springjava后端
    一、前言在实际的软件开发过程中，产品的需求常常变化多端，开发者往往需要在时间紧迫的情况下快速交付项目。为了应对业务上的灵活变更与调整，很多时候我们会选择在已有项目的基础上进行扩展，或者临时搭建出一个能满足需求的工程。然而，这种快速拼凑的开发模式可能会埋下许多隐患。上线后，随着业务的进一步变更，代码的质量和结构往往难以维持，最终陷入维护困境。举个实际的例子，当项目上线后，运营部门发现某个活动的配置不
  • pandas读取带有表头的数据文件，读取无表头的数据文件 小桥流水---人工智能 人工智能深度学习Python程序代码pandas
    在Python中使用pandas库读取数据时，常见的问题之一就是如何处理数据文件中的表头。1.引入pandas库在开始之前，我们首先需要导入pandas库。如果你的环境中还未安装pandas，可以使用pip安装：pipinstallpandas导入pandas库：importpandasaspd2.读取带有表头的数据文件当数据文件中包含表头时，pandas会默认将第一行数据作为DataFrame的
  • 网路协议分别是 白总Server php开发语言golang后端linux服务器sql
    网络协议是计算机网络中用于数据传输和通信的一套规则和标准。这些协议定义了数据如何在网络中传输、如何在不同设备间进行通信、如何处理错误和数据包的格式等。1.TCP/IP传输控制协议/互联网协议（TCP/IP）是互联网的基础协议，它定义了数据如何在网络中传输。TCP负责数据的可靠传输，而IP负责数据包的路由和寻址。2.HTTP/HTTPS超文本传输协议（HTTP）是用于从服务器传输超文本到本地浏览器的
  • Vue解說 白总Server vue.js前端javascript数据库架构网络协议ssl网络
    Vue.js（通常简称为Vue）是一个开源的JavaScript框架，用于构建用户界面和单页应用程序（SPA）。它由前谷歌工程师尤雨溪（EvanYou）创建，并首次发布于2014年。Vue被设计为易于上手、灵活且高效，它允许开发者通过组件化的方式构建复杂的前端应用。Vue.js的关键特点：渐进式框架：Vue可以从简单的界面元素开始，逐步扩展到复杂的单页应用。响应式数据绑定：Vue使用双向数据绑定，
  • 程式语言区分 白总Server htmlpythonjavac++开发语言
    程序语言有很多种，每种都有其特定的用途和特点。以下是一些广泛使用的编程语言：1.Python：易于学习，广泛用于数据科学、机器学习、网络开发、自动化等领域。2.Java：广泛应用于企业级应用、安卓开发、大型系统开发等。3.C：一种基础语言，广泛用于系统编程、嵌入式开发、操作系统等领域。4.C++：C语言的扩展，支持面向对象编程，用于游戏开发、高性能应用等。5.JavaScript：主要用于网页前端
  • Java基础 -- 05反射reflect mmlz00 Java基础Java基础反射reflectProxy动态代理
    目录引序说不通1：注解说不通2：匿名内部类说不通3：动态代理反射：反射定义强调：类对象又强调：static类静态成员再三强调：synchronized修饰符类对象：知晓类结构类结构之：内部成员内部成员--构造函数内部成员--数据成员内部成员--方法成员静态代理：动态代理：反射+注解反射+泛型+注解getGenericSuperclass()用法引序引序：开始反射概念学习之前，先来段引序。请牢记：计
  • 真实靠谱赚钱的软件有哪些？推荐5个靠谱的项目平台！ U客直谈APP
    真实靠谱赚钱的软件有哪些一直以来都是大家比较关注的话题之一，其实答案就在我们的身边。随着地推拉新行业的不断发展，越来越多的地推拉新项目被推出，像快手极速版、京东一分购、滴滴出行等等，这些都是真实靠谱可以帮助我们赚钱的软件。那么我们该如何找到这些赚钱的软件拉新项目呢？别急，小编在这里给大家推荐5个靠谱的项目平台，希望对你有帮助。1.U客直谈appU客直谈app严格意义来讲是一款资源对接平台，上面整合
  • 社交软件一家独大？马云当年投资4000万的软件，现已成功上市 彩旗彩虹
    自从有了互联网，连最重要的社交也产生了变化，尤其是腾讯QQ的出现，可以让本不体味、目生的人经由过程搜集也同样可以成为无话不谈的好伴侣，良多熟人、亲戚、伴侣不能倾吐的话题，在搜集上却可透露本身的心声，而有了QQ，不仅仅可以成为“网友”，良多熟人也可以经由过程QQ停止聊天，既可以经由过程文字表达本身的心声，同时也省下了不少的电话花钱，同事、伴侣还可以组建QQ群，所以腾讯也是捉住了最好的黄金期，一跃成为
  • class-dump 安装 和使用 奋斗的小马达
    安装我的硬件环境环境：macOSHighSierra10.13.4Xcode9.3.1class-dump下载地址：https://link.jianshu.com/?t=http://stevenygard.com/projects/class-dump/1，终端输入mkdir~/bin，在当前用户根目录下创建一个bin目录。2，把下载下来的dmg打开，复制文件里面的class-dump到创建的
  • 淘宝购物怎么拿返利，淘宝购物佣金最高的软件 高省APP大九
    淘宝作为中国最大的电商平台，每天都有数以亿计的交易在这里发生。对于大多数消费者来说，如何在购物时获取更多的优惠和返利，无疑是一个值得探讨的话题。高省APP作为一款专注于购物返利的软件，为淘宝购物者提供了一个便捷、高效的返利渠道。本文将详细介绍如何通过高省APP在淘宝购物时获取返利。高省APP官网邀请码110000一、下载并注册高省APP首先，你需要在手机应用商店搜索“高省”并下载安装。安装完成后，
  • 锁之synchronized 与volatile lock的异同 追梦的鱼儿 java锁synchronizedvolatileLock
    目录synchronized特性用法使用场景synchronized的优缺点优点缺点volatile特性用法使用场景Lock特性用法使用场景总结相同点不同点synchronized关键字是Java提供的用于解决并发编程中数据一致性问题的重要工具。它通过锁机制确保在同一时刻只有一个线程能够执行被同步的方法或代码块，从而实现互斥访问。尽管synchronized使用简单且可靠，但在高并发场景下可能会带
  • Conda创建环境失败：000和404错误 柚柚柚柚柚 conda
    一、首先下载Anaconda1.打开网址Indexof/anaconda/archive/|清华大学开源软件镜像站|TsinghuaOpenSourceMirror，滑到最底部，下载Anaconda3-5.3.1-Linux-x86_64.sh。2.使用winscp拖动本地的Anaconda3-5.3.1-Linux-x86_64.sh到服务器的个人工作目录下。二、安装Anaconda软件，创建虚
  • Dom 周华华 JavaScripthtml
    <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/xhtml&q
  • 【Spark九十六】RDD API之combineByKey bit1129 spark
    1. combineByKey函数的运行机制   RDD提供了很多针对元素类型为(K,V)的API，这些API封装在PairRDDFunctions类中，通过Scala隐式转换使用。这些API实现上是借助于combineByKey实现的。combineByKey函数本身也是RDD开放给Spark开发人员使用的API之一   首先看一下combineByKey的方法说明：
  • msyql设置密码报错：ERROR 1372 (HY000): 解决方法详解 daizj mysql设置密码
    MySql给用户设置权限同时指定访问密码时，会提示如下错误： ERROR 1372 (HY000): Password hash should be a 41-digit hexadecimal number；   问题原因：你输入的密码是明文。不允许这么输入。   解决办法：用select password('你想输入的密码');查询出你的密码对应的字符串， 然后
  • 路漫漫其修远兮 吾将上下而求索 周凡杨 学习 思索
    王国维在他的《人间词话》中曾经概括了为学的三种境界古今之成大事业、大学问者，罔不经过三种之境界。“昨夜西风凋碧树。独上高楼，望尽天涯路。”此第一境界也。“衣带渐宽终不悔，为伊消得人憔悴。”此第二境界也。“众里寻他千百度，蓦然回首，那人却在灯火阑珊处。”此第三境界也。学习技术，这也是你必须经历的三种境界。第一层境界是说，学习的路是漫漫的，你必须做好充分的思想准备，如果半途而废还不如不要开始。这里，注
  • Hadoop(二)对话单的操作 朱辉辉33 hadoop
    Debug： 1、 A = LOAD '/user/hue/task.txt' USING PigStorage(' ') AS (col1,col2,col3); DUMP A; //输出结果前几行示例： (>ggsnPDPRecord(21),,) (-->recordType(0),,) (-->networkInitiation(1),,)
  • web报表工具FineReport常用函数的用法总结（日期和时间函数） 老A不折腾 finereport报表工具web开发
    web报表工具FineReport常用函数的用法总结（日期和时间函数）   说明：凡函数中以日期作为参数因子的，其中日期的形式都必须是yy/mm/dd。而且必须用英文环境下双引号(" ")引用。   DATE DATE(year,month,day):返回一个表示某一特定日期的系列数。 Year:代表年，可为一到四位数。 Month:代表月份。
  • c++ 宏定义中的##操作符 墙头上一根草 C++
    #与##在宏定义中的--宏展开 #include <stdio.h> #define f(a,b) a##b #define g(a)   #a #define h(a) g(a) int main() {       &nbs
  • 分析Spring源代码之，DI的实现 aijuans springDI现源代码
    (转) 分析Spring源代码之，DI的实现 2012/1/3 by tony                 接着上次的讲，以下这个sample [java]  view plain copy print
  • for循环的进化 alxw4616 JavaScript
    // for循环的进化 // 菜鸟 for (var i = 0; i < Things.length ; i++) { // Things[i] } // 老鸟 for (var i = 0, len = Things.length; i < len; i++) { // Things[i] } // 大师 for (var i = Things.le
  • 网络编程Socket和ServerSocket简单的使用 百合不是茶 网络编程基础IP地址端口
      网络编程;TCP/IP协议   网络:实现计算机之间的信息共享,数据资源的交换   协议:数据交换需要遵守的一种协议,按照约定的数据格式等写出去   端口:用于计算机之间的通信      每运行一个程序，系统会分配一个编号给该程序，作为和外界交换数据的唯一标识 0~65535   查看被使用的
  • JDK1.5 生产消费者 bijian1013 javathread生产消费者java多线程
    ArrayBlockingQueue：        一个由数组支持的有界阻塞队列。此队列按 FIFO（先进先出）原则对元素进行排序。队列的头部 是在队列中存在时间最长的元素。队列的尾部 是在队列中存在时间最短的元素。新元素插入到队列的尾部，队列检索操作则是从队列头部开始获得元素。 ArrayBlockingQueue的常用方法：
  • JAVA版身份证获取性别、出生日期及年龄 bijian1013 java性别出生日期年龄
            工作中需要根据身份证获取性别、出生日期及年龄，且要还要支持15位长度的身份证号码，网上搜索了一下，经过测试好像多少存在点问题，干脆自已写一个。 CertificateNo.java package com.bijian.study; import java.util.Calendar; import
  • 【Java范型六】范型与枚举 bit1129 java
    首先，枚举类型的定义不能带有类型参数，所以，不能把枚举类型定义为范型枚举类，例如下面的枚举类定义是有编译错的   public enum EnumGenerics<T> { //编译错，提示枚举不能带有范型参数 OK, ERROR; public <T> T get(T type) { return null;
  • 【Nginx五】Nginx常用日志格式含义 bit1129 nginx
    1. log_format 1.1 log_format指令用于指定日志的格式，格式：   log_format name(格式名称) type(格式样式)   1.2 如下是一个常用的Nginx日志格式：   log_format main '[$time_local]|$request_time|$status|$body_bytes
  • Lua 语言 15 分钟快速入门 ronin47 lua 基础
    - - 单行注释 - - [[      [多行注释] - - ]]   - - - - - - - - - - - 1. 变量 & 控制流 - - - - - - - - - - num = 23 - - 数字都是双精度 str = 'aspythonstring'
  • java-35.求一个矩阵中最大的二维矩阵 ( 元素和最大 ) bylijinnan java
    the idea is from: http://blog.csdn.net/zhanxinhang/article/details/6731134 public class MaxSubMatrix { /**see http://blog.csdn.net/zhanxinhang/article/details/6731134 * Q35 求一个矩阵中最大的二维
  • mongoDB文档型数据库特点 开窍的石头 mongoDB文档型数据库特点
    MongoDD: 文档型数据库存储的是Bson文档-->json的二进制 特点：内部是执行引擎是js解释器，把文档转成Bson结构，在查询时转换成js对象。 mongoDB传统型数据库对比    传统类型数据库：结构化数据，定好了表结构后每一个内容符合表结构的。也就是说每一行每一列的数据都是一样的    文档型数据库：不用定好数据结构，
  • [毕业季节]欢迎广大毕业生加入JAVA程序员的行列 comsci java
        一年一度的毕业季来临了。。。。。。。。      正在投简历的学弟学妹们。。。如果觉得学校推荐的单位和公司不适合自己的兴趣和专业，可以考虑来我们软件行业，做一名职业程序员。。。      软件行业的开发工具中，对初学者最友好的就是JAVA语言了，网络上不仅仅有大量的
  • PHP操作Excel – PHPExcel 基本用法详解 cuiyadll PHPExcel
    导出excel属性设置//Include classrequire_once('Classes/PHPExcel.php');require_once('Classes/PHPExcel/Writer/Excel2007.php');$objPHPExcel = new PHPExcel();//Set properties 设置文件属性$objPHPExcel->getProperties
  • IBM Webshpere MQ Client User Issue (MCAUSER) darrenzhu IBMjmsuserMQMCAUSER
    IBM MQ JMS Client去连接远端MQ Server的时候，需要提供User和Password吗？ 答案是根据情况而定，取决于所定义的Channel里面的属性Message channel agent user identifier (MCAUSER)的设置。 http://stackoverflow.com/questions/20209429/how-mca-user-i
  • 网线的接法 dcj3sjt126com
    一、PC连HUB (直连线)A端：（标准568B）：白橙，橙，白绿，蓝，白蓝，绿，白棕，棕。 B端：（标准568B）：白橙，橙，白绿，蓝，白蓝，绿，白棕，棕。 二、PC连PC （交叉线）A端：(568A)： 白绿，绿，白橙，蓝，白蓝，橙，白棕，棕； B端：（标准568B）：白橙，橙，白绿，蓝，白蓝，绿，白棕，棕。 三、HUB连HUB&nb
  • Vimium插件让键盘党像操作Vim一样操作Chrome dcj3sjt126com chromevim
    什么是键盘党？ 键盘党是指尽可能将所有电脑操作用键盘来完成，而不去动鼠标的人。鼠标应该说是新手们的最爱，很直观，指哪点哪，很听话！不过常常使用电脑的人，如果一直使用鼠标的话，手会发酸，因为操作鼠标的时候，手臂不是在一个自然的状态，臂肌会处于绷紧状态。而使用键盘则双手是放松状态，只有手指在动。而且尽量少的从鼠标移动到键盘来回操作，也省不少事。 在chrome里安装 vimium 插件
  • MongoDB查询（2）——数组查询[六] eksliang mongodbMongoDB查询数组
    MongoDB查询数组 转载请出自出处：http://eksliang.iteye.com/blog/2177292 一、概述  MongoDB查询数组与查询标量值是一样的，例如，有一个水果列表，如下所示： > db.food.find() { "_id" : "001", "fruits" : [ "苹
  • cordova读写文件（1） gundumw100 JavaScriptCordova
    使用cordova可以很方便的在手机sdcard中读写文件。 首先需要安装cordova插件：file 命令为： cordova plugin add org.apache.cordova.file 然后就可以读写文件了，这里我先是写入一个文件，具体的JS代码为： var datas=null;//datas need write var directory=&
  • HTML5 FormData 进行文件jquery ajax 上传 到又拍云 ileson jqueryAjaxhtml5FormData
    html5 新东西：FormData  可以提交二进制数据。 页面test.html <!DOCTYPE> <html> <head> <title> formdata file jquery ajax upload</title> </head> <body> <
  • swift appearanceWhenContainedIn:(version1.2 xcode6.4) 啸笑天 version
      swift1.2中没有oc中对应的方法： + (instancetype)appearanceWhenContainedIn:(Class <UIAppearanceContainer>)ContainerClass, ... NS_REQUIRES_NIL_TERMINATION;  解决方法： 在swift项目中新建oc类如下： #import &
  • java实现SMTP邮件服务器 macroli java编程
    电子邮件传递可以由多种协议来实现。目前，在Internet 网上最流行的三种电子邮件协议是SMTP、POP3 和 IMAP，下面分别简单介绍。 　　◆ SMTP 协议 　　简单邮件传输协议(Simple Mail Transfer Protocol,SMTP)是一个运行在TCP/IP之上的协议，用它发送和接收电子邮件。SMTP 服务器在默认端口25上监听。SMTP客户使用一组简单的、基于文本的
  • mongodb group by having where 查询sql qiaolevip 每天进步一点点学习永无止境mongo纵观千象
    SELECT cust_id, SUM(price) as total FROM orders WHERE status = 'A' GROUP BY cust_id HAVING total > 250 db.orders.aggregate( [ { $match: { status: 'A' } }, { $group: {
  • Struts2 Pojo（六） Luob. POJOstrust2
    注意：附件中有完整案例 1.采用POJO对象的方法进行赋值和传值 2.web配置 <?xml version="1.0" encoding="UTF-8"?> <web-app version="2.5" xmlns="http://java.sun.com/xml/ns/javaee&q
  • struts2步骤 wuai struts
    1、添加jar包 2、在web.xml中配置过滤器 <filter>        <filter-name>struts2</filter-name>        <filter-class>org.apache.st
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他