d88439760
d88439760

[原]Greenplum failed segment的恢复方法

　当在使用greenplum过程中有不当的操作时，可能会出现segment节点宕掉的情况（比如在greenplum运行的过程中停掉其中几台segment节点的服务器），通过下面的方法可以恢复segment。

下面是现场出现的故障情况：

复制代码 
[gpadmin@tj-soc-c04-csfb1 ~]$ gpstate -m
20161010:16:35:54:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-Starting gpstate with args: -m
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-local Greenplum Version: 'postgres (Greenplum Database) 4.3.6.2 build 1'
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-master Greenplum Version: 'PostgreSQL 8.2.15 (Greenplum Database 4.3.6.2 build 1) on x86_64-unknown-linux-gnu, compiled by GCC gcc (GCC) 4.4.2 compiled on Nov 12 2015 23:50:28'
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-Obtaining Segment details from master...
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:--------------------------------------------------------------
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:--Current GPDB mirror list and status
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:--Type = Group
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:--------------------------------------------------------------
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-   Mirror             Datadir                       Port    Status              Data Status       
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-tj-soc-c04-csfb2   /data1/gpdata/mirror/gpseg0   41000   Failed                                <<<<<<<<
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-tj-soc-c04-csfb2   /data1/gpdata/mirror/gpseg1   41001   Failed                                <<<<<<<<
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-tj-soc-c04-csfb3   /data1/gpdata/mirror/gpseg2   41000   Failed                                <<<<<<<<
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-tj-soc-c04-csfb3   /data1/gpdata/mirror/gpseg3   41001   Failed                                <<<<<<<<
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-   tj-soc-c04-csfb4   /data1/gpdata/mirror/gpseg4   41000   Acting as Primary   Change Tracking
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:-   tj-soc-c04-csfb4   /data1/gpdata/mirror/gpseg5   41001   Acting as Primary   Change Tracking
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-tj-soc-c04-csfb1   /data1/gpdata/mirror/gpseg6   41000   Failed                                <<<<<<<<
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-tj-soc-c04-csfb1   /data1/gpdata/mirror/gpseg7   41001   Failed                                <<<<<<<<
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[INFO]:--------------------------------------------------------------
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-2 segment(s) configured as mirror(s) are acting as primaries
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-6 segment(s) configured as mirror(s) have failed
20161010:16:35:55:026100 gpstate:tj-soc-c04-csfb1:gpadmin-[WARNING]:-2 mirror segment(s) acting as primaries are in change tracking
复制代码

可以看到有6个节点Failed，有2个节点的Primary和Mirror交换了。

一、首先需要停掉GP

gpstop -M fast -a    这样会告诉你有几个节点DOWN了

 

二、启动GP

gpstart    启动数据库会忽略DOWN的节点

 

三、生成一个恢复配置文件

gprecoverseg -o ./recov    会在当前目录生成一个recov文件，里面包含了要恢复的节点信息

recov文件内容如下：（注意：这个文件不是手动创建的，而是通过gprecoverseg -o ./recov命令生成的

复制代码 
filespaceOrder=
tj-soc-c04-csfb2:41000:/data1/gpdata/mirror/gpseg0
tj-soc-c04-csfb2:41001:/data1/gpdata/mirror/gpseg1
tj-soc-c04-csfb3:41000:/data1/gpdata/mirror/gpseg2
tj-soc-c04-csfb3:41001:/data1/gpdata/mirror/gpseg3
tj-soc-c04-csfb1:41000:/data1/gpdata/mirror/gpseg6
tj-soc-c04-csfb1:41001:/data1/gpdata/mirror/gpseg7
复制代码

 

四、使用恢复配置文件恢复节点

$gprecoverseg -i ./recov

恢复过程中可以用gpstate -m 查看恢复状态：Resynchronizing（表示正在恢复中），Synchronized（表示恢复完毕）

 

五、调整Primary和Mirror

上面的情况中有Primary和Mirror兑换的情况，所以需要把他们换回来，可以用下面的命令

gprecoverseg -r

等待所有的节点都是Synchronized后，segment就恢复好了

你可能感兴趣的:(GP)

  • 北斗卫星导航系统的研究及应用 梨梨梨梨zi 卫星定位与导航通信其他
    1．课题背景及研究的目的和意义1.1课题背景卫星导航技术从上世纪六十年代发展到如今，已经成为发展最为迅速的高新技术产业之一。卫星导航技术作为空间信息技术，在很多领域都有着非常广阔的运用，如航空、测绘、交通运输、勘探、授时等。随着全球信息技术的发展，未来全球卫星导航系统将会由以美国的GPS为核心的卫星定位系统，发展成为多星座共存的GNSS（全球导航定位系统）。GNSS主要包括三大导航系统，分别为GP
  • RTX 4090深度学习性能实测奉上！模型训练可提升60~80% 赋创小助手 服务器深度学习人工智能图像处理自动驾驶
    近期，我们对RTX4090涡轮版进行了完整的整机测试，本篇文章将分别围绕单卡，4卡，8卡RTX4090性能测试结果展开分享，以全面评估其相比上代RTX30系列的性能优势。首先让我们一起看看本次测试的硬件配置。测试硬件配置简单介绍一下本次使用的平台为超微SYS-420GP-TNR，这款GPU系统针对AI和图形密集型工作负载的灵活设计，4U双处理器（第三代英特尔®至强®），双根GPU系统，最多10个P
  • 黄帝内经-生气通天论 古今合道士
    u=2495729897,2446612055&fm=26&gp=0黄帝上次听岐伯天师介绍了四季养生论,非常受用,不过思来想去,既然四季要养生.那么每天是不是也要养生呢?于是带着疑惑,黄帝找到岐伯天师...岐伯天师看着好学的黄帝,非常高兴,开始侃侃而谈:自古以来，都以顺应天气(天气就是太阳升降气候变化)为生命的根本，而这个根本不外乎阴阳。天地之间，六合之内，大如九州之域，小如人的九窍、五脏、十二节
  • You Only Cache Once: Decoder-Decoder Architectures for Language Models YiHanXii 语言模型人工智能自然语言处理
    这篇论文介绍了一种名为YOCO（YouOnlyCacheOnce）的新型解码器-解码器架构，专为大型语言模型设计，以提高推理效率和性能。以下是其核心内容的总结：YOCO架构关键特点：双重解码器结构：YOCO由自解码器和交叉解码器两部分组成，自解码器生成全局键值（KV）缓存，交叉解码器通过交叉注意力机制重用这些缓存。单次缓存：与标准Transformer相比，YOCO只缓存一次KV对，显著减少了GP
  • NL2SQL进阶系列(4)：ConvAI、DIN-SQL、C3-浙大、DAIL-SQL-阿里等16个业界开源应用实践详解[Text2SQL] 汀、人工智能 LLM工业级落地实践人工智能自然语言处理大模型LLMNL2SQLText2SQLNLP
    NL2SQL进阶系列(4)：ConvAI、DIN-SQL等16个业界开源应用实践详解[Text2SQL]NL2SQL基础系列(1)：业界顶尖排行榜、权威测评数据集及LLM大模型（SpidervsBIRD）全面对比优劣分析[Text2SQL、Text2DSL]NL2SQL基础系列(2)：主流大模型与微调方法精选集，Text2SQL经典算法技术回顾七年发展脉络梳理NL2SQL进阶系列(1)：DB-GP
  • GPT 模型简史：从 GPT-1 到 GPT-4 三月七꧁ ꧂ 大模型开发gpt人工智能自然语言处理语言模型transformergpt-3prompt
    文章目录GPT-1GPT-2GPT-3从GPT-3到InstructGPTGPT-3.5、Codex和ChatGPTGPT-4GPT-1    2018年年中，就在Transformer架构诞生⼀年后，OpenAI发表了⼀篇题为“ImprovingLanguageUnderstandingbyGenerativePre-Training”的论文，作者是AlecRadford等⼈。这篇论文介绍了GP
  • 03：【江科大stm32】：外部中断EXTI的使用 浅陌pa #江科大【标准库】stm32单片机嵌入式硬件
    外部中断EXTI的使用1、按钮通过外部中断控制LED2、旋转编码器计次1、按钮通过外部中断控制LED/*外部中断按键控制LED，使用外部中断EXTI0进行按键控制LED的亮灭*/#include"stm32f10x.h"intmain(void){//1.对PB0引脚进行配置,按键连接的引脚RCC_APB2PeriphClockCmd(RCC_APB2Periph_GPIOB,ENABLE);GP
  • [RK3568 Android11]开发之PCA9535 GPIO扩展芯片调试 ~未来可期~ RK3568扩展GPIOPCA9535kernelpca9535linux驱动嵌入式教程
    总目录链接：[RK3568Android11]本专栏说明和总目录目录前言一、PCA9535芯片1、芯片引脚定义2、I2C地址二、PCA9535驱动1、PCA9535驱动说明2、内核配置打开PCA9535驱动3、DTS设备树配置4、PCA9535驱动文件5、PCA9535GPIO实际使用前言RK3568芯片上的硬件资源是非常紧张，比如GPIO口不够使用时，这时就需要考虑使用GPIO扩展芯片来扩展GP
  • 01：【江科大stm32】：LED闪烁/LED流水灯/蜂鸣器 浅陌pa #江科大【标准库】stm32单片机嵌入式硬件
    1、LED闪烁程序/*LED灯闪烁，LED正极连接电源，负极连接PA0引脚，所以输出0点亮，输出1熄灭*/#include"stm32f10x.h"#include"Delay.h"intmain(void){//1.使能挂载在APB2总线上面的片上外设时钟RCC_APB2PeriphClockCmd(RCC_APB2Periph_GPIOA,ENABLE);//2.对GPIO_PA0进行配置GP
  • 调用GPL 开源库的法律问题 sunfanup linux开发cc++linux
    调用GPL（GeneralPublicLicense）开源库通常是合法的，但是需要遵守GPL协议的规定。使用GPL开源库可能会涉及到一些问题，以下是一些你可能需要考虑的方面：遵守GPL协议：使用GPL开源库时，你需要遵守GPL协议的规定。这包括在你的项目中使用GPL开源库时，必须将你的项目也以GPL协议开源，且必须提供源代码给用户。依赖性：如果你的项目依赖于GPL开源库，那么你的项目也必须遵守GP
  • Transformer、BERT和GPT 自然语言处理领域的重要模型 Jiang_Immortals 人工智能自然语言处理transformerbert
    Transformer、BERT和GPT都是自然语言处理领域的重要模型，它们之间有一些区别和联系。区别：架构：Transformer是一种基于自注意力机制的神经网络架构，用于编码输入序列和解码输出序列。BERT（BidirectionalEncoderRepresentationsfromTransformers）是基于Transformer架构的双向编码模型，用于学习上下文无关的词向量表示。GP
  • OpenCasCade ---- 学习总结。 Galaxy々 OpenCasCade学习算法c++
    1，点2个类可以用来描述3D坐标点：•gp_Pnt类•Geom_CartesianPoint类（句柄操作）gp_PntaPnt1(-myWidth/2.,0,0);gp_PntaPnt2(-myWidth/2.,-myThickness/4.,0);gp_PntaPnt3(0,-myThickness/2.,0);gp_PntaPnt4(myWidth/2.,-myThickness/4.,0);
  • Open CASCADE学习|布尔运算 老歌老听老掉牙 OpenCASCADE学习c++OpenCASCADE
    目录1、加法：BRepAlgoAPI_Fuse2、减法：BRepAlgoAPI_Cut3、交集：BRepAlgoAPI_Common4、交线：BRepAlgoAPI_Section1、加法：BRepAlgoAPI_Fuse#include#include#include"Viewer.h"#include​intmain(intargc,char*argv[]){//第一个基本矩形gp_PntP(
  • GPIO控制和命名规则 除不掉的灰色 泰山派单片机嵌入式硬件物联网
    Linux提供了GPIO子系统驱动框架，使用该驱动框架即可灵活地控制板子上的GPIO。GPIO命名泰山派开发板板载了一个40PIN2.54间距的贴片排针，排针的引脚定义兼容经典40PIN接口。在后续对GPIO进行操作前，我们需要先了解k3566的GPIO命名规则，此处以GPIO0_B7举例：GPIO0B7控制器（bank）端口（port）索引序号（pin）控制器（bank）：rk3566有5个GP
  • GPT在地学、GIS、气象、农业、生态、环境等领域中应用 夏日恋雨 生态学遥感大气科学gpt地学GIS论文基金气象学生态学
    详情查看公众号：技术科研吧！GPT在地学、GIS、气象、农业、生态、环境等领域中应用一开启大模型1开启大模型1)大模型的发展历程与最新功能2)大模型的强大功能与应用场景3)国内外经典大模型（ChatGPT、LLaMA、Gemini、DALL·E、Midjourney、StableDiffusion、星火大模型、文心一言、千问等）4)如何优雅使用大模型案例1.1：开启不同平台的大模型案例1.2：GP
  • optee UTA加载 Hola_ya 信息安全安全架构
    流程动态UTA按照存储位置的不同分为REEfilesystemTA：存放在REE侧文件系统里的TA；EarlyTA：被嵌入到opteeos里的在supplicant启动之前就可用了。这里我们讲的是常规的存放在REE侧文件系统里的TA。通过GP标准调用的与TA通信的命令(opensession\invoke\closession)其实都是stdsmccall，该smc调用后，会进入到TEE中的tee
  • 侯捷《C++/OOP/GP/DP》讲座心得 qq_28337005 心路历程
    OOP/GP/DP》讲座心得侯捷《C++/OOP/GP/DP》讲座心得———作者：naven很高兴侯捷老师又来公司了，给我们上了四天非常生动的技术讲座，受益匪浅，现在我简要介绍一下我的学习心得，与大家分享。这次讲座主要集中在《C++/OOP/GP/DP》主题，针对有一些编程基础的工程师，对一些常用的代码和设计做了非常通俗易懂的剖析，非常有帮助。当然更深入的理解还需要结合多种技术名著来学习，我结合我
  • 侯捷《C++/OOP/GP/DP》讲座心得(转) gxj1680 C/C++用法类c++decoratorinheritance设计模式classobject
    侯捷《C++/OOP/GP/DP》讲座心得———作者：naven很高兴侯捷老师又来公司了，给我们上了四天非常生动的技术讲座，受益匪浅，现在我简要介绍一下我的学习心得，与大家分享。这次讲座主要集中在《C++/OOP/GP/DP》主题，针对有一些编程基础的工程师，对一些常用的代码和设计做了非常通俗易懂的剖析，非常有帮助。当然更深入的理解还需要结合多种技术名著来学习，我结合我的理解以及自己的学习和开发的
  • 把自己的应用添加到系统的“分享”列表中 桃先森_
    在清单文件中，建立自己分享的Activity，然后在该Activity的标签下新增一个intent-filter,注意是新增一个，不要跟原先的一块，要不然不生效；mimeType代表支持分享的类型：{".3gp","video/3gpp"},{".apk","application/vnd.android.package-archive"},{".asf","video/x-ms-asf"},{"
  • 【我们仨378】 嗨蔡园园
    [爱心]亲子教练深度践行打卡姓名：蔡园园孩子年龄+性别：6岁半女打卡日期：201910262019年10月累计天数：26/31总累计天数：87/3659月基础习惯：放学后先做作业9月关注：喜欢上学10月亲子践行目标：1.自己：再启《我们仨》2.孩子：一日饼图3.家庭：每天分享一件快乐事今日闪光点：1.自己：（1）对演讲点评得心应手：给GP27期两名演讲者点评，重新梳理他们演讲的可能模式，他们说被提
  • 人生如此短暂，生命如此脆弱 梦之桃花源
    u=826811861,3992827196&fm=26&gp=0.jpg同事的老公突然去世了，逝者尚在壮年，老人需要抚养，儿子尚未成家，他却一句话没有留下就撒手人寰，想来实在残酷。同事多年，发生这样的事情，心里很难过，为我的同事、也为我们生命的脆弱。今天我们去吊唁。到了同事的家里，看到她那么伤心，自己也悲痛不已。一个鲜活的生命突然间从人世间消失，那种感觉真得很不真实。我们尽力去安慰同事，希望她坚
  • 多系统折腾记录(老电脑MBR分区) nidepc windowsubuntudeepinmanjarolinux
    多系统折腾记录一(老电脑MBR分区)序言目标：办公用多系统，要求必须能用HP1020PLUS打印机、GP1324D打印机、能用QQ、微信、百度网盘、搜狐输入法；系统稳定流畅。且对我这种LINUX小白友好，最好可以开箱即用或快速配置。准备工作硬件：一个大于16G的优盘、一台能上网的电脑软件：多启动制作工具YUMI、PE系统：优启通V3.5踩过的坑（以下内容自己备用mark，不用看）extix-20.
  • 帮助Java小白涨知识的教程（二）（运行第一个程序的准备） 晨风晓旭
    下载JDK敢问少侠，JDK为何物？答：Java开发工具包是也。u=3075368771,1830563320&fm=26&gp=0.jpg下载JDK，找甲骨文官网下载就行，具体步骤可以参考一下这篇文章https://blog.csdn.net/zhys0902/article/details/79499329我下载的是甲骨文官网的windows64位的，现在最新是14版本的（2020），一般最新的
  • 有限合伙企业的合并报表相关问题 冉崇明
    在实践操作中，经常会遇到有限合伙型基金的合并报表问题。究竟是因为GP的执行事务合伙人身份而并入GP，还是因为出资比例而并入出资最多的LP，更多的是一个会计处理问题，但是，有时该问题也会成为一个比较重要的法律问题，甚至会影响整个交易架构的设计。本文拟结合相关会计准则的规定和有限合伙企业自身的特点对其合并报表问题作简要分析。一、合并报表与控制根据财政部于2014年2月17日修订的《企业会计准则第33号
  • Clickhouse 优点与缺点 （个人测评） u013250861 #LLM/数据处理clickhouse
    一、简介优点1、写入速度快，50-200M/S,对于大量的数据更新非常实用。2、数据压缩空间大，减少IO，处理查询高吞吐量，每台服务器秒级数十亿行。3、查询快，比Vertica快5倍以上，比GP快10倍以上，比HIVE快200倍以上，比MYSQL快800倍以上。4、高效实用CPU,并行处理单个查询，充分利用多核，在多个服务器山分布式处理。5、开源的列存储，支持线性扩展，简单方便，高可用容错。缺点1
  • 音视频封装格式、编码格式 【零声教育】音视频开发进阶 音视频开发程序员编程ffmpeg音视频人工智能编码格式封装格式
    常见的AVI、RMVB、MKV、ASF、WMV、MP4、3GP、FLV等文件其实只能算是一种封装标准。一个完整的视频文件是由音频和视频2部分组成的。H264、Xvid等就是视频编码格式，MP3、AAC等就是音频编码格式。例如：将一个Xvid视频编码文件和一个MP3音频编码文件按AVI封装标准封装以后，就得到一个AVI后缀的视频文件，这个就是我们常见的AVI视频文件了。由于很多种视频编码文件、音频编
  • 平时积累的FPGA知识点（4） 徐丹FPGA之路 FPGAfpga开发
    1怎么用ZYNQ输出控制其他模块吗？在xdc里面定义了引脚就可以了吗？回答:用emio或者gp接口，如果是控制fpga芯片外部信号，用mio。用FPGA端控制直接引出来，用ARM控就用MIO或者EMIO就行，EMIO直接在BD里面引出来加上约束就行2这个严重警告是怎么回事呢？我是在做一个rgmii转gmii的一个功能，在发送方向，我是将进来的gmiitxdata经过一个oddr，然后再经过一个od
  • 雪 夜 梧_桐_树
    u=344068865,1816629219&fm=27&gp=0.jpg没有雪的冬天总是少了些什么，像是没有酒的宴席，能吃饱，却总是不能尽欢。冬天也只是因为没有雪多了几分干燥。还好，盼了又盼，雪最终是没有爽约，迟到了，总比不来的好些。那几天说是要下雪，白天总是没有看见，到了晚上也不肯睡去，想着如果睡了，雪悄悄下了起来，岂不是太过于扫兴。我是喜欢晚上下雪的，喧嚣的城市在这种雪夜，变得静悄悄的，没有
  • 从0到100万，她从学校出来不久的90后小女生 鱼教头
    u=3365976261,2570922957&fm=11&gp=0.jpg1林小白是的签约作者，翻译作家，有书2017年度的智库领读达人。我也很幸运得到林小白作家的一本签名书《行动力》，书看完了，但是好像没有学到什么东西。只是在电脑边贴了一大推没完成事项和即将完成的事项的小便签。同时，有幸听了她的成长过程讲座。有人说，你是她的粉丝吗？我想说不是，但是我很佩服她。一个年轻小女生能站在演讲台上侃侃而
  • Open CASCADE基础介绍（2） blueman8888 opencascade
    OpenCASCADE基础介绍（2）一些OCC的基础知识，愿与各位OCC爱好者共同学习；mail:[email protected]一：关于体的类BRepBuilderAPI_MakeVertex类创建点；BRepBuilderAPI_MakeEdge类此类用来创建边；比如，由直线生成边：gp_Linline(gp_Ax1(gp_Pnt(10,10,10),gp_Dir(1,0,0)));Whit
  • 书其实只有三类 西蜀石兰 类
    一个人一辈子其实只读三种书，知识类、技能类、修心类。 知识类的书可以让我们活得更明白。类似十万个为什么这种书籍，我一直不太乐意去读，因为单纯的知识是没法做事的，就像知道地球转速是多少一样（我肯定不知道），这种所谓的知识，除非用到，普通人掌握了完全是一种负担，维基百科能找到的东西，为什么去记忆？ 知识类的书，每个方面都涉及些，让自己显得不那么没文化，仅此而已。社会认为的学识渊博，肯定不是站在
  • 《TCP/IP 详解，卷1：协议》学习笔记、吐槽及其他 bylijinnan tcp
    《TCP/IP 详解，卷1：协议》是经典，但不适合初学者。它更像是一本字典，适合学过网络的人温习和查阅一些记不清的概念。 这本书，我看的版本是机械工业出版社、范建华等译的。这本书在我看来，翻译得一般，甚至有明显的错误。如果英文熟练，看原版更好： http://pcvr.nl/tcpip/ 下面是我的一些笔记，包括我看书时有疑问的地方，也有对该书的吐槽，有不对的地方请指正： 1.
  • Linux—— 静态IP跟动态IP设置 eksliang linuxIP
    一.在终端输入 vi /etc/sysconfig/network-scripts/ifcfg-eth0 静态ip模板如下： DEVICE="eth0" #网卡名称 BOOTPROTO="static" #静态IP（必须） HWADDR="00:0C:29:B5:65:CA" #网卡mac地址 IPV6INIT=&q
  • Informatica update strategy transformation 18289753290
    更新策略组件： 标记你的数据进入target里面做什么操作，一般会和lookup配合使用，有时候用0,1,1代表 forward  rejected rows被选中，rejected row是输出在错误文件里，不想看到reject输出，将错误输出到文件，因为有时候数据库原因导致某些column不能update，reject就会output到错误文件里面供查看，在workflow的
  • 使用Scrapy时出现虽然队列里有很多Request但是却不下载，造成假死状态 酷的飞上天空 request
    现象就是： 程序运行一段时间，可能是几十分钟或者几个小时，然后后台日志里面就不出现下载页面的信息，一直显示上一分钟抓取了0个网页的信息。 刚开始已经猜到是某些下载线程没有正常执行回调方法引起程序一直以为线程还未下载完成，但是水平有限研究源码未果。 经过不停的google终于发现一个有价值的信息，是给twisted提出的一个bugfix 连接地址如下http://twistedmatrix.
  • 利用预测分析技术来进行辅助医疗 蓝儿唯美 医疗
    2014年，克利夫兰诊所（Cleveland Clinic）想要更有效地控制其手术中心做膝关节置换手术的费用。整个系统每年大约进行2600例此类手术，所以，即使降低很少一部分成本，都可以为诊 所和病人节约大量的资金。为了找到适合的解决方案，供应商将视野投向了预测分析技术和工具，但其分析团队还必须花时间向医生解释基于数据的治疗方案意味着 什么。  克利夫兰诊所负责企业信息管理和分析的医疗
  • java 线程(一)：基础篇 DavidIsOK java多线程线程
                                                            &nbs
  • Tomcat服务器框架之Servlet开发分析 aijuans servlet
    最近使用Tomcat做web服务器，使用Servlet技术做开发时，对Tomcat的框架的简易分析： 疑问： 为什么我们在继承HttpServlet类之后，覆盖doGet(HttpServletRequest req, HttpServetResponse rep)方法后，该方法会自动被Tomcat服务器调用，doGet方法的参数有谁传递过来？怎样传递？ 分析之我见： doGet方法的
  • 揭秘玖富的粉丝营销之谜 与小米粉丝社区类似 aoyouzi 揭秘玖富的粉丝营销之谜
    玖富旗下悟空理财凭借着一个微信公众号上线当天成交量即破百万，第七天成交量单日破了1000万;第23天时，累计成交量超1个亿……至今成立不到10个月，粉丝已经超过500万，月交易额突破10亿，而玖富平台目前的总用户数也已经超过了1800万，位居P2P平台第一位。很多互联网金融创业者慕名前来学习效仿，但是却鲜有成功者，玖富的粉丝营销对外至今仍然是个谜。   　　近日，一直坚持微信粉丝营销
  • Java web的会话跟踪技术 百合不是茶 url会话Cookie会话Seession会话Java Web隐藏域会话
    会话跟踪主要是用在用户页面点击不同的页面时,需要用到的技术点   会话:多次请求与响应的过程     1,url地址传递参数,实现页面跟踪技术          格式:传一个参数的 url?名=值     传两个参数的 url?名=值 &名=值   关键代码
  • web.xml之Servlet配置 bijian1013 javaweb.xmlServlet配置
    定义： <servlet> <servlet-name>myservlet</servlet-name> <servlet-class>com.myapp.controller.MyFirstServlet</servlet-class> <init-param> <param-name>
  • 利用svnsync实现SVN同步备份 sunjing SVN同步E000022svnsync镜像
    1. 在备份SVN服务器上建立版本库    svnadmin create test 2. 创建pre-revprop-change文件     cd test/hooks/     cp pre-revprop-change.tmpl pre-revprop-change 3. 修改pre-revprop-
  • 【分布式数据一致性三】MongoDB读写一致性 bit1129 mongodb
    本系列文章结合MongoDB，探讨分布式数据库的数据一致性，这个系列文章包括： 数据一致性概述与CAP 最终一致性(Eventually Consistency) 网络分裂(Network Partition)问题 多数据中心(Multi Data Center) 多个写者(Multi Writer)最终一致性 一致性图表(Consistency Chart) 数据
  • Anychart图表组件-Flash图转IMG普通图的方法 白糖_ Flash
    问题背景：项目使用的是Anychart图表组件，渲染出来的图是Flash的，往往一个页面有时候会有多个flash图，而需求是让我们做一个打印预览和打印功能，让多个Flash图在一个页面上打印出来。   那么我们打印预览的思路是获取页面的body元素，然后在打印预览界面通过$("body").append(html)的形式显示预览效果，结果让人大跌眼镜：Flash是
  • Window 80端口被占用 WHY? bozch 端口占用window
    平时在启动一些可能使用80端口软件的时候，会提示80端口已经被其他软件占用，那一般又会有那些软件占用这些端口呢？    下面坐下总结：         1、web服务器是最经常见的占用80端口的，例如：tomcat , apache  , IIS , Php等等；         2
  • 编程之美-数组的最大值和最小值-分治法（两种形式） bylijinnan 编程之美
    import java.util.Arrays; public class MinMaxInArray { /** * 编程之美 数组的最大值和最小值 分治法 * 两种形式 */ public static void main(String[] args) { int[] t={11,23,34,4,6,7,8,1,2,23}; int[]
  • Perl正则表达式 chenbowen00 正则表达式perl
    首先我们应该知道 Perl 程序中，正则表达式有三种存在形式，他们分别是： 匹配：m/<regexp>;/ （还可以简写为 /<regexp>;/ ，略去 m） 替换：s/<pattern>;/<replacement>;/ 转化：tr/<pattern>;/<replacemnt>;
  • [宇宙与天文]行星议会是否具有本行星大气层以外的权力呢? comsci
          举个例子: 地球,地球上由200多个国家选举出一个代表地球联合体的议会,那么现在地球联合体遇到一个问题,地球这颗星球上面的矿产资源快要采掘完了....那么地球议会全体投票,一致通过一项带有法律性质的议案,既批准地球上的国家用各种技术手段在地球以外开采矿产资源和其它资源........    &
  • Oracle Profile 使用详解 daizj oracleprofile资源限制
    Oracle Profile 使用详解 转 一、目的： Oracle系统中的profile可以用来对用户所能使用的数据库资源进行限制，使用Create Profile命令创建一个Profile，用它来实现对数据库资源的限制使用，如果把该profile分配给用户，则该用户所能使用的数据库资源都在该profile的限制之内。 二、条件： 创建profile必须要有CREATE PROFIL
  • How HipChat Stores And Indexes Billions Of Messages Using ElasticSearch & Redis dengkane elasticsearchLucene
    This article is from an interview with Zuhaib Siddique, a production engineer at HipChat, makers of group chat and IM for teams. HipChat started in an unusual space, one you might not
  • 循环小示例，菲波拉契序列，循环解一元二次方程以及switch示例程序 dcj3sjt126com c算法
    # include <stdio.h> int main(void) { int n; int i; int f1, f2, f3; f1 = 1; f2 = 1; printf("请输入您需要求的想的序列："); scanf("%d", &n); for (i=3; i<n; i
  • macbook的lamp环境 dcj3sjt126com lamp
      sudo vim /etc/apache2/httpd.conf   /Library/WebServer/Documents 是默认的网站根目录   重启Mac上的Apache服务   这个命令很早以前就查过了，但是每次使用的时候还是要在网上查： 停止服务：sudo /usr/sbin/apachectl stop 开启服务：s
  • java ArrayList源码 下 shuizhaosi888 ArrayList源码
    版本 jdk-7u71-windows-x64   JavaSE7 ArrayList源码上：http://flyouwith.iteye.com/blog/2166890     /** * 从这个列表中移除所有c中包含元素 */ public boolean removeAll(Collection<?> c) {
  • Spring Security（08）——intercept-url配置 234390216 Spring Securityintercept-url访问权限访问协议请求方法
    intercept-url配置 目录 1.1     指定拦截的url 1.2     指定访问权限 1.3     指定访问协议 1.4     指定请求方法   1.1   &n
  • Linux环境下的oracle安装 jayung oracle
    linux系统下的oracle安装 本文档是Linux(redhat6.x、centos6.x、redhat7.x) 64位操作系统安装Oracle 11g(Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production)，本文基于各种网络资料精心整理而成，共享给有需要的朋友。如有问题可联系：QQ：52-7
  • hotspot虚拟机 leichenlei javaHotSpotjvm虚拟机文档
    JVM参数  http://docs.oracle.com/javase/6/docs/technotes/guides/vm/index.html   JVM工具 http://docs.oracle.com/javase/6/docs/technotes/tools/index.html   JVM垃圾回收 http://www.oracle.com
  • 读《Node.js项目实践：构建可扩展的Web应用》 ——引编程慢慢变成系统化的“砌砖活” noaighost Webnode.js
    读《Node.js项目实践：构建可扩展的Web应用》 ——引编程慢慢变成系统化的“砌砖活” 眼里的Node.JS 初初接触node是一年前的事，那时候年少不更事。还在纠结什么语言可以编写出牛逼的程序，想必每个码农都会经历这个月经性的问题：微信用什么语言写的？facebook为什么推荐系统这么智能，用什么语言写的？dota2的外挂这么牛逼，用什么语言写的？……用什么语言写这句话，困扰人也是阻碍
  • 快速开发Android应用 rensanning android
    Android应用开发过程中，经常会遇到很多常见的类似问题，解决这些问题需要花时间，其实很多问题已经有了成熟的解决方案，比如很多第三方的开源lib，参考 Android Libraries 和 Android UI/UX Libraries。 编码越少，Bug越少，效率自然会高。 但可能由于 根本没听说过、听说过但没用过、特殊原因不能用、自己已经有了解决方案等等原因，这些成熟的解决
  • 理解Java中的弱引用 tomcat_oracle java工作面试
    　不久之前，我 面试了一些求职Java高级开发工程师的应聘者。我常常会面试他们说，“你能给我介绍一些Java中得弱引用吗？”，如果面试者这样说，“嗯，是不是垃圾回收有关的？”，我就会基本满意了，我并不期待回答是一篇诘究本末的论文描述。 　　然而事与愿违，我很吃惊的发现，在将近20多个有着平均5年开发经验和高学历背景的应聘者中，居然只有两个人知道弱引用的存在，但是在这两个人之中只有一个人真正了
  • 标签输出html标签" target="_blank">关于标签输出html标签 xshdch jsp
    http://back-888888.iteye.com/blog/1181202 关于<c:out value=""/>标签的使用，其中有一个属性是escapeXml默认是true(将html标签当做转移字符，直接显示不在浏览器上面进行解析)，当设置escapeXml属性值为false的时候就是不过滤xml，这样就能在浏览器上解析html标签， &nb
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他