IT故障排查第15页

pt-osc改表导致数据不一致案例分析

2016-06-10李丹dba流浪猫我们平时除了解决自己问题外，有时候也会协助圈内人士，进行一些故障排查，此案例就是帮某公司DBA进行的故障分析，因为比较典型，特分享一下，但仅仅是分享发生的过程，不对该案例的产生以及如何避免做过多评价

weixin_30246221·2020-08-11 18:13

负载均衡会话时间导致故障案例

背景描述：电商交易系统时刻有业务，某一天发生了交易异常，运行人员协调客户端、服务器开发人员和网络人员进行故障排查，整个拓扑图如下，客户端将交易请求发给负载均衡，负载均衡转发给后台服务器：客户端开发人员在客户端查询到在

sinfoyou·2020-08-11 14:48

MPLS LDP 故障排查

Technorati标签:MPLSLDP,MPLSLDP故障排查本文是关于MPLSLDP的故障排查.两个设备建立直连LDP邻居:R2和R3.R2的interfaceGiga2/0和R3的interfaceG1

weixin_33979745·2020-08-11 14:14

MPLS LDP标签控制--高级feature&&标签的故障排查

Technorati标签:MPLS,CCIE,Label,LDP,标签控制MPLSLDP标签控制.1,mplsldpadvertise-labels[forprefix-access-list[topeer-access-list]]标签过滤,1,给予2,接收默认情况下，本地路由器会为IGP路由表所有前缀分配标签，并且分发到所有LDP邻居去.该命令是通过命令人为的选择标签到一些LDP邻居或者TDP

H_MZ·2020-08-11 14:49

nginx+php-fpm故障排查

导读作者：陈天庆（邮箱：[email protected]，欢迎交流）知数堂MySQLDBA班、大数据实战班优秀学员，现任职知数堂助教小明初到一家公司做运维的工作，刚来的第一天就开始部署LNMP(Linux+Nginx+MySQL+PHP)环境，结果出现了问题。他来向我请教，具体问题现象、原因和解决思路如下:问题一nginx进程CPU和内存不均衡，某个进程占用资源特别高，如何解决？回答：我让小明绑定

老叶茶馆_·2020-08-11 03:44

OSS服务监控、诊断和故障排除

相对于传统的软件运行环境，云数据分布式托管环境虽然解决了很多应用业务在基础设施搭建、运维管理等方面的问题和成本困难，使得应用服务搭建的门槛降低，但是其复杂的云环境，也大大增加了对其监控、诊断和故障排查的难度

weixin_34247299·2020-08-10 03:46

关于阿里云OSS故障排查解决，以及经验总结

背景描述在2018年1月22日星期一，早上发现部署在阿里云所有服务无法访问，登录到阿里云控制台，首先查看SLB负载均衡器状态，发现所有公网负载均衡器被停用，专网负载均衡器工作正常。电话联系阿里云客服，告知阿里云欠费，我们的负载均衡器都是按量付费模式，因欠费所以被停用，立刻向阿里云进行充值，暂时解决问题。需要解决的问题阿里云账户就在前两天还有充足的余额，为什么突然欠费？费用产生原因？备注：因为部署到

weixin_33720452·2020-08-10 02:22

图解MySQL | [原理解析] MySQL insert 语句的磁盘写入之旅

作者及简介：黄炎，爱可生首席技术官；王悦，爱可生研发团队成员，负责数据库管理平台相关项目的开发和故障排查，好奇MySQL技术原理及各类数据库实现方案。

ActionTech·2020-08-09 18:09

CPU占用率100%解决方法

故障排查：大多数人碰到这种情况都会重启电脑，但是我是一个学计算机的人，怎么能动不动就重启电脑呢。于是开始了对问

「已注销」·2020-08-08 15:46

Linux常用监视和故障排查命令详解

#命令预览1.top2.ps3.nice4.kill5.iostat6.mpstat7.vmstat8.df9.du10.netstat11.ss#首先了解一下什么是进程#进程：是Linux用来表示正在运行的程序的一种抽象概念，Linux系统上所有运行的东西都可以称为进程1.top命令：动态查看进程相关信息#提示：前五行是系统整体的统计信息#详解相关命令意思#第一行：任务队列信息，和uptime命

老油条IT记·2020-08-08 14:43

keepalived介绍，安装，及配置文件说明

文章目录一、keepalived介绍1.故障排查2.故障切换3.VRRP：虚拟路由冗余协议4.运行状态与隔离5.keepalived核心组件6.keepalived配置文件详解全局配置:VRRPD配置：

夜太凉·2020-08-07 21:57

Python老司机带你快速搞定日志分析工具

标题说明一切，原文地址：jkklee/web_log_analyse,觉得文章不错请给原作者一个star哦~日志分析在web系统中故障排查、性能分析方面有着非常重要的作用。

MHyourh·2020-08-07 18:20

ELK概述、 ES集群部署、 ES常用插件、RESTFUL API操作ES 集群

负责日志的收集和分析、处理–Kibana:负责日志的可视化1.1.2ELK能做什么ELK组件在海量日志系统的运维中,可用于解决:–分布式日志数据集中式查询和管理–系统监控,包含系统硬件和应用各个组件的监控–故障排查

李俊的博客·2020-08-07 16:23

ES 2.X 集群故障排查 UnavailableShardsException

RemoteTransportException[[node-250][10.32.34.250:9300][indices:data/write/update]];nested:UnavailableShardsException[[ivs_document][2]Notenoughactivecopiestomeetwriteconsistencyof[QUORUM](have1,needed

handongopqwe·2020-08-07 14:39

Linux系统运维故障排查

一.思路1.处理问题要求2.一般思路二.具体问题1.网络问题(1)网络不通(2)网络很慢2.硬件问题3.操作系统问题(1)系统无法正常启动(2)系统运行慢或死机4.服务或程序问题5.其他一.思路1.处理问题要求：思路清晰、问题明确、快速解决，长时间的积累形成自己的一套解决问题的“反射弧”2.一般思路：(1)重视报错信息：定位基本问题基本方向(2)查询日志文件：报错信息有时只是问题的表象，想要更具体

weixin_30402343·2020-08-07 09:28

Linux运维常见故障排查和处理的技巧汇总

2019独角兽企业重金招聘Python工程师标准>>>第一：常见问题解决集锦1.shell脚本不执行问题：某天研发同事找我说帮他看看他写的shell脚本，死活不执行，报错。我看了下，脚本很简单，也没有常规性的错误，报“:badinterpreter:Nosuchfileordirectory”错。看这错，我就问他是不是在windows下编写的脚本，然后在上传到linux服务器的……果然。原因：在D

weixin_34292959·2020-08-07 09:31

福禄克DSX2-5000 CH网络线缆故障排查仪器

面对隐藏某一处的网络线缆出现故障的时候，在福禄克DSX2-5000CH上使用专用的线缆诊断功能，一键式执行全部测试并保存结果。以图形的方式显示故障根原因，可以快速的进行故障排除和定位。DSX2-5000CH大大缩短了修复日常线缆故障和布线故障所需的时间，通过图形化的结果屏幕，用户随着电缆可以看到任意给定链路上所有的串扰、回波损耗和屏蔽故障的准确位置。福禄克旧版的测试仪诊断功能有限，仅限于250MH

wx5f19329be89e5·2020-08-06 13:53

golang 服务诡异499、504网络故障排查

事故经过排查总结事故经过11-0112:00中午午饭期间，手机突然收到业务网关非200异常报警，平时也会有一些少量499或者网络抖动问题触发报警，但是很快就会恢复（目前配置的报警阈值是5%，阈值跟当时的采样窗口qps有直接关系）。报警当时非200占比已经过10%并且在持续升高，根据历史规律应该很快就会恢复，我们稍微观察了几分钟（一边吃着很香的饺子一边看着手机），但是过了几分钟故障没有恢复而且占比升

plen_wang·2020-08-05 16:22

golang 服务大量 CLOSE_WAIT 故障排查

事故经过排查总结事故经过【2019-12-2718:00周五】业务方突然找来说调用我们程序大量提示“触发限流”，但是我们没有收到任何监控报警。紧急查看了下ServiceMeshsidecar代理监控发现流量持续在减少，但是监控中没有任何触发限流的httpcode429占比，如果有触发限流我们会收到报警。后来通过排查是程序中有一个历史限流逻辑触发了，但是程序中触发限流返回的httpcode是200，

plen_wang·2020-08-05 16:22

极易搭建的自助 Git 服务 Gogs

尝试从故障排查页面或用户论坛获取

Mr.Aaron·2020-08-05 15:00

AWS的性能检测服务X-Ray（APM）

虽然微服务或Serverless确实是可以提升业务的持续服务和可靠性，但是业务复杂度，管理难度和管理成本随之提升，如何做好业务故障排查，特别是性能和稳定是

weixin_34026276·2020-08-05 08:09

部署 Dashboard可视化插件

用户可以用KubernetesDashboard部署容器化的应用、监控应用的状态、执行故障排查任务以及管理Kubernetes各种资源Kubernetes-Dashboard的安装步骤主要有以下几步：安装部署

吹动红旗的风·2020-08-04 12:33

网络工程师必须掌握的OSPF协议理论

文章目录OSPF基础回顾OSPF故障排查ospf优点：OSPF报文类型OSPF邻居关系建立的过程OSPFLSA划分区域的好处OSPF特殊区域虚链路认证OSPF网络类型OSPF基础回顾OPenshortpathfirst

江湖皆过往·2020-08-04 06:48

性能调优之综合篇 - Linux系统性能监控和故障排查利器Sysdig

Sysdig绝对是可以跟SystemTap相媲美的工具，都是系统故障排查的利器，不论是开发人员还是运维人员都必须要掌握的一个工具。今天先介绍一下Sysdig的一些特性。

weixin_34235457·2020-08-04 05:06

网络模拟器Cisco Packet Tracer和eNSP

可以学习IOS的配置、锻炼故障排查能力。CCNA认证(思科认证网络工程师)表示具备基本的和初步的网络知识。拥有CCNA认证的

江xiao河·2020-08-03 21:12

zabbix的简单介绍

，单独使用的命令，通常在server或者proxy端执行获取远程客户端信息的命令，可以用来拍错，例如在server端获取不到客户端的内存数据，我们可以使用zabbix_get获取客户端的内容的方式来做故障排查

辛舒展·2020-08-03 12:09

SQL Server 2008性能故障排查（二）——CPU

承接上一篇：SQLServer2008性能故障排查（一）——概论说明一下，CSDN的博客编辑非常不人性化，我在word里面都排好了版，贴上来就乱得不成样了。建议CSDN改进这部分。

iteye_12332·2020-08-03 00:20

【过关斩将】运维老鸟带教你如何精通运维

因为运维学的东西又多又杂；需要了解网络，学习系统基础操作，熟悉数据库，熟悉基础服务，熟悉自动化工具，虚拟化，容器，监控，故障排查等等。

辛舒展·2020-08-02 20:41

服务器设置分布式事务（数据库开启分布式事务）

M:MSDTC分布式事务处理协调器主意事项：（故障排查）检测端口数

Dishy7777·2020-08-02 15:27

jboss内存泄漏导致服务宕机故障排查及分析处理

jboss宕机排查问题描述问题排查思路问题排查步骤准备应用日志抓取脚本应用正常运行时抓取对照组宕机时抓取日志结果分析对比两次checklink.sh结果对比两次checkjstack.sh结果对比两次checkjmap.sh结果分析jboss日志。原因分析查找原因问题重现循环执行nc命令检测GC日志检测JMX检查jboss日志检查内存溢出与生产原因是否一致抓取日志将.hprof文件导入MAT进行分

wenyao_Yao·2020-08-02 13:15

网络故障排查

今天上班，公司出现了一个网络问题。公司的办公专线上，有一个网站。我们租用的是移动的带宽。部分用户出现了访问网站极慢的情况。经过分析，这个问题几乎出现在联通用户上。第一个反应，想到的是跨运营商引起的。并且发现，从公司去访问一些网站也是慢的，而这些网站的ip是联通的。于是后面我进行了更深入的测试。这个是联通地址的网址我这里以qa.mark.com为例。首先，找了一个出口ip是北京联通的电脑，分别去pi

安宝贝我爱你·2020-07-31 19:28

解决DataNode Volume Failures故障

DataNode节点发生硬件故障，由于后需需要长时间的处理，所以从Cloudera集群中剔除了该节点，在重新将该节点添加到集群时候发现DataNode节点爆DataNode卷故障阈值警告二、解决过程2.1、排查故障排查

DV2·2020-07-31 14:36

大数据发力 LTE端到端KPI指标可精细优化

LTE网络时代端到端用户感知包含终端、网络、业务平台、内容源等诸多环节，一旦出现网络问题，故障排查定位困难。使用传统的无线网络规划、配置和优化工作方式，人工完成海量

weixin_34274029·2020-07-31 12:23

新建网站，在Linux服务器上部署nginx之后不能访问，故障排查过程分享

今天，一朋友的一台linux服务器上部署了nginx，但是外部（公网）就是不能访问，于是协助其排查。整体思路如下：1、确认nginx配置是否ok。2、确认网络是否可达。3、是否受防火墙安全控制等。4、排除以上原因之后，远程实际再测试。那么开始排查：1、确认nginx配置是否ok。1.1、检查nginx的配置。发现有报错2013/11/1315:35:09[emerg]7739#0:bind()to

weixin_34260991·2020-07-31 10:54

实用的网络故障排查方法

在本文中你将学习了解到排查网络故障的通常解决方法，而不是复杂的技术过程。但千万不要忽视它们，否则你可能会浪费时间做重复的事。我们知道要成功的排查一个网络故障的关键在于要遵从一个复合逻辑的问题解决过程，而不是通过随意尝试来发现问题的解决方法。大多数人也是遵寻这样的方法来解决问题的，但可能没有太多人去做一个正式的解决问题的计划或方法。1、发现并找出问题的症状或叫现象并记录2、先寻求最简单的解决方案3、

weixin_34268843·2020-07-30 17:35

配置IP和网络故障排查

1：nat模式和桥接模式的区别桥接：虚拟机和主机一个网段，好处：设置简单，可以访问局域网其他计算机和外网。缺点：占用一个外网ip地址nat:使用的是vmnet8网卡，能和主机外网通信，不能和局域网其他的主机通信。2：网卡配置文件目录vi/etc/sysconfig/network-scripts/ifcfg-eth0路径dhclient自动获取ip的命令需要修改的地方：BOOTPPROTO=sta

weixin_33774615·2020-07-30 17:10

log系统的基本规范

主要是结果信息，日志是产生结果的中间过程日志分类1.访问日志：access.log系统稳定期&总体分析使用尽量用gz输出2.工程未处理日志：project.log目标是越来越少3.业务日志：*biz.log故障排查

madding·2020-07-30 15:17

深入理解JVM（三）——配置参数

跟踪参数跟踪参数用于跟踪监控JVM，往往被开发人员用于JVM调优以及故障排查。1、当发生GC时，打印GC简要信息使

huangshulang1234·2020-07-30 15:28

一次Oracle bug的故障排查过程思考

问题现象：一套十几个TPS的系统被执行2分钟(00:30-00:32)的夜维(删除历史过期的数据)搞挂了。初步分析：通过应用日志，定位到应用处理都卡在了一条SQL语句上，这个SQL要更新一个包含4个CLOB列的表，有的update操作执行时间超过了10秒，形如，update A set a=:1, b=:2, c=:3 ... where id=:10 and update_time=:11;通过

bisal·2020-07-30 14:20

手持式、支持多技术多应用的以太网测试仪

并具备IEEE1588v2，SyncE，RFC6349等最新测试功能和测试方法，为移动运营商，设备供应商，通信工程施工单位提供传输网络，数据网络以及同步网络等开通，维护故障排查的测试工具。

wx5f19329be89e5·2020-07-30 14:40

k8s部署可视化插件Dashboard（web UI）

用户可以用k8sdashboard部署容器化的应用，监控应用的状态，执行故障排查任务以及管理k8s各种资源。

小草卑微·2020-07-30 11:14

服务器开发中网络故障排查

shutdown2.网络接口返回值的说明3.阻塞模式的套接字和非阻塞模式的套接字4.send和recv函数完成的是一次数据拷贝操作5.优雅关闭：shutdown+close6.常见的套接字选项二、常用的网络故障排查工具

简单生活，简单爱·2020-07-30 09:19

kubernetes 部署bashboard可视化插件

用户可以用KubernetesDashboard部署容器化的应用、监控应用的状态、执行故障排查任务以及管理Kubernetes各种资源。这里部署dashboardv1.10.1版本。

醒了醉了懵了·2020-07-30 09:15

Kubernetes故障排查指南-分析容器退出状态码

问题大家在使用Kubernetes时，会遇到创建Pod失败，这时会分析什么原因导致创建Pod失败？Podstatus状态解释[1]CrashLoopBackOff：容器退出，kubelet正在将它重启InvalidImageName：无法解析镜像名称ImageInspectError：无法校验镜像ErrImageNeverPull：策略禁止拉取镜像ImagePullBackOff：镜像正在重试拉取

YP小站·2020-07-30 09:06

K8s第八篇Kubernetes-Dashboard

执行故障排查任务。管理Kubernetes各种资源。监控集群节点的硬件资源状态。Github：https://github.com/kubernetes/dashboard部署K

IT运维民工·2020-07-30 04:25

Keepalived双主模型中vrrp_script中权重改变故障排查

故障重现keepalived配置如下#vi/etc/keepalived/keepalived.conf!ConfigurationFileforkeepalivedglobal_defs{notification_email{root@localhost}[email protected]_connect_timeout3smtp_server1

weixin_33751566·2020-07-30 03:22

故障排查

实验名称：故障排错实现全网互通实验拓扑：排错思路1、先排查PC机2、排查SW23、排查SW34、排查SW15、排查AR16、排查AR27、排查AR3实验步骤：排查修改SW2undotmInfo:Currentterminalmonitorisoff.sysEntersystemview,returnuserviewwithCtrl+Z.[SW2]dis[SW2]displayco[SW2]disp

weixin_33691700·2020-07-30 02:02

TCP连接的状态详解以及故障排查

1、TCP状态LISTENING：侦听来自远方的TCP端口的连接请求.首先服务端需要打开一个socket进行监听，状态为LISTEN。有提供某种服务才会处于LISTENING状态，TCP状态变化就是某个端口的状态变化，提供一个服务就打开一个端口，例如：提供www服务默认开的是80端口，提供ftp服务默认的端口为21，当提供的服务没有被连接时就处于LISTENING状态。FTP服务启动后首先处于侦听

u014591595·2020-07-30 01:19

K8S之调度约束+故障排查

文章目录调度约束的各个组件流程图基本调度方式操作实例nodeNamenodeSelector故障排查调度约束的各个组件流程图Kubernetes通过watch的机制进行每个组件的协作，每个组件之间的设计实现了解耦

蜜桃上的小叮当·2020-07-30 00:35

使用VisualVM监控远程服务器JVM+原创离线安装VisualGC插件

VisualVM是JDK自带的一款全能型性能监控和故障分析工具，包括对CPU使用、JVM堆内存消耗、线程、类加载的实时监控，内存dump文件分析，垃圾回收运行情况的可视化分析等，对故障排查和性能调优很有帮助

ocean73737·2020-07-29 21:04

推荐频道

IT故障排查