中间件运维

《Python 网络爬虫简易速速上手小册》第9章：爬虫项目的部署与运维（2024 最新版）

文章目录9.1爬虫的部署策略9.1.1重点基础知识讲解9.1.2重点案例：使用Docker部署爬虫到云服务平台9.1.3拓展案例1：使用Kubernetes管理爬虫的部署和扩展9.1.4拓展案例2：利用GitHubActions实现CI/CD9.2日志管理与错误处理9.2.1重点基础知识讲解9.2.2重点案例：使用Pythonlogging模块进行日志管理9.2.3拓展案例1：使用Sentry进行
江帅帅·2024-02-05 23:17

Redis入门指南

文章目录Redis概述Redis基本数据类型Redis与MySQL的区别以及使用场景如何保持双写一致性（缓存一致性）1.延迟双删2.分布式锁（强一致性时使用）3.中间件Redis持久化机制RDB（redisdatabase
屈家全·2024-02-05 23:37

算法题--od考试（日志排序、最长的顺子、求最多可以派出多少支团队）

题目描述运维工程师采集到某产品现网运行一天产生的日志N条,现需根据日志时间按时间先后顺序对日志进行排序。日志时间格式为:H：M：S.NH表示小时(0-23),
YF-SOD·2024-02-05 23:22

python要学多久才入门,学python最快要多久

假设是完全自己来学Python，加上零基础接触Python的前提之下，根据每位同学的理解和学习能力的差异，通常来讲需要6个月到1年左右的时间python自动化运维工资。
2301_81900386·2024-02-05 22:10

在线Cron表达式生成器：灵活定义定时任务的得力助手

通过这个生成器,您可以在线生成任务调度比如Quartz的Cron表达式,对QuartzCron表达式的可视化双向解析和生成.https://www.btool.cn/crontab-generator在自动化运维与任务调度中
yunmoon01·2024-02-05 22:39

运维监控之MySQL死锁查询及监控

死锁是指两个或两个以上的事务在执行过程中，因争夺资源而造成的一种相互等待的现象，若无外力作用，它们都将无法推进下去，此时称系统处于死锁状态或系统产生了死锁。为了监控MySQL的死锁情况，可以使用以下方法：使用showengineInnoDBstatus命令这是最常用的方法，可以帮忙获取InnoDB存储引擎的状态信息，其中包括有关死锁的详细信息。mysql>showengineInnoDBstatu
运维监控PIGOSS·2024-02-05 21:45

软件架构设计

一、考点分布软件架构的概念（※※※）基于架构的软件开发（※※※※）软件架构风格（※※※※※）特定领域软件架构（※※※）软件质量属性（※※※※※）软件架构评估（※※※※）软件产品（※※※）构件与中间件技术
一心猿·2024-02-05 21:04

消息中间件之RocketMQ源码分析(五)

消费进度保存机制消费者启动时会同时启动位点管理器，RocketMQ设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时，位点由客户端提交给Broker保存.广播消费时，位点保存在消费者本地磁盘上OffsetStore接口核心方法voidload():加载位点信息voidupdateOffset():更新缓存位点信息longreadOffset():读取本地位点信息voidpersistAl
coffee_babe·2024-02-05 20:57

Scrapy发送邮件 报错 builtins.AttributeError: 'NoneType' object has no attribute 'bio_read'

应用场景：在爬虫关闭或者爬虫空闲时可以通过发送邮件的提醒，通过twisted的非阻塞IO实现，可以直接写在spider中，也可以写在中间件或者扩展中，看你具体的需求。
朝畫夕拾·2024-02-05 20:20

Iptables状态跟踪（conntrack）相关命令与参数

链接:conntrack最大数量链接:linux路由跟踪表nf_conntrack数据结构参数简介链接:Iptables状态跟踪机制介绍和优化探讨链接:运维排查篇|Linux连接跟踪表满了怎么处理链接:
石小千·2024-02-05 19:07

聊聊 Http 服务化改造实践

粉丝福利，免费领取C/C++开发学习资料包、技术视频/项目代码，1000道大厂面试题，内容包括（C++基础，网络编程，数据库，中间件，后端开发/音视频开发/Qt开发/游戏开发/Linuxn内核等进阶学习资料和最佳学习路线
程序员老舅·2024-02-05 19:55

想成为机器学习信息工厂，企业需要从精益制造学到这六个精髓

98%的IT领导者认为，机器学习运维(MLOps)将为自己的公司带来决定性的竞争优势。但是，只有6%的公司认为其机器学习运维(MLOps)功能已经很成熟，并且可以从中受益。
鹤子青云上·2024-02-05 19:52

C++并发编程：如何编写多线程代码

粉丝福利，免费领取C/C++开发学习资料包、技术视频/项目代码，1000道大厂面试题，内容包括（C++基础，网络编程，数据库，中间件，后端开发/音视频开发/Qt开发/游戏开发/Linuxn内核等进阶学习资料和最佳学习路线
程序员老舅·2024-02-05 19:54

MongoDB 中的分布式集群架构

粉丝福利，免费领取C/C++开发学习资料包、技术视频/项目代码，1000道大厂面试题，内容包括（C++基础，网络编程，数据库，中间件，后端开发/音视频开发/Qt开发/游戏开发/Linuxn内核等进阶学习资料和最佳学习路线
程序员老舅·2024-02-05 19:22

如何使用Docker部署Nginx容器实现无公网ip远程访问本地服务

对于运维人员和开发者来说，能够通过公网远程访问内部的服务和应用，能够极大地提升工作效率和便利性。本文将介绍如何利用Ubun
FGGIT·2024-02-05 19:45

Ubuntu使用Docker部署Nginx并结合内网穿透实现公网远程访问

对于运维人员和开发者来说，能够通过公网远程访问内部的服务和应用，能够极大地提升工作效率和便利性。本文将介绍如何利用Ubun
江城开朗的豌豆·2024-02-05 19:12

RocketMQ消息队列（一）—— 基本概念和消息类型

  RocketMQ是一个来自阿里巴巴的分布式消息中间件，于2012年开源，并在2017年正式成为Apache顶级项目。
断剑zou天涯·2024-02-05 18:05

面向小白的Palworld幻兽帕鲁私有服务器保姆级部署教程

欢迎访问极客运维博客：https://www.itwk.cc/post/1045.html环境准备一台电脑
爱写代码的小白.·2024-02-05 18:27

Covalent （CQT）：构建全新链上协议收入体系，致力于财务透明

Covalent的价值累积机制在核心层面上，CovalentNetwork（CQT）扮演了双重角色，它既是一个去中心化的物理基础设施，又是一个中间件
区块链蓝海·2024-02-05 17:17

day 5 远程连接

联系方式:网站运维QQ交流群：Linux
Linux_淡忘·2024-02-05 17:29

百台旧PC重获新生！麒麟信安云助力海南省社会保险中心实现高效云办公

但长久以来，海南省社会保险中心存在办公PC陈旧、性能体验不佳、运维困难、国产化办公环境下软硬件不适配等诸多问题，给该单位办公效率造成严重影响。
麒麟信安·2024-02-05 16:11

百台旧PC重获新生！麒麟信安云助力海南省社会保险中心实现高效云办公

但长久以来，海南省社会保险中心存在办公PC陈旧、性能体验不佳、运维困难、国产化办公环境下软硬件不适配等诸多问题，给该单位办公效率造成严重影响。
麒麟信安·2024-02-05 16:40

看完这篇，还不明白怎么让消息变的可靠你打我（RabbitMQ）

在我们开发中，随着业务的不断复杂和调用链路的不断增长，我们可能会慢慢引入越来越多的中间件来更好的服务于我们的系统，但是每样技术都是一把双刃剑，在提高我们系统性能的同时，我们也要想办法来减少它对系统带来稳定性的影响
whynot_0·2024-02-05 16:33

揭秘高效运维：如何用kubectl top命令实时监控K8s资源使用情况？

往期精彩:提升CKA考试胜算：一文带你全面了解RBAC权限控制！kubectltop是一个用于查看Kubernetes集群中资源使用情况的命令。它可以显示节点或Pod的CPU、内存和存储的使用情况。该命令要求正确配置MetricsServer并在服务器上工作。什么是MetricsServerMetricsServer是Kubernetes内置自动缩放管道的可扩展、高效的容器资源指标来源。Metri
didiplus·2024-02-05 16:14

2020-04-02

我又觉得也就那么一回事，不过如此成功之后我就有了新的想法，弄个网站，就去学了东西，后来渐渐了解到，建网站是一个团队的工作，后来我发现，我似乎，不需要一个团队，我一个人就可以完成一条龙的工作，从设计-＞前端-＞后台-＞运维
老乌尘·2024-02-05 16:21

MySQL如何实时同步数据到ES？试试阿里开源的Canal

前言前几天在网上冲浪的时候发现了一个比较成熟的开源中间件——Canal。在了解了它的工作原理和使用场景后，顿时产生了浓厚的兴趣。今天，就让我们跟随我的脚步，一起来揭开它神秘的面纱吧。
漫走云雾·2024-02-05 15:28

运维监控系列（1）：在Linux中运用Docker部署Prometheus+Grafana+Alertmanager企业微信机器人以及邮箱的推送。（全面部署）

一.前言这一章节主要是针对那些有Linux以及有Docker基础的小伙伴做的一个比较全面的部署，如果有不会Linux和docker的小伙伴可以先去学一下。花个1周的时间把Linux和docker入门就可以了，不需要精通。部署的步骤也比较简单，我搜索了一些文章，基本都是没有一个全面的部署，要么就是部署了前面监控部分，没有后面的Alertmanager推送机器人或者邮箱。要么就是在Linux中部署，而
好东西要分享啊·2024-02-05 15:55

Kubernetes 访问外部服务

文章目录一、概述1.K8S访问外部服务1.1.ExternalName方式1.2.Endpoint方式2.ExternalIP二、基础中间件1.PostgreSQL1.1.创建Endpoint1.2.创建镜像
IoTHub - 物联网开源技术社区·2024-02-05 15:25

超维机器人年终总结大事记回顾

这一年，我们自身经历了诸多里程碑式的事件和突破，同时也为工业安全生产运维带来了全新的可能性。让我们一起回顾过去一年，探寻超维机器人的年度大事，见证超维机器人发展的新篇章。2023年4月超维
超维机器人·2024-02-05 15:12

云计算时代操作系统Kubernetes之安全（四）

对于开发和运维人员来说，我们的主要职责就是管理Kubernetes平台上的对象和资源，因此选择什么样的工具和具体要解决的问题有直接的关系，理解有哪些
攀师傅·2024-02-05 15:44

『运维备忘录』之 Systemd 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-05 14:28

『运维备忘录』之 Cron 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-05 14:58

【运维备忘录】之 Curl 命令

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-05 14:57

docker - 常用命令详解

根据自己的理解，总的来说分为以下几种：容器生命周期管理—docker[run|start|stop|restart|kill|rm|pause|unpause]容器操作运维—docker[ps|inspect
小柴林·2024-02-05 14:57

『运维备忘录』之 Vim 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-05 13:25

使用 IntelliJ IDEA 配合 Docker 对 Weblogic 中间件进行远程调试

使用idea对jar包远程调试：打开一个springboot的项目进行远程调试设置：运行：其实我不太明白远程调试的意义，本地直接debug不好嘛。。。点击debug的按钮，打断点测试：跑到断点处：远程debug即对远程部署的内容进行debug，例如我们部署的项目在线上出现问题了，而我们又不知道具体是哪里出现问题，我们就可以使用远程debug进行排查问题。这里在idea中使用的是localhost，
carrot11223·2024-02-05 12:31

SpringCloud-消息驱动(Stream、生产者、消费者)

SpringCloud消息驱动StreamSpringCloudStream，的诞生是为了解决各种消息中间件之间的兼容性问题，学习过消息中间件的同学都知道现在市面上流行的消息中间件有ActiveMQ、RabbitMQ
JolyouLu·2024-02-05 12:30

spring boot打完jar包后使用命令行启动，提示xxx.jar 中没有主清单属性

在对springBoot接口中间件开发完毕后，本地启动没有任何问题，在使用package命令打包也没异常，打完包后使用命令行：java-jarxxx.jar启动发现报异常：xxx.jar中没有主清单属性
智商三岁半i·2024-02-05 12:35

安装Ubuntu遇到的问题和一些优化ubuntu使用的总结

序言安装缘由：安装了ubuntu后，需要把这个系统当做我日常运维和运维开发测试的基础系统，所以很多东西都需要安装和优化。仅此记录下来。
全糖去冰吃不了苦·2024-02-05 11:43

MySQL- 运维-分库分表-Mycat

一、Mycat概述1、安装2、概念介绍二、Mycat入门启动服务三、Mycat配置1、schema.xml2、rule.xml3、server.xml四、Mycat分片1、垂直分库2、水平分表五、Mycat管理及监控1、Mycat原理2、Mycat管理工具（1）、命令行（2）、Mycat-eye
rch041126·2024-02-05 11:59

nuxt.js之serverMiddleware的使用（踩坑）之路

zh.nuxtjs.org/api/configuration-servermiddleware使用serverMiddleware的目的：使用过express，koa等node框架的小伙伴相信都会知道中间件的作用
我的昵称好听吗·2024-02-05 11:48

初始数据库

数据库系统和文件系统的区别文件系统数据库系统对比区别优缺点总结常见数据库关系型数据库ACID原则关系型数据库的优缺点优点缺点非关系型数据库存储方式常见的非关系型数据库非关系型数据库的优缺点优点缺点DBMS支持的数据模型层次模型网状模型关系模型面向对象模型数据模型程序员对数据库的要求运维对数据库的要求数据库运维总结华子文案什么是数据库数据
^～^前行者～～～·2024-02-05 11:55

ES高可用架构涉及常用功能整理

数据分片按ip打散2.2.2数据分片机架感知2.2.3强制要求数据分片机架感知2.2.4写入线程池优化2.2.5分片balance优化2.2.6限流控制器优化3.es常用命令3.1常用基础命令3.2常用运维命令
李姓门徒·2024-02-05 11:18

一文说清：软件从开发到交付全过程【无雀数字化】

在软件上线应用中，需求调研、需求确定、软件实施、正式上线、软件试运行和软件运维这六个阶段至关重要。接下来就由无雀科技为大家详细介绍这大阶段，帮助您更好地了解软件上线应用的全过程。
aSuo_bjyx·2024-02-05 10:12

初始Ansible自动化运维工具之playbook剧本编写

一、playbook的相关知识1.1playbook的简介playbook是一个不同于使用Ansible命令行执行方式的模式，其功能更强大灵活。简单来说，playbook是一个非常简单的配置管理和多主机部署系统，不同于任何已经存在的模式，可作为一个适合部署复杂应用程序的基础。Playbook可以定制配置，可以按照指定的操作步骤有序执行，支持同步和异步方式。我们完成一个任务，例如安装部署一个http
为什么老是名字被占用·2024-02-05 10:33

安全基础~通用漏洞4

文章目录知识补充XSS跨站脚本**原理****攻击类型**XSS-后台植入Cookie&表单劫持XSS-Flash钓鱼配合MSF捆绑上线ctfshowXSS靶场练习知识补充SQL注入小迪讲解文件上传小迪讲解文件上传中间件解析
`流年づ·2024-02-05 10:22

ShardingSphere 5.x 系列【3】分库分表中间件技术选型

有道无术，术尚可求，有术无道，止于术。本系列SpringBoot版本3.1.0本系列ShardingSphere版本5.4.0源码地址：https://gitee.com/pearl-organization/study-sharding-sphere-demo文章目录1.前言2.MyCat3.ShardingSphere4.Dble5.Vitess6.大厂开源6.1Cobar6.2Atlas6.
云烟成雨TD·2024-02-05 09:40

Django restframwork中使用分页及实现自定义分页

缘由是之前在开发运维平台的时候，没有正确使用分页功能，导致自定义的分页在不同情况下，有的不能用，有的能用
菩提老鹰·2024-02-05 09:24

Redis-缓存问题及解决方案

本文已收录于专栏《中间件合集》目录概念说明缓存问题缓存击穿问题描述解决方案缓存穿透问题描述解决方案缓存雪崩问题描述解决方案提高缓存可用性过期时间配置熔断降级总结提升概念说明  Redis是一个开源的内存数据库
武梓龙_Wzill·2024-02-05 08:11

自学Python第二十二天- Django框架(六) django的实用插件：cron、APScheduler

django-crontab和django-cron有时候需要django在后台不断的执行一个任务，简单的可以通过中间件来实现，但是中间件是根据请求触发的。如果需要定时执行任务，则需要使用到一些插件。
runsong911·2024-02-05 08:06
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他