运维;大数据

19 压测和常用的接口优化方案

测试还要做测试报告，出具了测试报告给到运维团队才能上线。压测的测试报告主要有以下几个方面:1.响应时间2.不同的线程压测的错误率,也叫失败率3.吞吐率(TPS)4压测情况下服务器的其他性能指标。
40岁的系统架构师·2025-01-31 23:54

Python 运维（二）：Python 虚拟环境

本文收录于《Python入门核心技术》专栏，专栏总目录：点这里，订阅后可阅读专栏内所有文章。大家好，我是水滴~~本文介绍了如何创建和使用Python虚拟环境，以及如何管理项目的依赖库。通过合理使用虚拟环境，你可以更好地组织和管理Python项目，提高开发效率和代码可靠性。文章内容包含大量的示例代码，希望能够帮助新手同学快速入门。文章目录1.什么是Python虚拟环境？2.创建Python虚拟环境2
水滴技术·2025-01-31 23:53

大数据“超能力”：数据安全和隐私该如何保障？

一人人都喜欢超级英雄。不论是超人还是钢铁侠，又或者是小蜘蛛和绿巨人，几乎每一个超级英雄漫画及电影的粉丝，都曾为其不公遭遇打抱不平：“他们明明是在用超能力做好事，拯救人类的，为什么电影里的政府和平民会这么蠢，总对他们缺乏信任，满是提防。”这就是所谓的“叶公好龙”了，因为当你身边真出现了个能把卡车当皮球一样抛来抛去的人时，你的反应恐怕也好不到哪儿去，可能也巴不得有政府出面，逼他接受《超级英雄注册法案》
大数据在线·2025-01-31 22:44

数据库性能调优中的配置参数调整：提升系统效率的关键环节

数据库性能调优中的配置参数调整：提升系统效率的关键环节date:2025/1/31updated:2025/1/31author:cmdragonexcerpt:数据库的性能直接影响到应用程序的响应能力和用户体验，因此在日常运维中
·2025-01-31 21:31

运维小白必看！手把手教你公网远程访问内网Nginx的完整步骤

文章目录前言1.安装Docker2.使用Docker拉取Nginx镜像3.创建并启动Nginx容器4.本地连接测试5.公网远程访问本地Nginx5.1内网穿透工具安装5.2创建远程连接公网地址5.3使用固定公网地址远程访问前言作为开发人员，在日常的项目推进中，你是否遇到过这样的烦恼：需要频繁地从家或客户现场连接公司内部网络？或者有时候因为出差在外，无法及时调试和访问内网中的关键服务？别担心，今天我
web18285482512·2025-01-31 20:31

软件架构设计与模式之：DevOps与运维架构

DevOps的关键点DevOps的价值3.DevOps基本概念、术语及流程管理工程价值流动方法论模型职能团队能力圈景气文化工具链4.DevOps与运维架构DevOps与运维架构的区别DevOps实践与运维架构
AI天才研究院·2025-01-31 20:31

Python爬虫基础知识：从零开始的抓取艺术

在大数据时代，网络数据成为宝贵的资源，而Python爬虫则是获取这些数据的重要工具。
egzosn·2025-01-31 19:20

探索Oracle数据库的多租户特性：架构、优势与实践

在云计算和大数据时代，多租户架构成为数据库设计中的一个重要趋势。
2401_85812026·2025-01-31 18:12

「大数据」Kappa架构

Kappa架构是一种处理大数据的架构，它作为Lambda架构的替代方案出现。
吴维炜·2025-01-31 18:07

新零售社交电商系统小程序功能开发详细解析

现在的购物方式是越来越有趣了，新零售社交电商系统是互联网、大数据、人工智能的技术和咱们熟悉的传统零售深度结合后产生的。它整合线上线下渠道及数据，带来全方位、多渠道、个性化购物体验。
v.15889726201·2025-01-31 17:34

Docker学习笔记(全网最详细)

作为开发+运维之间的协作我们需要关心很多东西，这也是很多互联网公司都不得不面对的问题，特别是各种版本的迭代之后，不同版本环境的兼容，对运维人员都是考验.Docker之所以发展如此迅速，也是因为它对此给出了一个标准化的解决
Asher0509·2025-01-31 17:32

Spark性能调优

1、前言在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。
大数据侠客·2025-01-31 16:58

Python学习-九大数据类型整合，详细讲解

目录1.int(整型)2.float(浮点型)3.Bool(布尔类型)4.Str(字符串类型)5.None(空值)6.List(列表)7.Tuple(元组)8.Dict(字典)9.Set(集合)（字典，列表，元组，字符串知识点可能不全，可以参考本人之前发的博客进行学习，加油。）1.int(整型)特点和用途：1.可以表示正整数、负整数和零，没有小数部分。2.取值范围取决于您所使用的Python版本和
小伙儿.·2025-01-31 16:26

[碎碎念] 重启学习与博客之旅-我的每日计划

比如说，我最近对人工智能和大数据分析特别感兴趣，所以打算每天看点相关的专业书，或
言午coding·2025-01-31 16:56

Java 性能优化与新特性

Java学习资料Java学习资料Java学习资料一、引言Java作为一门广泛应用于企业级开发、移动应用、大数据等多个领域的编程语言，其性能和特性一直是开发者关注的重点。
来恩1003·2025-01-31 16:52

pandas读取大数据量的Excel文件

使用pandas快速读取百万行Excel数据的一种方法是使用pandas中的read_excel函数。可以使用以下代码读取Excel文件：importpandasaspddf=pd.read_excel('file_name')这个适合少量数据，如果一旦数据几十万或者上百万，那么程序就很慢有几种优化方法只读取需要的列：使用read_excel函数的usecols参数来指定需要读取的列。这可以减少读
兮知·2025-01-31 15:13

运维人故障定责甩锅话语指南-------收藏

首先声明，本文章只在针对故障中那些不愿承担责任，而把锅甩给运维部门的人，如果讨论故障的都是君子，那么本文并不建议使用，切记。
辣香牛肉面·2025-01-31 11:41

揭秘MySQL中基于负载的自适应缓存资源调度策略——让数据库响应更敏捷

对于像MySQL这样的关系型数据库管理系统（RDBMS），如何有效地管理和分配缓存资源，以确保系统能够在高负载情况下依然保持高效运行，成为了开发者和运维人员共同关注的话题。
墨夶·2025-01-31 11:40

林子雨《大数据技术原理与应用》第五讲——NoSQL数据库

林子雨《大数据技术原理与应用》第五讲——NoSQL数据库林子雨《大数据技术原理与应用》第五讲笔记NoSQL数据库特点灵活的可扩展性灵活的数据模型和云计算结合查询性能差未形成通用的行业标准维护更加复杂NoSQL
天才代号23·2025-01-31 10:06

OLAP引擎比较

doris是一个OLAP数据库，支持对大数据的复杂查询，延迟为秒级。doris比sparksql快，主要原因在于针对场景不同导致的架构不同。
小手追梦·2025-01-31 10:30

Linux 上 MySQL 8.0 的备份与恢复实战指南

在数据库运维过程中，备份与恢复是保障数据安全的重要手段。MySQL8.0在Linux环境中提供了多种备份和恢复方案，包括逻辑备份和物理备份。
云水一方·2025-01-31 09:49

使用Ansible进行Red Hat Linux自动化运维

在现代IT运维中，自动化是提高效率、减少人为错误和增强可维护性的关键。Ansible作为一款简单但强大的自动化工具，已被广泛应用于系统配置管理、应用部署以及任务自动化等场景。什么是Ansible？
云水一方·2025-01-31 09:49

大数据组件ClickHouse介绍（场景、优劣势、性能）

大数据组件ClickHouse介绍简介使用场景优势与劣势优势劣势性能单个查询吞吐量处理短查询的延时时间处理大量短查询数据写入性能查询性能简介clickhouse是一个高性能的列式存储分析数据库管理系统，
坚持是一种态度·2025-01-31 09:46

DB2-Db2StreamingChangeEventSource

在大数据和实时数据处理场景中，CDC可以用来同步数据到其他系统，比如数据仓库、数据湖或者流处理平台如ApacheKafka。文章目录前言一、核心功能
DataLu·2025-01-31 09:15

MySQL实战教程：从小白到大神的进阶之路！

发展历程2.1MySQL的起源2.2MySQL的早期发展2.3MySQL的成熟与普及2.4MySQL的商业化与收购2.5MySQL的持续创新3、MySQL应用场景3.1Web应用程序3.2企业级应用3.3大数据分析
奔跑吧邓邓子·2025-01-31 08:08

【详细讲解】hive优化

1、开启本地模式大多数的HadoopJob是需要Hadoop提供的完整的可扩展性来处理大数据集的。不过，有时Hive的输入数据量是非常小的。
songqq27·2025-01-31 06:56

大规模分布式存储（1）-- 概念、挑战和分类

随着数据的激增，我们已经进入到了一个数据时代，无论是云计算，大数据还是互联网公司的各种应用，其后台存储平台的目标都是要构建低成本、高性能、可扩展、易用的分布式存储系统。
叹了口丶气·2025-01-31 06:23

大数据分析案例-基于逻辑回归算法构建抑郁非抑郁推文识别模型

如果文章对你有帮助的话，欢迎评论点赞收藏加关注+喜欢大数据分析项目的小伙伴，希望可以多多支持该系列的其他文章大数据分析案例合集
艾派森·2025-01-31 01:45

move移动语义详解

move移动语义移动语义是C++11引入的一种机制，用于提高程序的性能和资源管理效率，特别是在涉及大数据对象的场景下。移动语义通过转移资源所有权，而不是复制资源，减少了不必要的拷贝操作。
Say-hai·2025-01-30 21:45

大数据毕业设计hadoop+spark+hive豆瓣图书数据分析可视化大屏 豆瓣图书爬虫 图书推荐系统

系统总体目标基于Spark的个性化书籍推荐系统是一种基于大数据技术的智能推荐系统，它可以根据用户的历史行为和偏好，为用户提供个性化的书籍推荐。
qq_79856539·2025-01-30 20:03

企业IT数字化运维运营平台（总体架构、总体蓝图）建设方案

这份文件是关于企业IT数字化运维运营平台的建设方案，主要介绍了业务背景、解决方案、成功应用案例等核心内容。
公众号：优享智库·2025-01-30 19:57

企业IT数字化运维运营平台（总体架构、总体蓝图）建设方案PPT

原文《企业IT数字化运维运营平台（总体架构、总体蓝图）建设方案》PPT格式，主要从构建IT一体化运营能力、构建统一IT运营管理体系、建立统一的应用系统监控视图、构建智能化、主动式的IT监控与运维能力进行建设一套企业
公众号：优享智库·2025-01-30 19:57

企业数字化规划蓝图、企业数字化运营分析管理大数据平台建设方案

**企业数字化规划蓝图及运营分析管理大数据平台建设方案****一、企业数字化规划蓝图**1.**数字化目标设定**企业在规划数字化进程时，首先需要明确数字化目标。
公众号：优享智库·2025-01-30 19:57

使用Flink进行流式图处理

使用Flink进行流式图处理1.背景介绍1.1大数据时代的到来随着互联网、物联网和移动互联网的快速发展,数据呈现出爆炸式增长。根据IDC的预测,到2025年,全球数据量将达到175ZB。
AI天才研究院·2025-01-30 19:26

PostgreSQL 常用运维SQL整理

一、查询并杀会话--查询会话selectpid,usename,client_addr,client_port,query_start,query,wait_eventfrompg_stat_activity;--杀会话selectpg_terminate_backend('pid号');--使用如下命令自动生成杀会话语句selectdatid,datname,pid,usesysid,usena
尚雷_TechTalk01·2025-01-30 19:55

python与excel整合全教程

Python与Excel的整合非常强大，尤其适合处理大数据、自动化表格操作以及进行高级数据分析。
刘同学Python学习日记·2025-01-30 19:53

【PostgreSQL 】运维篇——PostgreSQL 高可用性架构

数据库的可用性和可靠性是至关重要的，随着业务需求的增长，系统必须能够持续运行，并在发生故障时迅速恢复。高可用性（HA）解决方案确保数据库系统能够在出现硬件故障、软件故障或其他意外情况下保持可用性，从而最小化停机时间和数据丢失。PostgreSQL提供了多种高可用性解决方案，包括主从复制、流复制和故障转移。这些解决方案可以帮助企业实现数据的冗余备份、负载均衡和快速恢复。以下是对这些解决方案的详细讨论
AI人H哥会Java·2025-01-30 18:46

云原生架构的核心原则：微服务、容器与DevOps

它打破了传统架构的诸多束缚，让应用开发、部署与运维变得更加灵活、高效，极大提升了企业应对
zhousenshan·2025-01-30 18:15

网络工程师：华为设备BGP命令大全

掌握华为设备的BGP命令对于网络工程师至关重要，因为这不仅涉及日常的网络运维，还影响到网络的整体性能和安全性。本文将详细介绍华为设备中的BGP命令，
wljslmz·2025-01-30 17:33

分层架构设计概念

这样做可以更好提高系统可扩展性,但同时也会增加系统整体运维的难度springBoot技术简介和特性  SpringBoot是Java软件开发框架（很多人现在把它理解为一个脚手架），其设计目的是用来简化Spring
祈遇&·2025-01-30 16:54

如何写一份合格的大数据简历（附简历模板）教程

【编辑/下载】：大数据开发简历范文二、简历结构基本信息：包含姓名、性别、联系方式（电话、邮箱）、求职意向。
itLeeyw573·2025-01-30 15:46

MongoDB 大俗大雅，上来问分片真三俗 -- 4 分什么分

开头还是介绍一下群，如果感兴趣PolarDB,MongoDB,MySQL,PostgreSQL,Redis,OceanBase,SqlServer等有问题，有需求都可以加群群内有各大数据库行业大咖，可以解决你的问题
Austindatabases·2025-01-30 11:48

大数据技术在数据安全治理中的应用

摘要面对新形势下的数据安全治理挑战，顺应数据安全领域的技术发展趋势，针对大型国企在数据安全治理实际应用中突出的关键权限人员识别问题，提出了一种基于图算法的关键权限人员识别技术。该技术可以发现系统中潜在的权限影响因素，并可从多个角度衡量不同含义的权重影响力，识别结果可解释性强。针对数据安全治理中的用户与实体行为异常检测问题，提出一种基于生成对抗网络的用户与实体行为异常检测方法，实验结果表明，所提方法
罗思付之技术屋·2025-01-30 11:17

阿里巴巴大数据系统体系架构

数据应用层：这是最顶层，面向不同的用户群体提供服务，包括对内（公司内部使用）、对平台（平台用户）、对商家（商家使用）、对公众（普通消费者）。数据服务与基础工具层：这一层提供了一些基础服务和工具，例如：OneService：可能是一种服务或工具，用于统一数据服务。TDDL+MySQL：TDDL是淘宝分布式数据层的缩写，与MySQL结合使用，提供数据库服务。HBase：一个分布式列存储系统，适合于存储
大连赵哥·2025-01-30 09:34

Django SimpleUI运维管理系统搭建教程

DjangoSimpleUI运维管理系统搭建教程本教程将详细介绍如何从零搭建一个基于DjangoSimpleUI的运维管理系统。
ivwdcwso·2025-01-30 06:07

python 分布式集群_Python搭建Spark分布式集群环境

前言ApacheSpark是一个新兴的大数据处理通用引擎，提供了分布式的内存抽象。Spark最大的特点就是快，可比HadoopMapReduce的处理速度快100倍。
小国阁下·2025-01-30 05:32

【日常运维】mongoDB学习-入门介绍-其强大之处以及用武之地

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2025-01-30 03:21

MongoDB常见的运维工具总结介绍

MongoDB提供了一些强大的运维工具，帮助管理员进行数据库监控、备份、恢复、性能优化等操作。
yuanpan·2025-01-30 03:47

【硬刚大数据】2021年从零到大数据专家之Hbase八股文

本文是对《【硬刚大数据之学习路线篇】2021年从零到大数据专家的学习指南(全面升级版)》的面试部分补充。硬刚大数据系列文章链接：2021年从零到大数据专家的学习指南(全面升级版)
王知无(import_bigdata)·2025-01-30 01:35

史上最强！Spring Boot 3.3 高效批量插入万级数据的多种方案

在大数据处理场景下，如何高效地将大量数据插入数据库是一个重要课题。
m0_74825074·2025-01-30 01:34
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他