文件系统云存储hdfs运维

2024年最新2024整理 iptables防火墙学习笔记大全_modepro iptables(1)，2024年最新含BATJM大厂

为了做好运维面试路上的助攻手，特整理了上百道【运维技术栈面试题集锦】，让你面试不慌心不跳，高薪offer怀里抱！
2024spring·2024-09-08 04:07

2024年最新2024整理 iptables防火墙学习笔记大全_modepro iptables，2024年最新最新Linux运维高级面试题汇总

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以点击这里获取！一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！–flush-F[chain]Deleteall
2024云技术·2024-09-08 04:37

Docker的前世今生

4.Docker相对于LXC所做的重大提升：容器管理工具、分层文件系统和镜像机制一、Docker开源项目背景Docker是基于Go语言实现的开源容器项目，诞生于2013年年初，最
weixin_30267697·2024-09-08 04:03

Linux 磁盘分区及挂载

目录查看分区情况查看磁盘查看哪块磁盘未加载和分区对未进行挂载的磁盘进行分区内核重新读取分区表再查看磁盘分区情况创建文件系统及格式化分区查看已经分区的磁盘文件系统格式化分区永久挂载至指定目录判断挂载是否正确查看文件系统
go_forever_happy·2024-09-08 02:53

mysql 8.0 高可用_MySQL 8.0 MGR（组复制）高可用VIP切换脚本

hcymysqlMySQL8.0MGR(组复制)高可用VIP切换脚本简介：MGR(组复制)官方推荐用MySQLrouter中间件去做MGR高可用故障转移，但其多过了一层网络，性能会下降，并且需要额外维护一套中间件，运维成本过高
错过整个世界·2024-09-08 00:11

项目遇到的难点、印象深刻点总结

1、更快地创建一个服务且免运维：大量的Node.js服务，创建服务，
橙秋筱·2024-09-07 21:15

Error: java.io.IOException: java.lang.reflect.InvocationTargetException

java.lang.reflect.InvocationTargetException；往下继续看log，发现是car3g_prpcitemkind（文件名）显示prpcitemkind分区数据不在了，这种通常发生在抽数的时候，抽数脚本最一开始有没有进行-rm一些hdfs
lics10·2024-09-07 20:12

Python 操作大数据使用 Hadoop

参考：https://blog.csdn.net/wuShiJingZuo/article/details/135620018fromhdfsimportInsecureClienthdfs_client
静听山水·2024-09-07 17:47

linux 查看进程使用哪些文件

被打开的文件可以是1.普通的文件，2.目录3.网络文件系统的文件，4.字符设备文件5.
nit小星星·2024-09-07 14:21

JavaEE(3)

业务分析市场提出需求设计编码测试运维项目搭建步骤1.搭建后端项目2.登录向后端发送请求使用axios发送异步请求在vue项目中安装axios在终端输入npminstallaxios安装更换npm镜像源，
无柳丶先生·2024-09-07 12:14

CC00281.CloudKubernetes——|KuberNetes&运维.V03|——|EFK架构.v03|部署Fluentd|

一、部署Fluentd###---创建Fluentd-configmap.yaml文件~~~创建Fluentd-configmap文件[root@k8s-master01EFK]#catfluentd-configmap.yamlkind:ConfigMapapiVersion:v1metadata:name:fluentd-es-config-v0.2.0namespace:public-ser
yanqi_vip·2024-09-07 11:13

df 磁盘整体使用量 /du 查看目录的大小

命令格式：df[option]-h以容易理解的格式(给人看的格式)输出文件系统分区使用情况，例如10kB、10MB、10GB等。-k以kB为单位输出文件系统分区使用情况。
数据萌新·2024-09-07 11:28

linux自动化运维之ansible实战

ansible基础介绍优点-相比于saltatack和puppet，没有客户端，更轻量级-只是一个工具，可以很容易实现分布式拓展-更强的远程执行命令特点-模块化-支持自定义模块，可以用任何语言编写模块-基于python语言实现-部署简单，基于python和ssh，agentless，无需代理-安全安装yum安装首先安装epel源：yuminstallepel-release-y下载ansible：
浓黑的daidai·2024-09-07 11:05

DataX用hdfsreader导入或导出hive数据

DataX读取Hive数据的话，其本身只提供了hdfsreader，因为hive一来不是个数据库，它只是hdfs数据的结构化管理工具，所以datax默认没有自带hive的reader，因此默认只能直接用
尘世壹俗人·2024-09-07 10:02

网络安全（黑客）自学

一、什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
白帽子凯哥·2024-09-07 09:21

自学黑客（网络安全）

网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
L世界凌乱了·2024-09-07 05:52

【Hadoop】- MapReduce & YARN 初体验[9]

目录提交MapReduce程序至YARN运行1、提交wordcount示例程序1.1、先准备words.txt文件上传到hdfs，文件内容如下：1.2、在hdfs中创建两个文件夹，分别为/input、/
星星法术嗲人·2024-09-07 04:21

oracle 扩容undo,【案例】Oracle RAC数据库undo使用率较高的解决思路办法

天萃荷净Oracle研究中心案例分析：运维DBA反映Oracle数据库undo使用较大，结合案例分析undo使用问题。
南门居士-杜锦刚·2024-09-07 01:33

Python psutil模块

用Python来编写脚本简化日常的运维工作是Python的一个重要用途。在Linux下，有许多系统命令可以让我们时刻监控系统运行的状态，如ps，top，free等等。
Python 学习者·2024-09-07 01:32

NAS免费用，鲁大师 AiNAS正式发布，「专业版」年卡仅需264元

全新的鲁大师AiNAS将持续满足现如今大众对于数字化生活的全新需求，将“云存储”的便捷与NAS的大容量、高私密性等特点相结合，并添加AI功能，在解决传统NAS设备硬件贵、调试难等问题的同时，探索全新的云数据生产力体验
TMT星球·2024-09-07 00:27

流程行业智能工厂系统集成总体解决方案：总体架构、SCADA厂务监控、MES、MON、EMS、数字孪生

SCADA厂务监控系统SCADA系统概述及功能数据采集与传输技术设备监控与报警机制能源管理与优化策略MES生产执行系统MES系统概念及作用生产计划与调度管理生产过程监控与追溯质量管理与控制策略MON设备运维管理系统
数字化建设方案·2024-09-06 20:05

如何搭建一个渲染农场

搭建一个渲染农场是一个复杂的事情，要考虑很多因素，本文将详细介绍如何搭建一个基本的渲染农场，包括前期规划、硬件选择、软件配置、网络设置、运维管理等方面。
炫云云渲染·2024-09-06 20:01

第04课：基于 Redis 的分布式缓存实现及加固策略

之后，分析集群所存在的几种可靠性问题并给出解决方案，最后，介绍一个集群运维软件的实现方案。1.Redis-Cluster搭建本节将介绍基于Redis和Lettuce搭建一个分布式缓存集群的方法。
Jin_Kwok·2024-09-06 18:13

多种model serving 的调研比较

image.pnggithubofficesite框架语言依赖项服务端开发语言客户端调用语言是否支持restful支持算法是否支持hdfs大规模是否支持同时部署多个模型服务是否支持模型切换是否支持模型跟踪是否支持
Helen_Cat·2024-09-06 18:35

ansible实战自动化运维项目

在实际生产环境中，Ansible可以帮助运维团队高效地管理服务器、应用和服务。以下是一个详细的Ansible自动化运维项目的生产实际案例，包括代码和详细讲解。
清风 001·2024-09-06 18:11

/var/lib/docker/overlay2 占用很大，清理Docker占用的磁盘空间

上图中看到的overlay分区是Docker的虚拟文件系统，其真实的文件系统是/dev/vda1。所以我们要找到是什么原因大量占据了/dev/vda1。一般有两种情况。
@小匠·2024-09-06 17:36

基于Hadoop的学习行为数据云存储平台的设计与实现

基于Hadoop的学习行为数据云存储平台的设计与实现DesignandImplementationofaHadoop-BasedLearningBehavioralDataCloudStoragePlatform
usp1994·2024-09-06 16:03

python自动化运维项目实战_全网稀缺的Python/Django/Ansible Playbook自动化运维项目实战视频课程...

配置文件properties比yml优先级高SpringBoot使用一个全句的配置文件，配置文件名是固定的；application.propertiesapplication.yml配置文件的作用：修改SpringBoot自动配置的默认值，SpringBoot在底层都给我们自动配置好了。YAML，是/不是一个标记语言标记语言：以前的配置文件：xxx.xmlyaml：以数据为中心，比json、xml
weixin_39977642·2024-09-06 14:16

ansible自动化运维

1、ansble介绍ansble为一款批量化处理系统配置的服务，对批量化系统部署、批量程序部署、批量运行命令、批量修改服务、批量安装软件包、批量修改配置等诸多功能。ansible基于SSH架构，含有丰富的模块，支持win、路由器、交换机远程操作。查看playbook的网址：https://galaxy.ansible.com2、ansble部署环境准备ansible：192.168.4.10nod
芷阳99·2024-09-06 13:11

能源交通行业ITSM案例分析报告

然而，长期以来，该行业内的信息中心普遍面临“重建设轻运维”的问题，即在基础设施建设上的投入远大于后续的运维管理。
采和精灵·2024-09-06 13:39

分布式系统实战：什么是微服务架构？微服务架构与SOA架构的区别

越来越多的企业拥抱微服务，期望通过微服务的架构来解决大型项目的管理与运维。那么什么是微服务？微服务架构与传统的SOA架构有什么区别？何时应该采用微服务架构？如何构建微服务？
程序员小英·2024-09-06 13:07

ansible自动化运维项目

Ansible是一个基于Python开发的开源自动化运维工具，它通过其模块化的架构和强大的功能，实现了配置管理、批量系统配置、程序部署和运行命令等任务，旨在帮助运维工程师提高工作效能并减少重复性劳动。
不会代码的小林·2024-09-06 13:36

ansible自动化运维项目

在MySQL中创建数据库和表是数据库管理的基础步骤，它们构成了数据存储和操作的基础结构。下面，我将详细介绍如何在MySQL中创建数据库和表，包括创建数据库的基本语法、设计表的考虑因素、表的创建过程、数据类型和约束的使用等，力求内容详尽且不少于2000字。一、创建数据库在MySQL中，数据库是一个创建简单的操作，使用CREATEDATABASE语句即可完成。这个语句允许你指定数据库的名称，并可选地指
shiming8879·2024-09-06 13:35

视频监控系统选型：为何EasyCVR视频汇聚平台成为优选方案

1、强大的视频汇聚能力视频云存储Eas
EasyCVR·2024-09-06 13:35

使用Ansible进行自动化运维

引言简介自动化运维在现代IT基础架构管理中扮演着重要角色。通过自动化，我们可以提高效率、减少人为错误和加速部署流程。
weixin_58606202·2024-09-06 12:02

关于日志数据管理

熟悉数据中心运维的人都知道，日志数据是记录IT系统操作行为的重要数据，所有的硬件设备与软件执行的所有指令都会通过日志保留下来。企业针对日志数据的管理，目前的情况是怎么样的呢？1、缺少日志管理能力。
Aichris·2024-09-06 12:03

spark读取csv文件

测试spark读取本地和hdfs文件frompyspark.sqlimportSparkSessionspark=SparkSession.builder\.appName("ExamplePySparkScript
静听山水·2024-09-06 10:44

构建专业技能：MySQL数据备份策略的培训与实践

1.数据备份策略培训的重要性在数据库的日常运维中，数据备份策略的培训有助于：提升团队技能：确保团队成员
2401_85763803·2024-09-06 06:26

JuiceFS 社区版 v1.2 发布，新增企业级权限管理、平滑升级功能

JuiceFS是为云环境设计的分布式文件系统，支持超过10种元数据引擎和30种以上的数据存储引擎。
Juicedata·2024-09-06 01:24

hadoop-hdfs系统构成

2019独角兽企业重金招聘Python工程师标准>>>HDFS组成1)NameNode元数据2)DataNode存储文件内容block3)SecondaryNameNode合并NameNode与editsHDFS
weixin_33701564·2024-09-06 00:46

字节跳动10万节点HDFS集群多机房架构演进之路(1)

如何高效运维如此超大规模的集群要回答这些问题需要HDFS从多个方向迭代优化，例如DanceNN的上线、运维平台的建设等，本文不会介绍字节跳动HDFS所有的演进方案，而是聚焦在HDFS多机房架构的演进策略上
2401_84122782·2024-09-05 21:23

linux基础之目录结构

目录1.简介2.linux的目录结构分类3.详细目录介绍4.总结1.简介Linux是一个基于Unix的开源操作系统，其文件系统具有层次化的目录结构，这种结构以根目录/作为起点，向下展开成一个倒置的树状结构
甜航一直在·2024-09-05 18:29

网络安全（黑客）自学

一、什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
白帽子凯哥·2024-09-05 17:57

k8s - Volume 简介和HostPath的使用

Secret,configMap(之前的文章covered了)，hostPath,emptyDir等本文主要focusonhostPathHostPath的简介官方定义：hostPath卷能将主机节点文件系统上的文件或目录挂载
nvd11·2024-09-05 15:13

梧桐数据库（WuTongDB）：详解B树索引的原理和实现方法

B树索引的原理和实现方法**B树（BalancedTree）**是一种自平衡的树形数据结构，广泛应用于数据库和文件系统中，尤其用于实现索引。B树能够有效保持数据的有序性，支持高效的范围查询和等值查询。
鲁鲁517·2024-09-05 15:11

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。在实时数据处理、日志聚合、指标监控、事件驱动架构等场景下，Kafka有着广泛的应用。它的高性能、可扩展性以及丰富的功能使其成为了大数据领域中的重要工具之一。Kafka中发布订阅的对象是topic。用户可以为每类数据创建一个topic，把向
kuuuugua·2024-09-05 15:41

jenkins+docker实现可持续自动化部署springboot项目

目录一、前言二、微服务带来的挑战2.1微服务有哪些问题2.2微服务给运维带来的挑战三、可持续集成与交付概述3.1可持续集成与交付概念3.1.1持续集成3.1.2持续交付3.1.3可持续集成与交付核心理念
小码农叔叔·2024-09-05 14:37

Oracle日常运维命令

一、日常巡检命令1、检查Oracle实例状态SQL>setpages600lines600SQL>selectinstance_name,host_name,startup_time,status,database_statusfromv$instance;说明：“STATUS”表示Oracle当前的实例状态，必须为“OPEN”；“DATABASE_STATUS”表示Oracle当前数据库的状态，
一心只为学·2024-09-05 13:29

C# 中一个非常实用的类FileSystemWatcher，监视文件系统中文件或目录的更改

FileSystemWatcher类在C#中是一个非常实用的类，用于监视文件系统中文件或目录的更改，并可以触发事件来响应这些更改。这些更改包括文件或目录的创建、删除、更改以及重命名等。
AitTech·2024-09-05 10:06

零基础转行学网络安全怎么样？能找到什么样的工作？

零基础转行学习网络安全是完全可行的，但需要明确的是，网络安全是一个既广泛又深入的领域，包含了网络协议、系统安全、应用安全、密码学、渗透测试、漏洞挖掘、安全编程、安全运维等多个方面。。
爱吃小石榴16·2024-09-05 08:58
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他