文件系统云存储hdfs运维

QEMU-KVM虚拟化：存储

Raw是一种非常简单的格式，它将文件系统中的字节逐字节存储在文
昕友软件·2024-02-19 19:19

[嵌入式系统-26]：RT-Thread -13- 内核组件编程接口 - 文件系统

目录一、RT-Thread文件系统1.1概述1.2如何配置文件系统1.3支持哪些文件系统1.4不同文件系统的比较二、文件系统编程接口2.1概述2.2两种文件系统接口的比较三、POSIX文件操作函数3.1
文火冰糖的硅基工坊·2024-02-19 19:43

学习笔记-磁盘存储管理

2）磁盘分区磁盘在系统中使用都必须先进行分区，然后建立文件系统，才可以存储数据。分区也有助于更有效地使用磁盘空间。每一个分区在逻辑上都可以视为一个磁盘。3）高级格式化磁盘分区在作为系统使用之前还需
他҈姓҈林҈·2024-02-19 19:36

kerberos 合并keytab文件 ktutil

非交互式：printf"%b""rkt/root/keytab/hdfs.keytab\nrkt/root/keytab/hive.keytab\nwkt/root/keytab/merged.keytab
brandblue·2024-02-19 19:51

操作系统-环境搭建

Linux环境搭建网络设置ssh命令下载简介本文将搭建Linux虚拟机,并且使用主机在终端利用ssh命令去远程连接Linux虚拟机搭建Linux虚拟机软件:virtualBox(免费)文件:Linux映像文件系统
JACK SUBWAY·2024-02-19 19:21

【JavaEE】_文件与IO

目录1.文件概述1.1文件的概念1.2文件的存储1.3文件的分类1.4目录结构1.5文件操作1.5.1文件系统操作1.5.2文件内容操作2.Java文件系统操作2.1File类所处的包2.2构造方法2.3
_周游·2024-02-19 18:34

docker （五）-docker存储-数据持久化

存储方式volume卷卷存储在主机文件系统分配一块专有存储区域，由Docker（在Linux上）管理，并且与主机的核心功能隔离。非Docker进程不能修改文件系统的这一部分。
小关暗器·2024-02-19 18:02

MySQL定时备份并清理

日常运维会遇到数据库备份的场景或情况，使用以下脚本解决数据库备份问题建议在没有备份场景下也做好数据备份#!
Guozr7·2024-02-19 18:27

Linux系统中 uboot、内核与文件系统之间的关系

前言：最近正在学习Linux，总结了一下Linux系统中uboot、内核与文件系统之间的关系Linux初学者首先要搞清楚的三个文件:引导程序(bootoader):uboot.bin/uboot.imxLinux
玄奕子·2024-02-19 18:39

故障分析| Redis 故障诊断及常用运维命令—内存篇

作者：任仲禹爱可生DBA团队成员，擅长故障分析和性能优化，文章相关技术问题，欢迎大家一起讨论。本文来源：原创投稿*爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。本文目录：背景Redis内存消耗划分内存OOM会导致哪些问题？排查思路是否数据量太大？是否客户端输入缓冲区有问题？是否复制积压缓冲区有问题？是否客户端输出缓冲区有问题？实用命令模拟Redis压力相关命令常⽤Re
爱可生开源社区·2024-02-19 17:57

K8s进阶之路-Pod(创建过程)/Pause/Replicas

基于容器组管理容器（建议一个pod创建一个应用程序容器必须是紧耦合实例放在一起）pause容器：实现容器与容器之间的共享（在容器创建之前，底层都要先创建一个容器叫pause，用来实现对内的网络及ip、文件系统
是芸晗ya·2024-02-19 16:55

c# B树

B树是一种自平衡的树数据结构，通常用于数据库和文件系统等需要大量数据插入、删除和搜索操作的场景。在C#中实现B树可以帮助实现高效的数据存储和检索功能。
彭小彭~·2024-02-19 16:52

c# B+树

B+树是一种自平衡的树数据结构，通常用于数据库和文件系统等需要大量数据插入、删除和搜索操作的场景。与B树不同的是，B+树的内部节点不存储数据，只用作索引，所有的数据都存储在叶子节点上。
彭小彭~·2024-02-19 16:52

Apache DolphinScheduler数仓任务管理规范

得益于DS优秀的特性，在对数仓任务做运维和管理的时候，往往比较随意，或将所有任务节点写到一个工作流里，或将每个逻辑节点单独定义一个工作流，缺少与数仓建模对应的任务管理规范；这造成了数据管理困难和异常容错繁琐等痛点
DolphinScheduler社区·2024-02-19 16:16

基于HTML5的智慧机房三维可视化运维云平台

随着东数西算工程落地和新型算力网络体系构建，数据中心建设规模和业务总量不断增长，机房管理规模持续增长、网络复杂度不断加大、资源频繁变更迭代、能源成本日益增加，加上双碳目标的提出，如何通过智能化手段实现节能、运维能力升级成为行业发展共识
·2024-02-19 16:07

Apache DolphinScheduler数仓任务管理规范

得益于DS优秀的特性，在对数仓任务做运维和管理的时候，往往比较随意，或将所有任务节点写到一个工作流里，或将每个逻辑节点单独定义一个工作流，缺少与数仓建模对应的任务管理规范；这造成了数据管理困难和异常容错繁琐等痛点
·2024-02-19 16:01

Docker介绍

开发人员能利用docker开发和运行应用程序运维人员能利用docker部署和管理应用程序Docker的主要特点包括：环境一致性：Docker可以确保开发、测试和生产环境的一致性，解决了传统开发过程中的环境差异问题
小森( ﹡ˆoˆ﹡ )·2024-02-19 16:30

文件上传-第三方服务阿里云OSS

阿里云官网地址：对象存储OSS_云存储服务_企业数据管理_存储-阿里云阿里云对象存储OSS是一款海量、安全、低成本、高可靠的云存储服务，提供99.9
sunyunfei1994·2024-02-19 16:54

『运维备忘录』之 Zip 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-19 15:04

『运维备忘录』之 SSH 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等知识，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-19 15:04

『运维备忘录』之 APT 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-19 15:04

『运维备忘录』之 Ln 链接命令详解

运维人员不仅要熟悉操作系统、服务器、网络等知识，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。
流浪字节π·2024-02-19 15:16

从 13 个企业关心的问题看懂用云范式的改变

今天，容器和K8s已经成为应用研发运维的新标准，行业调研数据显示，2022年有64%的最终用户在生产环境中使用了K8s；2022年托管在云上的K8s集群增速达到了127%。
·2024-02-19 15:44

Mysql运维篇（四） Xtarbackup--备份与恢复练习

一路走来，所有遇到的人，帮助过我的、伤害过我的都是朋友，没有一个是敌人。如有侵权，请留言，我及时删除！前言xtrabackup是Percona公司CTOVadim参与开发的一款基于InnoDB的在线热备工具，具有开源，免费，支持在线热备，备份恢复速度快，占用磁盘空间小等特点，并且支持不同情况下的多种备份形式。xtrabackup的官方下载地址为http://www.percona.com/soft
董乐，快乐的乐！·2024-02-19 14:50

齐治堡垒机

二、漏洞挖掘过程这是我第一次接触运维堡垒机，通过堡垒机登录目标服务器/应用，就像在本地直接打开一样，觉得很神奇。1、挖掘过程首先，在安装齐治运维堡垒机客户端软件ShtermClie
pow(^_^,N)·2024-02-19 14:39

数据归档工具pt-archiver原理研究与使用

mysql除了社区版，还有percona、mariadb两个分支；其中percona是一家做mysql咨询的公司，除了开发了自己的mysql分支外，还开发了大量的mysql运维工具，统称perconatoolkit
sdmei·2024-02-19 14:08

MySQL-运维工具 pt-archiver数据归档工具

目录文章目录目录1.引言2.工具说明2.1使用方式2.2选项说明3.工作流程4.实例4.1表归档到表(逐行进行)4.2表归档到表(批量进行)4.2.1归档到当前实例，并删除数据4.2.2归档到远程实例，不删除数据4.3仅清除表数据4.4表自增字段处理5.总结1.引言2.工具说明2.1使用方式pt-archiver[OPTIONS]--sourceDSN--whereWHERE2.2选项说明选项说明
凡尘技术·2024-02-19 14:07

springboot声明（创建）RabbitMQ交换机和队列

但是在实际开发时，队列和交换机是程序员定义的，将来项目上线，又要交给运维去创建。那么程序员就需要把程序中运行的所有队列和交换机都写下来，交给运维。在这个过程中是很容易出现错误的。
程序员 Harry·2024-02-19 14:15

Python脚本自动化运维网络设备

编写python程序，从配置脚本中读取对应的文件内容，使用ssh的方式将配置发送到设备并保存。配置脚本中存放你想要在每台设备上进行配置的命令importparamikoimporttimefromdevice_info_01import*#创建一个存放设备信息的文件，导入到此文件中foriteminrange(len(datebase)):#datebase是在device_info_01中创建的
胖_嘟_嘟·2024-02-19 13:13

Flink介绍

Stream）2.2转换（Transformation）2.3窗口（Window）2.4状态（State）3.编程模型3.1编程模型介绍3.2程序示例4.部署4.1集群架构4.2集群资源管理4.3部署模式5.运维
程序员白总·2024-02-19 13:41

2018-06-29

Linux文件系统EXT4的前世今生在GitHub上对编程语言与软件质量的一个大规模研究玩转Elasticsearch的SQL功能多层数据结构，一对多关系，如何用一个查询查询所有的数据？
baitu·2024-02-19 13:50

Python自动化运维实战：使用Python管理网络设备

现在，我们已经知道如何在不同的操作系统中使用和安装Python以及如何使用EVE-NG搭建网络拓扑。在本章中，我们将学习如何使用目前常用的网络自动化库自动完成各种网络任务。Python可以在不同的网络层上与网络设备进行交互。首先，Python可以通过套接字编程和socket模块操纵底层网络，从而为Python所在的操作系统和网络设备之间搭建一个低层次的网络接口。此外，Python模块还可以通过Te
江湖人称麻花滕·2024-02-19 13:41

水杉在极狐GitLab 的 DevOps 实践

互相之间非常融洽，像什么老生常谈的开发和运维上的文化矛盾
·2024-02-19 13:11

python-自动化篇-运维-网络-IP

文章目录IP自我介绍IPy安装模块windowsLinuxIPy介绍支持大多数IP地址格式IPv4地址IPv6地址网络掩码和前缀派生网络地址将地址转换为字符串使用多个网络多网络计算方法IP自我介绍IP地址规划是网络设计中非常重要的一个环节，规划的好坏会直接影响路由协议算法的效率，包括网络性能、可扩展性等方面，在这个过程当中，免不了要计算大量的IP地址，包括网段、网络掩码、广播地址、子网数、IP类型
fo安方·2024-02-19 13:03

ansible自动化运维工具及常见模块的使用

目录一、ansible概述二、ansible的特性三、ansible环境安装部署管理端安装ansible：配置主机清单：配置密钥对验证：四、ansible常见模块的使用1．command模块2．shell模块3．cron模块4．user用户管理模块5．group用户组管理模块6．copy模块7．file设置文件属性模块8．hostname模块9．ping模块10．yum模块11．service/s
luochiying·2024-02-19 13:02

云计算基础-快照与克隆

快照保存的是状态，备份保存的是副本)快照优点速度快，占用空间小快照工作原理在了解快照原理前，首先需要知道两个概念：索引/数据和差分盘索引和数据（indexnode/datablock）首先要了解，每一个文件系统都是有两部分组成的
比特微联·2024-02-19 13:28

云计算基础-存储基础

存储的特性：数据临时或长期驻留的物理介质需要保证数据能够及时的被读取或者保存需要保证数据完整安全有效什么是文件系统：文件系统是操作系统用于明确存储设备（常见的是磁盘，也有基于NANDFlash的固态硬盘
比特微联·2024-02-19 13:27

linux卸载提示target is busy，使用fuser命令解决

filesystem或者sockets的进程信息参数-a：显示命令行中指定的所有文件；-k：杀死访问指定文件的所有进程；-i：杀死进程前需要用户进行确认；-l：列出所有已知信号名；-m：指定一个被加载的文件系统或一个被加载的块设备
无敌锅包肉·2024-02-19 13:14

【运维】永久关闭selinux不当，导致无法启动

现象:卡centosloading进度条按esc键发现,启动报错:FailedtoloadSElinuxpolicy,freezing可能的原因:selinux=disabled写错成disable或者错误的把selinuxtype改了，要改文中红框的部分。解决方案:1.重启2.出现选择画面的时候按e3.方向下键找到linux16这一行，在末尾添加上selinux=0，然后ctrl+x继续启动4.
虹梦未来·2024-02-19 13:10

hadoop硬件配置 高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。
xcagy·2024-02-19 13:07

云原生之容器编排实践-在K8S集群中使用Registry2搭建私有镜像仓库

背景基于前面搭建的3节点Kubernetes集群，今天我们使用Registry2搭建私有镜像仓库，这在镜像安全性以及离线环境下运维等方面具有重要意义。
Heartsuit·2024-02-19 13:01

波奇学Linux:文件系统打开文件

从文件系统来看打开文件计算机系统和磁盘交互的大小是4kb物理内存的4kb，磁盘的4kb文件叫做页帧磁盘数据块的以4kb为单位。
社交达人波奇酱·2024-02-19 12:43

File类与IO流

文章目录计算机I/O体系常见的I/O设备计算机的存储体系软件方面认识OS+文件系统（FileSystem)统一管理文件File类1.1概述1.2判断功能的方法1.3创建删除文件\文件夹方法1.4目录的遍历
库里不会投三分·2024-02-19 12:09

精彩回顾 I DatenLord Hackathon 2023圆满结束！

达坦科技基于其跨云分布式文件系统DatenLord项目，结合AI大模型时代背景，搭建了擂台。我们邀请参赛者为DatenLord的极端场景设计并实现缓存p2p传输和同步模块。
·2024-02-19 12:34

阿里云 ACR 制品中心 AI/大数据镜像专场上新推荐榜

同时，开发人员在考虑如何通过云原生技术，以统一架构、统一技术堆栈支撑更多类型的工作负载，从而进一步降低企业服务的运维成本。
·2024-02-19 12:02

AWS 中的另外一种远程工具 AWS Session Manager

作者：SRE运维博客博客地址：https://www.cnsre.cn/文章地址：https://www.cnsre.cn/posts/230129126154/相关话题：https://www.cnsre.cn
SRE运维·2024-02-19 12:38

基于亚马逊云科技Amazon EC2云服务器设计并自动化实现堡垒机

背景在很多企业的实际应用场景中，特别是金融类的客户，大部分的应用都是部署在私有子网中，如何能够让客户的开发人员和运维人员从本地的数据中心中安全的访问云上资源，堡垒机是一个很好的选择。
一线视点·2024-02-19 12:53

基于 Amazon EC2 和 Amazon Systems Manager Session Manager 的堡垒机的设计和自动化实现

为了满足开发人员和运维团队从本地数据中心安全访问云上资源的需求，采用堡垒机作为一种有效的解决方案变得尤为重要。
陈橘又青·2024-02-19 12:46

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。
BigBigFlower·2024-02-19 11:56

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode
万里长江雪·2024-02-19 11:58
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他