运维大数据文件系统hadoop

光伏、储能一体化监控及运维解决方案

王璐月183*2190-07.06前言今年以来，在政策利好推动下光伏、风力发电、电化学储能及抽水蓄能等新能源行业发展迅速，装机容量均大幅度增长，新能源发电已经成为新型电力系统重要的组成部分，同时这也导致新型电力系统比传统的电力系统更为复杂，未来预计可再生能源装机规模仍将快速增长，逐步完成能源体系的深度转型，*终实现“碳中和”目标。随之而来的是光伏电站、储能以及配套的电气设施怎么通过系统来实现*效的
安科瑞王璐月·2024-02-20 16:43

Ansible 自动化运维工具的使用

目录Ansible的简介ansible环境安装部署ansible命令行模块command模块shell模块cron模块user模块group模块copy模块file模块hostname模块ping模块yum模块service/systemd模块script模块mount模块archive模块unarchive模块replace模块setup模块Ansible的简介Ansible是一个基于Pytho
GnaW1nT·2024-02-20 16:03

认识ansible，了解常用的模块

它融合了众多老牌运维工具的优点，Pubbet和Saltstack能实现的功能，Ansible基本上都可以实现。Ansible能批量配置、部署、管理上千台主机。
lelelele798·2024-02-20 16:31

自动化运维工具Ansible——inventory 主机清单

目录Inventory简介Ansible配置文件的优先级Ansible命令常用参数主机清单文件hosts通过列表的方式标识主机范围主机端口指定用主机名标识主机范围inventory中的变量主机变量组变量all组嵌套Inventory简介Inventory支持对主机进行分组，每个组可以定义多个主机，每个主机都可以定义在任何一个或多个主机内。Ansible配置文件的优先级首先找执行ansible命令的
learnrecord·2024-02-20 15:59

Linux 软链接和硬链接

什么是软连接软链接又叫符号链接,它类似于windows系统中的快捷方式，常用于将目录层次较深的文件链接到比较容易访问的目录中创建软链接使用ln-s源文件软链接命令就可以创建一个软链接，软链接可以对文件、目录、跨文件系统的文件或目录创建文件的软链接
Linux开发那些事儿·2024-02-20 15:39

Linux系统清空日志方法

1.命令总结注：命令只是模板，根据需要以及不同系统自行更改1.查看磁盘使用情况df-h此命令将显示所有已安装文件系统的磁盘使用情况。您可以根据需要确定哪些文件系统占用了最多的磁盘空间。
开过光的猫·2024-02-20 15:15

大数据Map Reduce (Hadoop) 和 MPP数据库 的区别

原理的角度出发,mapreduce其实就是二分查找的一个逆过程,不过因为计算节点有限,所以map和reduce前都预先有一个分区的步骤.二分查找要求数据是排序好的,所以MapReduce之间会有一个shuffle的过程对Map的结果排序.Reduce的输入是排好序的.MR分而治之的策略和数据库行业中另一种数据库MassivelyParallelProcessor即大规模并行处理数据库(典型代表AW
山哥Samuel·2024-02-20 15:05

MySQL 执行 Online DDL 操作报错空间不足？

作者：徐文梁，爱可生DBA成员，一个执着于技术的数据库工程师，主要负责数据库日常运维工作。擅长MySQL，Redis及其他常见数据库也有涉猎；喜欢垂钓，看书，看风景，结交新朋友。
·2024-02-20 15:53

态势感知是什么？为何需要态势感知？

它以安全大数据为基础，从全局的角度，提高对安全威胁的发现识别、理解分析和处理反应能力。目的在于在大规模网络环境下，对能够引起网络
·2024-02-20 15:52

MySQL运维实战（7）建立复制

引言在构建数据库复制系统时，正确配置主库和备库是确保数据同步顺利进行的关键步骤。以下是建立复制的基本步骤，主要包括主库开启binlog的关键参数设置，创建主库复制账号以满足基本权限需求，备库参数配置和初始化的步骤。1、主库开启binlog主库需要配置的关键参数server_id：主备库需要设置为不同。log_bin：binlog文件的前缀，可以指定绝对路径，也可以只指定文件名。若不指定路径，bin
·2024-02-20 15:20

FATFA文件系统

一.文件系统基本知识1.文件系统是什么？文件系统是一种用于组织和存储计算机上的文件和目录的方法。它是操作系统中的一个重要组成部分，负责管理磁盘或其他存储介质上的文件，使其易于访问和使用。
左手的月光·2024-02-20 15:17

2018中国公有云厂商排名第一：中国电信 482亿元

43家中国公有云厂商2018年收入利润深度分析｜系列报道排名第一：中国电信482亿元在2018上半年中国电信公布的财报显示，IDC收入保持20%的增速，云和大数据收入合计增幅达120%。
阿明观察·2024-02-20 15:40

民安智库开展景区游客满意度调查

广东省景区行业协会发布了2021年度广东省旅游景区游客满意度大数据调查报告显示，游客选择旅游目的地倾向于深圳、广州、珠海等城市，同时休闲度假与城市公园型景区更受游客青睐，其中，广州市长隆旅游度假区、深圳市华侨城旅游度假区
民安汇智·2024-02-20 14:37

Hadoop 大数据的入门学习

由于所做的银行项目与大数据有关，所以个人学习下hadoop的知识，希望能对大数据有所了解，不喜勿喷，哪里有不对的希望大神指点Hadoop百度百科：Hadoop是一个由Apache基金会所开发的分布式系统基础架构
heybo_zhang·2024-02-20 14:36

计算机毕业设计选什么题目好？springboot 高校汉服租赁网站

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机毕业编程指导师·2024-02-20 14:24

基于SpringBoot高校汉服租赁网站的设计与实现

主要内容：毕业设计，SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Python、Nodejs、小程序、安卓app、大数据等设计与开发感兴趣的可以先收藏起来，还有大家在毕设选题，项目以及论文编写等相关问题都可以和博主沟通
一点教程·2024-02-20 14:53

云上业务一键性能调优，应用程序性能诊断工具 Btune 上线

上面的这些问题，对于开发运维工程师来说一定不陌生，经常被这
·2024-02-20 14:15

SSL VPN安全网关

SSLVPN网关产品规范》集成了国产密码算法（SM1/SM2/SM3/SM4）和SSL、IPSec安全协议，并通过了相关权威资质认证，主要可应用于网络强身份认证与通信加密传输等业务场景，满足跨网络远程接入、远程运维
沃通WoTrus·2024-02-20 13:43

【Linux取经路】文件系统之重定向的实现原理

文章目录一、再来理解重定向1.1输出重定向效果演示1.2重定向的原理1.3dup21.4输入重定向效果演示1.5输入重定向代码实现二、再来理解标准输出和标准错误2.1同时对标准输出和标准错误进行重定向2.2将标准输出和标准错误重定向到同一个文件三、再看一切皆文件四、结语一、再来理解重定向1.1输出重定向效果演示分析：ls指令是显示当前目录下的文件，本质就是将当前目录下所有的文件名以字符串的形式写入
春人.·2024-02-20 13:05

网络安全防御中不可或缺的基线分析

网络安全问题日益突显，随着大数据、云计算、物联网、人工智能等技术的飞速发展，我们面临的网络环境变得越来越复杂，应用系统不断增多，API、组件、微服务等也变得越来越庞大。
酒酿小小丸子·2024-02-20 13:06

《教育正悄悄发生一场革命》｜一场数据驱动的教育革命

由于大数据的应用，大量同类的学习行为被分析和用到教育后，对于金字塔底端的人才的培养和教育资源匮乏情况下的学习，在线教育确实有效，由于合村并校，乡村教育资源异常紧缺，在此情况下，教育技术确实能够大大降低教育的成本
张英俊黑龙江拜泉爱农乡中心学校·2024-02-20 13:20

Kubernetes基础(二十二)-K8S的PV/PVC/StorageClass详解

1.1PV概念PV是对K8S存储资源的抽象，PV一般由运维人员创建和配置，供容器申请使用。没有PV之前，服务器的磁盘没有分区的概念，有了PV
alden_ygq·2024-02-20 13:28

IT 软件测试 ——轻松月入过20K 测试工程师年薪35W

互联网行业的技术岗位一般分为研发、测试和运维，虽然前些年测试一直都不如研发岗位那么吃香。但现在随着国内对软件测试的重视，我国互联网企业对软件测试的需求在未来还将继续增大。
软件测试工程师95·2024-02-20 12:06

【天衍系列 01】深入理解Flink的 FileSource 组件：实现大规模数据文件处理

4.2maven依赖4.3StreamFormat读取文件数据4.4BulkFormat读取文件数据4.5使用小结05数据源比较06总结01基本概念ApacheFlink是一个流式处理框架，被广泛应用于大数据领域的实时数据处理和分析任务中
浅夏的猫·2024-02-20 12:01

Flink理论—Flink架构设计

它集成了所有常见的集群资源管理器，例如HadoopYARN，但也可以设置作为独立集群甚至库运行,例如Spark的StandaloneMode本节概述了Flink架构，并且描述了其主要组件如何交互以执行应用程序和从故障中恢复
不二人生·2024-02-20 12:59

Docker再学习 - 实战

一名从事运维开发的worker，记录分享学习。专注于AI，运维开发，windowsLinux系统领域的分享！
南城余coding·2024-02-20 12:55

MySQL进阶 - 日志

一名从事运维开发的worker，记录分享学习。专注于AI，运维开发，windowsLinux系统领域的分享！
南城余coding·2024-02-20 12:25

Docker再学习 - 阿里加速配置篇

一名从事运维开发的worker，记录分享学习。专注于AI，运维开发，windowsLinux系统领域的分享！
南城余coding·2024-02-20 12:25

MySQL进阶 - 备份与恢复

一名从事运维开发的worker，记录分享学习。专注于AI，运维开发，windowsLinux系统领域的分享！
南城余coding·2024-02-20 12:51

Excel导出显示服务器,javaexcel导出到远程服务器

javaexcel导出到远程服务器内容精选换一换使用GDS工具将数据从数据库导出到普通文件系统中，适用于高并发、大量数据导出的场景。
weixin_39946029·2024-02-20 12:50

变电所电力运维平台系统解决方案为医院实现无人值守

袁媛ACRELYY安科瑞电气股份有限公司1项目概况安科瑞电气股份有限公司于2021年1月承接了武汉儿童医院变电所电力运维平台系统的设计与实施，旨在通过该系统实现武汉儿童医院变电所电力运维的集中管理和监测
Acrel_yy·2024-02-20 12:16

用户空间与内核通信（二）

本章节我将介绍使用netlink套接字和proc文件系统实现用户空间对内核空间的访问。
稚肩·2024-02-20 12:44

精彩回顾 | 迅易科技受邀出席腾讯产业集群数字化发展大会

本次展会邀请了涵盖物联网、人工智能、云计算、大数据等200+数字化转型的行业专家及企业齐聚大会，共同探讨大模型时代下数智融合的新需求、新趋势、新路径。
·2024-02-20 12:35

libcurl如何设置HTTP代理？HTTP代理有什么用？

快代理专注为先进的企业大数据采集团
·2024-02-20 12:35

开源大数据集群部署（十）Ranger usersync部署

作者：櫰木rangerusersync部署解压包[[email protected]]#pwd/opt/ranger[[email protected]]#tar-zxvfranger-2.3.0-usersync.tar.gz-C/opt/[[email protected]]#cdranger-2.3.0-usersync修改配置insta
·2024-02-20 12:27

mysql数据库扫盲，你真的知道什么是数据库嘛

二、数据库发展过程中经历了什么阶段数据库的发展大致划分为如下几个阶段：人工管理阶段、文件系统阶段、数据库系统阶段、高级数据库阶段。三、数据库的特点是什么数据库的特点是
运维家·2024-02-20 11:32

STL源码分析之vector

vector容器有已使用空间和可用空间，已使用空间是指vector容器的大小，可用空间是指vector容器可容纳的最大数据空间capacity。vector的实
小鱼的编程之路·2024-02-20 11:14

运维高级作业02

使用ECS和OSS搭建个人网盘1.找到开发者社区2.安装Cloudreve下载cloudreve安装包解压cloudreve安装包给cloudreve授予权限运行cloudreve复制管理员账户和密码[email protected]/wQQ9YwFa打开浏览器101.133.156.150:5212登录成功在终端中按下Ctrl+C键，停止cloudreve运行3.安装ossfs下载ossfs
星辰半海·2024-02-20 11:13

运维高级作业03

负载均衡使用任务一：配置后端web服务器（ECS服务器）任务二：创建负载均衡实例任务三：配置负载均衡实例任务四：配置会话保持分别用Xshell连接两台ECS服务器任务一：配置后端web服务器（ECS服务器）安装httpd，提供默认主页，启动服务重启安全组入站放行80端口，两台ECS服务器使用的是同一安全组，配置一次即可分别登录两台服务器公网测试任务二：创建负载均衡实例任务三：配置负载均衡实例点击监
星辰半海·2024-02-20 11:13

高级运维作业01

作业一：ECS之初体验（Linux）任务一：创建弹性云服务器任务二：登录云服务器分别使用vnc、Workbench和xshell登录云服务器。任务三：重置root用户密码搭建阿里云ESC部署1.登录阿里云平台后，新用户免费使用一个月2.创建实例完成后看到3.重置密码点击重置密码密码设置为：Redhat1*设置成功后启动中4.远程连接点击远程连接，选择远程连接方式5.通过xshell方式登录作业二：
星辰半海·2024-02-20 11:43

运维高级 mysql第一次作业

第一次作业1、CentOS7RPM方式安装MySQL5.72、CentOS7通用二进制方式安装MySQL5.73、简述MySQL体系结构。4、使用mysql客户端登录服务器，重置root密码1、RPM安装MySQL下载rpm安装包，解压tarxfmysql-5.7.32-1.el7.x86_64.rpm-bundle.taryumremovemariadb-libsrpm-ivhmysql-com
空丶白灬·2024-02-20 11:09

互联网对信息的传输

因为我们现在每天都在无时无刻的接触大数据或联网信息。我们每天都要处理以亿为单位的数据信息量。那么如果说没有大数据的互联网的存在，那么我们的数据可能会崩溃。就是因为有了互联网大数据的存在。
深度链的新鲜事·2024-02-20 11:08

Kafka核心逻辑介绍 | 京东云技术团队

分布式消息系统（kafka2.8.0版本之后接触了对zk的依赖，使用自己的kRaft做集群管理，新增内部主体@metadata存储元数据信息），它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop
·2024-02-20 11:54

SRE体系03----管理风险

正确的容忍风险在现实的运维工作中，业务系统不可能百分之百可靠，我们也不会追求百分之百可靠。因为这不但会带来高昂的成本，而且会严重拖慢研发效率。SRE应该容忍合理的风险，以平衡效率和稳定性之间的矛盾。
·2024-02-20 11:54

windows操作系统基础

操作系统需要处理如管理与配置内存、决定系统资源供需的优先次序、控制输入与输出装置、操作网络与管理文件系统等基本事务。操作系统也提供一个让使用者与系统互动的操作界面。
想拿 0day 的脚步小子·2024-02-20 11:40

活动回顾｜RocketMQ 运维经验圆桌交流「第二期」

2023年12月3日，AutoMQ举办了第二场线上交流会RocketMQ运维经验圆桌交流「第二期」，本次交流会汇聚了RocketMQ的作者以及来自腾讯云、网易、社区的技术专家。
·2024-02-20 10:21

大数据 - Spark系列《六》- RDD详解

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-20 10:55

大数据 - Spark系列《七》- 分区器详解

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-20 10:55

透彻理解实时数仓的支撑技术：Upsert Kafka 和 Flink 动态表（Dynamic Table）

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
　Laurence·2024-02-20 10:23

2022-01-07

真的为祖国自豪，大数据一刷就知道你去哪哪哪了。回来把我把我乱糟糟的头发剪了一下瞬间感觉自己年轻了。剪断烦恼丝，明天应该可以全身心的去加人了。
久睡成瘾的范·2024-02-20 10:32
上一页 20 21 22 23 24 25 26 27 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他