运维flume

k8s不求甚解系列：一种在k8s上创建不同权限的kubeconfig实践

面向人群集群运维人员实验操作设置业务团队一:占用的namespace是test1业务团队二：占用的namespace是test2操作机器是在集群的master节点上实验过程#在集群上创建用户kubectlcreatesau
bug_createman·2023-12-14 15:34

DevOps - Spug 自动化运维平台

Spug是面向中小型企业设计的轻量级无Agent的自动化运维平台，整合了主机管理、主机批量执行、主机在线终端、文件在线上传下载、应用发布部署、在线任务计划、配置中心、监控、报警等一系列功能。
梦想blog·2023-12-14 14:04

思福迪运维安全管理系统 test_qrcode_b RCE漏洞复现

0x01产品简介思福迪运维安全管理系统是思福迪开发的一款运维安全管理堡垒机。
OidBoy_G·2023-12-14 14:21

Linux运维的40道面试精华题

1、什么是运维？什么是游戏运维？
叮咚网工·2023-12-14 14:12

python做服务器有优缺点_python做服务器优劣

尤其是在运维的应用中非常的广泛，所以之前出了一句话，在如今的时代，运维不学Python，迟早会被淘汰！可是难...文章诸葛青云h2019-04-281895浏
weixin_40002611·2023-12-14 13:16

机器人行业数据闭环实践：从对象存储到 JuiceFS

在商用服务机器人领域，后期运维和开发工作至
Juicedata·2023-12-14 13:37

第19关 5.2k star 开源分布式存储服务Rancher-Longhorn在k8s上部署

------>课程视频同步分享在今日头条和B站大家好，我是博哥爱运维。什么是LonghornLonghorn是一个轻量级、可靠且易于使用的Kubernetes分布式块存储系统。
博哥爱运维·2023-12-14 13:25

第20关 快速掌握K8S下的有状态服务StatefulSet

------>课程视频同步分享在今日头条和B站大家好，我是博哥爱运维，K8s是如何来管理有状态服务的呢？跟着博哥来会会它们吧！
博哥爱运维·2023-12-14 13:25

第21关 从零到一：在 K8s 中部署 Job 和 CronJob 的全面指导

------>课程视频同步分享在今日头条和B站大家好，我是博哥爱运维，有时候我们想在K8s跑个一次性任务，或者是定时任务，能不能实现呢，答案肯定是可以的。
博哥爱运维·2023-12-14 13:25

【运维】Kafka高可用： KRaft（不依赖zookeeper）集群搭建

文章目录一.kafkakraft集群介绍1.KRaft架构2.Controller服务器3.ProcessRoles4.QuorumVoters5.kraft的工作原理ing二.集群安装1.安装1.1.配置1.2.格式化2.启动测试2.1.启功节点服务2.2.测试本文主要介绍了kafkaraft集群架构：与旧架构的不同点，有哪些优势，哪些问题架构成员有哪些，怎么规划。三节点集群安装、启动与测试一.
roman_日积跬步-终至千里·2023-12-14 13:33

第22关 深入解析K8s中的RBAC角色访问控制策略

------>课程视频同步分享在今日头条和B站大家好，我是博哥爱运维，在k8s上我们如何控制访问权限呢，答案就是Role-basedaccesscontrol(RBAC)-基于角色（Role）的访问控制
博哥爱运维·2023-12-14 12:54

智能配电房解决方案

智能配电房解决方案运用物联网、云计算、大数据、人工智能等先进技术，构建具备遥测、遥信、遥控、遥调、遥视功能的智能配电房，依托电易云-智慧电力物联网实现对配电室的全面感知、智能监控、优化运行、精益管理，提高供电可靠性，降低运维成本
电易云力安科技·2023-12-14 12:42

二百一十八、Hadoop——Hadoop启动报错Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)

一、目的在完成Flume拓扑结构之聚合的开发案例，启动了hurys23服务器早已安装好的Hadoop，结果居然报错了二、报错详情hurys23:Permissiondenied(publickey,gssapi-keyex
天地风雷水火山泽·2023-12-14 12:39

二百一十五、Flume——Flume拓扑结构之复制和多路复用的开发案例（亲测，附截图）

一、目的对于Flume的复制和多路复用拓扑结构，进行一个小的开发测试二、复制和多路复用拓扑结构（一）结构含义Flume支持将事件流向一个或者多个目的地。
天地风雷水火山泽·2023-12-14 12:09

二百一十六、Flume——Flume拓扑结构之负载均衡和故障转移的开发案例（亲测，附截图）

一、目的对于Flume的负载均衡和故障转移拓扑结构，进行一个开发测试二、负载均衡和故障转移（一）结构含义Flume支持使用将多个sink逻辑上分到一个sink组（二）结构特征sink组配合不同的SinkProcessor
天地风雷水火山泽·2023-12-14 12:09

已解决：java.net.ConnectException: Call From XXXXX to XXXXX :8020 failed on connection Exception: 拒绝连接；

文章目录前言报错提示如下：解决方案前言最近在忙着做一些日志监控类的项目，Flume做的，主要是针对几个业务数据库，监控一下运行日志，为啥？
想做CTO的任同学...·2023-12-14 12:04

数字化时代的到来，IT运维产业正在发生深刻的变革

IT运维产业是随着信息技术的发展而产生的，它涵盖了从硬件到软件、从应用到数据、从终端到云端等各个方面的维护和管理。随着数字化时代的到来，IT运维产业正在发生深刻的变革。
MXsoft618·2023-12-14 12:42

二百一十七、Flume——Flume拓扑结构之聚合的开发案例（亲测，附截图）

一、目的对于Flume的聚合拓扑结构，进行一个开发测试二、聚合（一）结构含义这种模式是我们最常见的，也非常实用。
天地风雷水火山泽·2023-12-14 12:31

解决Hbase报错:ERROR: Can‘t get master address from ZooKeeper； znode data == null

文章目录问题描述解决方案问题描述报错了：这啥公司啊，怎么给的文档怎么错这么多，起一服务，集群里总有几个组件报错继上次Flume脚本，使用hdfssink报错了以后，hbase又报错了，报错提示如下：hbase
想做CTO的任同学...·2023-12-14 12:30

关于物联网仪表ADW300 远传电表的详细介绍-安科瑞 蒋静

可灵活安装于配电箱内，实现对不同区域和不同负荷的分项电能计量、运维监管或电力监控等需求。2产品型号规格及功能特点2．1ADW300无线计量仪表
安科瑞蒋静·2023-12-14 12:20

zabbix 4.0安装

#zabbix基本一.监控的重要性应用运维的三大任务之一：故障处理。如何找到故障就成了一个问题。通过客户反馈可以得知故障的发生，但是从客户感知到故障到提交故障可能周期很长。
weixin_34032827·2023-12-07 00:27

Flume+Kafka双剑合璧玩转大数据平台日志采集

为此建议将日志采集分析系统分为如下几个模块：数据采集模块：负责从各节点上实时采集数据，建议选用Flume-NG来
java菜·2023-12-07 00:17

『互联网架构』软件架构-nginx（上）（19）

原文链接地址：『互联网架构』软件架构-nginx（上）（19）今天说说nginx，其实有老铁比较奇怪，nginx不是运维来搞的吗？
IT人故事会·2023-12-06 23:40

工程管理系统简介 工程管理系统源码 java工程管理系统 工程管理系统功能设计

工程项目管理软件（工程项目管理系统）对建设工程项目管理组织建设、项目策划决策、规划设计、施工建设到竣工交付、总结评估、运维运营，全过程、全方位的对项目进行综合管理工程项目各模块及其功能点清单一、系统管理
2301_77700816·2023-12-06 22:05

Grafana部署与Zabbix集成，搭建开源IT监控平台

Grafana部署与Zabbix集成目前在一家公司主要是网络、运维、IT支持，每次需要检查服务器状态都是需要手动登录系统进行查看，因此想着部署一套监控系统，功能上需要实现监控、可视化、告警等。
行則独善其身·2023-12-06 21:15

运维之远程桌面连接失败问题排查

背景：同一局域网，可以ping通但是远程连接不上，排查一下问题。1、被远程计算机是否允许远程连接2、被远程计算机防火墙是否允许3、被远程计算机远程桌面服务是否正常4、查看用户权限
shy014·2023-12-06 21:56

大数据实战项目_电商推荐系统

一、项目介绍Hadoop+Spark+(Python)Scala+SparkSQL+SparkStreaming+MongoDB+Redis+Kafka+Flume+(SpringMVC+vue)1项目介绍
Guff_hys·2023-12-06 20:28

不同程序员岗位对不同电脑性能的要求（编程开发选电脑）

比如像前端开发、后端开发、运维、算法、嵌入式等这些岗位的要求都还不太一样。1.前端开发不管是用“三件套”的原生技术栈时代，也就是所谓的
北熊行·2023-12-06 20:09

高效、简单、方便管理与维护的开源运维工单系统

ferry工单系统介绍ferry工单系统是一个集工单统计、任务钩子、RBAC权限管理、灵活配置流程与模版于一身的开源工单系统，当然也可以称之为工作流引擎。权限控制：给予casbin的rbac权限控制开发，能非常灵活的控制左侧菜单及页面按钮，并且可以对api进行权限控制，避免可以通过类似与Postman的工具直接发送请求触发api操作的情况。工单统计：对工单进行数据统计，便于以后对根据工单进行分析与
b0ec9dbb2519·2023-12-06 20:38

信息系统安全运维服务资质认证申报流程详解

随着我国信息化和信息安全保障工作的不断深入，以应急处理、风险评估、灾难恢复、系统测评、安全运维、安全审计、安全培训和安全咨询等为主要内容的信息安全服务在信息安全保障中的作用日益突出。
wwj536218066·2023-12-06 19:03

实施工程师&运维工程师面试题

一、选择题(每题3分，共15分)1、Oracle数据库对查出的数据去重命令是_____.A.UNIQUEB.LIMITC.ONLYD.DISTINCT正确答案：D.DISTINCT2、oracle数据库中，使用如下哪个命令，可以将整个表的数据删除，并且无法进行恢复（）A、dropB、deleteC、truncateD、cascade正确答案：C、truncate3、给hsfa这个用户赋予dba的权
IT北辰·2023-12-06 18:46

运维工程师装逼完全指南

1、全球化的认证有助于提升逼格，什么OCM、CCIE、RHCA、CISSP等等能考都考，再不济，也要有一张系统架构设计师或者网络规划设计师的信产部认证。每过一个认证，逼格提升一档。2、TCP/IP协议、Linux内核深入研究、ORACLE大全等等之类的超过1千页大本头的书能有效提升B格，一定要放手边。不懂不要紧，别人能看见就行了。真有人跟你谈这些，也别担心装B失败，谈网络就从TCP的实现谈起，谈L
GLAB-Mary·2023-12-06 18:41

Linux运维——shell编程基础

目录一、算数运算命令二、定义变量url=“https://blog.csdn.net/weixin_45029822/article/details/103568815”三、写一个脚本，完成以下要求：给定一个用户：1、如果其UID为0，就显示此为管理员；2、否则，就显示其为普通用户；脚本测试：四、练习：写一个脚本判断当前系统上是否有用户的默认shell为bash；如果有，就显示有多少个这类用户；否
哈hhhh·2023-12-06 18:41

网络安全赚不了大钱却值得入行？真相只有一个！

网络安全行业是倾向于做网络安全相关产品、解决方案、服务的企业，比如奇安信、绿盟就是网络安全行业公司；网络安全岗位是在企业中从事网络安全相关职位，比如银行里面的工作的网络安全运维、网络安全经理就属于网络安全岗位了
安鸾彭于晏·2023-12-06 17:16

如何搭建软件测试环境？

一般来说，测试环境搭建都属于运维的工作范畴，但是可能有些创业公司就没有运维这个岗位，就只能测试人员来搞了。
喜欢软测的小北葵·2023-12-06 16:05

腾讯云服务器怎么购买和使用（新版图文教程）

云服务器能帮助快速构建更稳定、安全的应用，降低开发运维的难度和整体IT成本。腾讯云CVM云服务器提供多种类型的实例、操作系统和软件包。
云tech·2023-12-06 15:55

【SpringBoot3】--01.快速入门、基本框架原理、常用注解、yaml配置文件、日志配置

开发流程2.1.1创建项目2.1.2导入场景2.1.3主程序2.1.4业务2.1.5测试2.1.6打包2.2特性小结2.2.1简化整合2.2.2简化开发2.2.3简化配置2.2.4简化部署2.2.5简化运维
小d<>·2023-12-06 14:15

社区投稿 | 常见的slave延迟场景分析

作者介绍：杨奇龙，网名“北在南方”，7年DBA老兵，目前任职于杭州有赞科技DBA，主要负责数据库架构设计和运维平台开发工作，擅长数据库性能调优、故障诊断。
爱可生开源社区·2023-12-06 13:04

Esxi8.0ip不够用，虚拟网卡实现虚拟机局域网互通

需求甲方机房搬迁后只给两个ip，一个运维机的ip，一个网关ip。运维机是ESXI8.0系统，之前有点强迫症，非要进行业务隔离，所以割了十台虚拟机。
虫叽叽·2023-12-06 12:48

flume 实时监控 Hive 日志，并上传到 HDFS 中

-3.1.2.jar、hadoop-hdfs-3.1.2.jar、commons-io-2.5.jar、htrace-core4-4.1.0-incubating.jar拷贝到/opt/moudle/flume
无名刺客·2023-12-06 12:41

二百一十三、Flume——Flume拓扑结构介绍

一、目的最近在看尚硅谷的Flume资料，看到拓扑结构这一块，觉得蛮有意思，于是整理一下Flume的4种拓扑结构二、拓扑结构（一）简单串联1、结构含义这种模式是将多个flume顺序连接起来了，从最初的source
天地风雷水火山泽·2023-12-06 12:40

Flume 概述+环境配置+监听Hive日志信息并写入到hdfs

Flume介绍Flume是Apache基金会组织的一个提供的高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理
Transkai47·2023-12-06 12:40

二百一十二、Flume——Flume实时采集Linux中的目录文件写入到HDFS中（亲测、附截图）

一、目的在实现Flume实时采集Linux中的Hive日志写入到HDFS后，再做一个测试，用Flume实时采集Linux中的目录文件，即使用Flume监听Linux整个目录的文件，并上传至HDFS中二、
天地风雷水火山泽·2023-12-06 12:10

flume和kafka整合——采集实时日志落地到hdfs

flume和kafka整合——采集实时日志落地到hdfs一、采用架构二、前期准备2.1虚拟机配置2.2启动hadoop集群2.3启动zookeeper集群，kafka集群三、编写配置文件3.1slave1
奋斗的IT小白菜·2023-12-06 12:39

Flume采集数据到Hive&HBase

文章目录Flume汇入数据到Hive方法一：汇入到Hive指定的HDFS路径中：方法二：利用HiveSink汇入数据Flume汇入数据到HBase一、Flume的HBaseSinks详细介绍1.1、HBaseSink1.2
哈了个Doop·2023-12-06 12:08

Flume监控Hive日志并上传到HDFS

一、实时监控单个追加文件1.需求：实时监控Hive日志，并上传到HDFS2.实现步骤：（1）上传Hadoop相关jar包到flume/lib目录下flume相关jar包https://blog.csdn.net
无发可脱丶·2023-12-06 12:37

实时监控 Hive 日志，并上传到 HDFS 中

Flume要想将数据输出到HDFS，依赖Hadoop相关jar包检查/etc/profile.d/my_env.sh文件，确认Hadoop和Java环境变量配置正确创建flume-file-hdfs.conf
夏殿灬青葛石·2023-12-06 12:07

二百一十一、Flume——Flume实时采集Linux中的Hive日志写入到HDFS中（亲测、附截图）

一、目的为了实现用Flume实时采集Hive的操作日志到HDFS中，于是进行了一场实验二、前期准备（一）安装好Hadoop、Hive、Flume等工具（二）查看Hive的日志在Linux系统中的文件路径
天地风雷水火山泽·2023-12-06 12:36

用python 自动化实现网络设备的配置备份

将网络设备的配置做备份是网络运维中必不可少的一项工作，根据公司规模和要求不同，管理层可能会要求对网络设备的配置做月备，周备甚至日备。
datacom_chen·2023-12-06 12:05

centos7上源码安装mysql--运维高级

第一步,安装必要的依赖:yuminstall-ycmakencurses-develbisongccgcc-c++makeunziplibaionumactl第二步,创建mysql用户和组:wgethttp://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.18.tar.gztarzxvfmysql-5.7.18.tar.gz第三步,下载MySQL
凌晨五点的星·2023-12-06 12:04
上一页 68 69 70 71 72 73 74 75 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他