E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop运维
精进日记|累
【今日待办】神圣不可侵犯,每天基于今日待办办事,每天完成锻炼后第一件事就是规划今日待办一、累今天早上一去公司就被猪队友
运维
同事搞了线上问题给缠住了,一上午都在解决问题和查原因,晚上才有时间写了复盘邮件,
精进精进再精进
·
2024-08-30 02:55
区块链的搭建与
运维
4
区块链的搭建与
运维
4任务一:区块链产品需求分析与方案设计本任务需要依据项目背景完成需求分析与方案设计,具体要求如下:按照新能源系统的需求规定,用户可以通过本系统实现能源管理与交易、新能源资产管理与交易、
什么都想学。
·
2024-08-30 00:21
区块链
区块链
运维
虚拟机安装
hadoop
,hbase(单机伪集群模式)
虚拟机安装
Hadoop
,Hbase工作中遇到了大数据方面的一些技术栈,没有退路可言,只能去学习掌握它,就像当初做爬虫一样(虽然很简单),在数据爆发的现在,传统的数据库mysql,oracle显然在处理大数据量级的数据时显得力不从心
流~星~雨
·
2024-08-29 21:31
大数据相关
hadoop
hbase
大数据
hive中的数据同步到hbase
关于
hadoop
,hive,hbase这三个技术栈我写了两篇博客简单的分享了我对这三个技术栈的一些看法,在我目前的认知里,
hadoop
提供hdfs这个组件来存储大数据量的数据(相比于mysql,oracle
流~星~雨
·
2024-08-29 21:31
大数据相关
hive
hbase
hadoop
安科瑞能源物联网平台在5G基站
运维
中的应用——安科瑞 顾烊宇
1概述5G建设,基站先行,随着5G宏基站和小基站的大量铺设,越来越多的站点需要对能耗进行监控管理,主要的监控管理包含了:①监测机房设备的空调运行情况,包括电压、电流、功率、能耗、温湿度等参量;②可设置空调的开启和停止,分别针对时间管控和温度管控,实现基站的节能降耗;③对环境测量进行监测,包括视频、门禁、烟感、水浸、温湿度;④对UPS和蓄电池的谐波、充放电情况和电池的电压电流温度进行监测和治理;⑤对
Acrel叶西平
·
2024-08-29 20:55
5G
能源
物联网
hbase ExportSnapshot迁移hbase表
在源集群上准备快照:snapshot'credit_dict','credit_dict_snapshot20221117'list_snapshots复制快照到目标集群:hbaseorg.apache.
hadoop
.hbase.snapshot.ExportSnapshot
Rjunxiang
·
2024-08-29 16:56
hbase
hbase
大数据
hadoop
Hbase离线迁移
hadoop
distcp-Dmapreduce.job.hdfs-servers.token-renewal.exclude="xx.xx.xx.xx"-i-strat
我要用代码向我喜欢的女孩表白
·
2024-08-29 15:22
hbase
数据库
大数据
Python知识点:如何使用HBase与HappyBase进行分布式存储
HBase是一个基于
Hadoop
的开源分布式数据库,可以处理非常大的表。HappyBase是一个Python库,它提供了一个友好的接口来与HBase交互。
杰哥在此
·
2024-08-29 15:51
Python系列
分布式
python
hbase
编程
面试
Linux 属主属组设置和文件类型
我是公众号「想吃西红柿」「云原生
运维
实战派」作者,对云原生
运维
感兴趣,也保持时刻学习,后续会分享工作中用到的
运维
技术,在
运维
的路上得到支持和共同进步!
尘嫣慕曦
·
2024-08-29 15:50
linux
运维
服务器
云计算
优秀的网络安全工程师应该有哪些能力?零基础入门到精通,收藏这一篇就够了
网络安全工程师是一个各行各业都需要的职业,工作内容属性决定了它不会只在某一方面专精,需要掌握网络维护、设计、部署、
运维
、网络安全等技能。
leah126
·
2024-08-29 14:38
渗透测试
程序员
编程
web安全
网络
安全
RabbitMQ日常
运维
指令集
RabbitMQ是一个强大的消息队列系统,支持多种命令行工具用于管理和操作。以下是完整罗列的RabbitMQ指令,包括它们的用途、解读和示例。1.rabbitmqctlrabbitmqctl是RabbitMQ的核心管理工具,用于节点、用户、队列、权限等的管理。常用指令1.1启动和停止启动RabbitMQ应用rabbitmqctlstart_app用途:启动RabbitMQ应用程序。停止Rabbit
StaticKing
·
2024-08-29 07:59
RabbitMQ
rabbitmq
运维
ruby
Spark-RDD迭代器管道计算
一、上下文《Spark-Task启动流程》中讲到我们提交Stage是传入的是这个Stage最后一个RDD,当Task中触发ShuffleWriter、返回Driver数据或者写入
Hadoop
文件系统时才触发这个
隔着天花板看星星
·
2024-08-29 07:24
spark
大数据
scala
关于这道填空题,你会如何回答?(附带学习链接)
小白的答案是:Java是铜牌,Linux是银牌,
Hadoop
是金牌,大数据是王牌。因为Java是学大数据的基础,有基础然后就可以学后续的;最后只有学好大数据这一王牌才能出去找一份比较好的工作。
csdn业界要闻
·
2024-08-29 05:09
自动化
运维
:Ansible、Puppet、Chef工具对比与实战
以下是Ansible、Puppet和Chef这三种自动化
运维
工具的对比与实战详细解说:1.简介AnsibleAnsible是一个基于Python的开源自动化工具,主要用于配置管理、应用部署和任务自动化。
liyy614
·
2024-08-29 02:20
服务器
Hdfs的机架感知与副本放置策略
1.介绍Apache
hadoop
机架感知
Hadoop
分布式文件系统(Hdfs)作为Apache
Hadoop
生态系统的的核心组件之一,通过机架感知和副本放置策略来优化数据的可靠性,可用和性能.Hdfs的机架感知和副本放置策略是其设计的关键组成部分
sheansavage
·
2024-08-29 01:42
hdfs
hadoop
大数据
Java高级技术day75:Zookeeper与Dubbo
一、Zookeeper的介绍1.Zookeeper介绍:顾名思义zookeeper就是动物园管理员,他是用来管
hadoop
(大象)、Hive(蜜蜂)、pig(小猪)的管理员,ApacheHbase和ApacheSolr
开源oo柒
·
2024-08-28 20:54
MYSQL优化相关
mysql优化3大方向:优化mysql所在服务器内核(
运维
完成)对mysql配置参数进行优化(my.cnf),此优化需要进行压力测试进行参数调整建表时的优化对sql语句的优化一、mysql参数优化mysql
peanut___
·
2024-08-28 16:58
云上
运维
案例分享
不可否认数据上云后,增强了扩展的便利性,但是同时也提高了
运维
管理的难度。如何实现云上业务管理,是
运维
工程师们面临的新问题。
LinkSLA
·
2024-08-28 15:03
云计算
1024程序员节
IT统一
运维
平台案例
IT统一
运维
平台案例统一
运维
平台的架构图,划分为三个主要部分:统一
运维
门户、报告与决策中心、
运维
服务调度中心。
javaDocker
·
2024-08-28 15:32
运维
python自动化
运维
工资
大家好,小编为大家解答python自动化
运维
需要掌握的技能的问题。很多人还不知道python自动化
运维
快速入门pdf,现在让我们一起来看看吧!
m0_60591287
·
2024-08-28 12:18
信息可视化
python
Springboot+爬虫+推荐算法+前后端分离实现小说推荐系统
基于以上问题,本次小说推荐系统,建设过程主要分为小说推荐网站前端系统,小说
运维
管理后台系统,小说数据实时采集爬虫三个部分。
计算机程序优异哥
·
2024-08-28 11:25
Spark on YARN
ApacheSpark和Apache
Hadoop
YARN是两个紧密相关的项目,它们经常一起使用来处理大规模数据集。
静听山水
·
2024-08-28 09:26
Spark
spark
大数据
分布式
【区块链 + 司法存证】枢纽链:区块链司法存证平台 | FISCO BCOS应用案例
枢纽链基于FISCOBCOS区块链底层技术研发,整体架构分为三层一平台:基础核心层、服务层、应用层和
运维
管理平台。
FISCO_BCOS
·
2024-08-28 07:47
2023FISCO
BCOS产业应用发展报告
区块链
司法存证
【
运维
之服务器】如何查看Ubuntu版本及常见版本介绍
一、引言Ubuntu是一个基于Debian构建的免费、开源的操作系统,广泛应用于个人电脑、服务器以及云平台。了解Ubuntu版本对于系统维护、软件安装和更新都具有重要意义。本文将带你了解Ubuntu版本的概念,教你如何查看Ubuntu版本,并介绍一些常见的Ubuntu版本。二、什么是Ubuntu版本Ubuntu版本指的是Ubuntu操作系统的不同发行版。每个版本都有其独特的特点、更新周期和官方支持
程序者王大川
·
2024-08-28 06:41
运维
运维
服务器
ubuntu
Django 后端架构开发:高效日志规范与实践
️Django后端架构开发:高效日志规范与实践日志概述与配置:Loggers简介在Django应用程序中,日志系统是非常重要的调试与
运维
工具。
Switch616
·
2024-08-28 06:40
Python
Web
数据库
django
sqlite
python
后端
开发语言
Ubuntu下部署
Hadoop
集群+Hive(三)
Hive部署准备环境apache-hive-4.0.0-bin.tar.gz、mysql-connector-j-8.1.0.jar如果是离线安装的话,使用mysql-8.0.34-1.el7.x86_64.rpm-bundle.tar,在线安装的话则不用;hive下载地址:Indexof/hive(apache.org)mysqlconnector下载地址:MySQL::DownloadConn
岩屿
·
2024-08-28 01:07
hadoop
ubuntu
hive
80、k8s概念及组件介绍
k8s理解成负责自动化
运维
管理多个容器化的应用的集群。谷歌基于go语言开发的。
ly1435678619
·
2024-08-28 01:35
kubernetes
容器
云原生
光伏电站后期是怎么
运维
的
1、日常巡检:定期检查光伏组件、逆变器、配电柜等设备的运行状态,查看是否有损坏、污渍、松动等情况,特别要注意是就是连接线,会不会出现连接松动,有些地区风比较大的,更需要多注意。环境的检测:关注电站周围的杂草,遮挡物或者离的比较近的树木,长时间如果不处理是不是会出现遮挡,确保光照的条件良好。2、数据监测与分析:数据监测:通过监控系统实时掌握电站的发电数据,包括发电量、电压、电流等现在基本上都是通过系
鹧鸪云光伏与储能软件开发
·
2024-08-27 22:46
光伏
光伏发电
新能源
分布式
大数据
分享一个基于Spark的招聘数据可视化与分析系统
Hadoop
大数据源码(源码、调试、LW、开题、PPT)
作者:计算机源码社个人简介:本人八年开发经验,擅长Java、Python、PHP、.NET、Node.js、Android、微信小程序、爬虫、大数据、机器学习等,大家有这一块的问题可以一起交流!学习资料、程序开发、技术解答、文档报告如需要源码,可以扫取文章下方二维码联系咨询Java项目微信小程序项目Android项目Python项目PHP项目ASP.NET项目Node.js项目选题推荐项目实战|基
计算机源码社
·
2024-08-27 20:05
大数据
大数据
spark
毕业设计项目
计算机毕业设计源码
计算机毕设论文
hadoop
计算机课程设计
运维
面试官喜欢问的问题_机房
运维
面试题库及答案
4、通过创新思维解决
运维
效率问题;目前各公司大部份
运维
主要工作还是依赖人工操作干预,需要尽可能的解放双手。
2301_78416732
·
2024-08-27 18:17
程序员
运维
面试
职场和发展
高级
运维
自动化脚本:集成多维度
运维
功能
一.前言在现代企业中,高效的
运维
管理至关重要。高级
运维
自动化脚本旨在整合多种
运维
功能,提升
运维
效率,减少人为错误,并确保系统的稳定性和可靠性。
pyliumy
·
2024-08-27 17:14
python
python
开发语言
基层医疗云HIS系统源码:云计算、大数据等现代信息技术研发
云HIS源码,基层云HIS系统源码,基层医疗云HIS系统利用云计算、大数据等现代信息技术研发的基层医疗云HIS系统实现了医院信息化从局域网向互联网转型,重新定义医疗卫生信息化建设的理念、构架、功能和
运维
体系
项目源码库
·
2024-08-27 14:24
云计算
大数据
源码
云医院
HIS系统
saas
电商云账户分账的逻辑
互联网银行等开放出来的银行分账产品;例如:招商银行清算通、邮储银行云分账、华一银行智富通、新网银行好惠通等,有的是独立产品开放给到商户,有的是基于与技术服务商合作创设产品再面向商户,银行方只负责资金清算,技术方则负责技术对接及后续
运维
A13303814536
·
2024-08-27 14:23
分账
电商
云账户
大数据
windows下Ubuntu子系统安装lammps
子系统(Ubuntu),此前需要做到两步:一、系统设置开启开发者模式二、控制面板->程序->程序和功能->启动或关闭windows功能->勾选适用于Linux的Windows子系统#可参考【Linux
运维
系列
yl--炼气
·
2024-08-27 12:13
windows
ubuntu
linux
【大模型从入门到精通42】LLM部署
运维
(LLM Ops)使用Kubeflow Pipelines掌握LLM工作流4
这里写目录标题在Kubeflow中自动化和编排监督调整管道重用现有管道提高效率准备数据和模型版本控制配置管道定义管道参数执行管道结论理论问题实践问题在Kubeflow中自动化和编排监督调整管道KubeflowPipelines的核心在于其编排复杂工作流的能力。在本例中,我们将探索如何使用KubeflowPipelines自动和编排监督调整管道,针对由Google提供的基础模型PaLM2进行参数高效
水木流年追梦
·
2024-08-27 09:19
大模型
运维
人工智能
深度学习
医院数据防泄露保护系统解决方案
产品部署示意图3.产品优势功能3.1.数据库审计与风险控制系统3.1.1.事前安全风险评估3.1.2.实时统方行为监控3.1.3.双向审计让统方更准确3.1.4.旁路部署对数据库服务器无任何影响3.2.
运维
审计与风险控制系统
努力工作的网安人
·
2024-08-27 09:49
等级保护
经验分享
安全
网络
其他
系统安全
医院数据防泄露保护系统解决方案(参考)
医院需求分析2.解决方案综述3.产品优势功能3.1数据库审计与风险控制系统3.1.1事前安全风险评估3.1.2实时统方行为监控3.1.3双向审计让统方更准确3.1.4旁路部署对数据库服务器无任何影响3.2
运维
审计与风险控制系统
努力工作的网安人
·
2024-08-27 09:49
网络安全
安全
网络安全
经验分享
Hadoop
:HA模式配置与实现
写的不到位的地方,欢迎评论指出不足之处一、检查系统环境1、HostName、Hosts、JDK、SSH、网络、防火墙、数据源二、集群角色分配表注:这只是实例服务器NameNodeNameNodeZookepperFailoverControllerDataNodeZookepperJournalNodeOneyes(NN2和其它节点免密)yesyesTwoyes(NN1和其它节点免密)yesyes
家道消乏
·
2024-08-27 08:14
Hadoop基础
hadoop
大数据
hdfs
运维
系列&AI系列&Lenovo-G双系统系列(前传-装之前搜索的):pytorch cuda安装报错的解决方法
pytorchcuda安装报错的解决方法pytorchcuda安装报错的解决方法前言2022.12.8在win+cuda11.8下安装最新PytorchGPU版时遇到包不兼容的问题,该文记录安装的整个流程一、按照cuda版本在官网找命令二、换源三、Bug描述四、解决方法五、查看是否使用GPU总结pytorchcuda安装报错的解决方法前言这篇文章主要给大家介绍了关于pytorchcuda安装报错的
坦笑&&life
·
2024-08-27 06:33
AI系列
人工智能
运维
pytorch
大数据技术之Flume 企业开发案例——负载均衡和故障转移(6)
2)需求分析故障转移案例3)实现步骤准备工作在/opt/module/flume/job目录下创建group2文件夹[lzl@
hadoop
12job]$c
大数据深度洞察
·
2024-08-27 05:58
Flume
大数据
flume
负载均衡
SD-WAN降低网络
运维
难度的关键技术解析
为什么说SD-WAN(软件定义广域网)大大降低了网络
运维
的复杂性,主要是因为它的智能路径选择、应用识别和链路质量监测这三个核心技术。
TIANGEKUAJING
·
2024-08-27 00:32
网络
运维
企业组网
SD-WAN
异地组网
Ansible模块
Ansible模块简介Ansible是自动化
运维
工具,能实现跨主机对应用编排管理部署。Ansible能批量配置、部署、管理上千台主机,是应用级别的跨主机编排工具。
l25803691121
·
2024-08-26 21:37
ansible
linux
运维
[服务器
运维
] gpu幽灵进程处理
参考资料https://jishuzhan.net/article/1789000218730041345https://blog.csdn.net/kybabcde/article/details/135238913这种情况通常是由于所谓的"僵尸进程"引起的。僵尸进程是指那些已经完成任务但没有正确关闭的进程,它们可能因为各种原因未能释放占用的GPU资源。这会导致资源浪费,并且阻碍其他任务的执行。
PigeonGuan
·
2024-08-26 18:38
服务器
运维
zookeeper+KAFKA 集群搭建
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是
Hadoop
和Hbase的重要组件。
懵逼的运维弟弟
·
2024-08-26 16:28
Linux
zookeeper+KAFKA
集群搭建
(十五)Flink 内存管理机制
在大数据领域,很多开源框架(
Hadoop
、Spark、Storm)都是基于JVM运行,但是JVM的内存管理机制往往存在着诸多类似OutOfMemoryError的问题,主要是因为创建大量的实例,超过JVM
springk
·
2024-08-26 16:27
Flink全景解析
flink
大数据
实时数据
flink
内存管理
内存管理机制
面试笔记8.24
正确答案:在我的项目中涉及大数据开发时,我通常会采用分布式的架构,比如使用
Hadoop
或者Spark等大数据处理框架。我会在集群中部署多台服务器,通过分布式计算和存储来处理大规模数据。
励志秃头码代码
·
2024-08-26 16:55
面试
职场和发展
在linux机器中安装配置
hadoop
1.首先我们要把
hadoop
包上传到我们的liunx机器中(运用外链软件上传如:Xshell+xftp)(用我们的外链软件连接成功后,进行
hadoop
包的上传)上传到我们想要的目录路径下,比如我的是上传到
BigData_C
·
2024-08-26 14:40
linux
hadoop
计算机毕业设计
Hadoop
+Spark知识图谱体育赛事推荐系统 体育赛事热度预测系统 体育赛事数据分析 体育赛事可视化 体育赛事大数据 机器学习 大数据毕业设计 大数据毕设 机器学习 人工智能
开发技术前端:vue.js、element-ui、echarts后端:springboot、mybatis大数据:spark、
hadoop
数据库:mysql关系型数据库、neo4j图数据库算法:协同过滤推荐算法
计算机毕业设计大全
·
2024-08-26 13:43
Kylin系列-入门
Kylin系列-入门ApacheKylin是一个开源的分布式分析引擎,提供
Hadoop
/Spark之上的SQL查询接口及多维分析(OLAP)能力,以支持超大规模数据。
Dingdangr
·
2024-08-26 13:34
kylin
通过visualVM远程监控java进程
它提供了丰富的功能来帮助开发者和
运维
人员理解和优化Java应用程序的性能。
PursuitK
·
2024-08-26 11:23
后端
java
visualVM
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他