E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
rtmp边缘集群
【学习心得】Python好库推荐——PEFT
二、PEFT使用场景在计算资源有限的情况下,如
边缘
设备、移动设备或低成本
小oo呆
·
2025-02-01 06:48
【学习心得】
人工智能
python
语言模型
PyDeequ库在AWS EMR启动
集群
中数据质量检查功能的配置方法和实现代码
PyDeequ是一个基于ApacheSpark的PythonAPI,专门用于定义和执行“数据单元测试”,从而在大规模数据集中测量数据质量。PyDeequ框架在PySpark代码中提供了全面的数据质量检查功能,能够帮助用户&有效地监控和提升大规模数据集的数据质量。它在PySpark代码中的数据质量检查功能主要包括以下几个方面:核心组件指标计算(MetricsComputation):利用分析器(An
weixin_30777913
·
2025-02-01 04:59
python
spark
大数据
云计算
aws
StarRocks常用命令
目录1、StarRocks
集群
管理&配置命令2、StarRocks常用操作命令3、StarRocks数据导入和导出1、StarRocks
集群
管理&配置命令查询FE节点信息SHOWfrontends;SHOWPROC
sunny05296
·
2025-02-01 03:59
数据库
数据库
本地Apache Hive的Linux服务器
集群
复制数据到SQL Server数据库的分步流程
我们已经有安装ApacheHive的Linux服务器
集群
,它可以连接到一个SQLServerRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将Hive中所有的表数据复制到SQLServerRDS
weixin_30777913
·
2025-02-01 03:54
数据库
数据仓库
hive
sqlserver
Kafka 如何实现高性能
1.高吞吐量的设计分布式架构:Kafka通过分布式的
集群
架构设计来横向扩展,提高吞吐量。多个生产者、消费者和节点可以同时并行工作,分担流量负载。
言之。
·
2025-02-01 02:49
架构
面试
kafka
分布式
互联网大厂的微服务架构系统应对超大流量解决方案
RateLimiter、Nginx的limit_req模块)限制远程接口的调用速率、限制消息系统的消费速率1.1接入层限流抗疫项目中,一般ISV会把Nginx作为业务的接入层,通过Nginx将请求分发到后端的应用
集群
上
欧子说Java
·
2025-02-01 00:03
架构
微服务
java
Linux上快速压缩与解压缩(zip, tag.gz)
在
集群
上,我们通常会与很大的model或者data压缩文件打交道。此文整理了在linux
集群
上实现快速解压缩的技法。
Dinsanity
·
2025-02-01 00:31
linux
笔记本
linux
运维
服务器
Zookeeper的性能优化与调优
然而,随着
集群
规模的扩大和业务量的增长,Zookeeper的性能瓶颈也逐渐显现出来。为了确保Zookeeper能够稳定高效
AI天才研究院
·
2025-02-01 00:30
AI大模型企业级应用开发实战
大数据AI人工智能
计算
计算科学
神经计算
深度学习
神经网络
大数据
人工智能
大型语言模型
AI
AGI
LLM
Java
Python
架构设计
Agent
RPA
【zookeeper】zookeeper 性能优化与配置详解 一些踩坑建议
通过前面对ZooKeeper的配置可以看出,对ZooKeeper
集群
进行配置的时候,它的配置文档是完全相同的(对于
集群
伪分布模式来说,只有很
九师兄
·
2025-01-31 23:58
不体系
zookeeper
性能优化
服务器
中间件 | RocketMq - [broker 配置]
INDEXbroker.confbroker.conf干货见注释###
集群
名brokerClusterName=DefaultCluster###nameserver#nameserver地址namesrvAddr
问仙长何方蓬莱
·
2025-01-31 23:56
中间件
rocketmq
架构 | 基于 crontab 进程监控增强
集群
可用性
INDEX§0前言§1思路§2实现§0前言
集群
的高可用性可以直接简明的使用SLA来衡量,无所谓其他指标。
问仙长何方蓬莱
·
2025-01-31 23:25
架构
RocketMQ的
集群
架构是怎样的
RocketMQ的
集群
架构包括四个主要角色:NameServer
集群
、Broker主从
集群
、Producer和Consumer客户端。
还能在学一小时
·
2025-01-31 22:46
十七
Rocketmq
java-rocketmq
rocketmq
架构
ambari-server页面错位问题解决
背景:项目新安装的ambari
集群
页面错位如下解决办法(临时):修改ambari-server的前端文件:/usr/lib/ambari-server/web/javascripts/app.js原代码
王木头
·
2025-01-31 20:59
ambari
hadoop
大数据
OpenShift 4 -
集群
节点日志和API审计日志策略
《OpenShift/RHEL/DevSecOps汇总目录》说明:本文已经在OpenShift4.8环境中验证文章目录
集群
节点日志
集群
节点日志类型收集
集群
节点日志OpenShiftAPI的审计日志OpenShiftAPI
dawnsky.liu
·
2025-01-31 18:39
Ops
OpenShift
4
安全
kubernetes
openshift
日志
kubenetes配置vip的一些问题处理
按照kubeadm部署k8s高可用
集群
,执行kubeadminit--configkubeadm-config.yaml--v=5,初始化失败,添加--v=5是为了看更详细的日志信息kubernetes
warrah
·
2025-01-31 18:38
岁月云——运维
kubernetes
kubeadmin
vip
【Elasticsearch 】悬挂索引(Dangling Indices)
Elasticsearch悬挂索引(DanglingIndices)解析与管理1.悬挂索引的定义悬挂索引(DanglingIndices)是指存在于节点上但未被
集群
元数据识别的索引分片。
risc123456
·
2025-01-31 17:31
Elasticsearch
elasticsearch
大数据
搜索引擎
Keepalived高可用
集群
企业应用实例一
一、实现master/slave的keepalived单主架构1.master配置global_defs{notification_email{
[email protected]
}
[email protected]
_server127.0.0.1smtp_connect_timeout30router_idka1.xiao.orgv
DawnEillen
·
2025-01-31 17:29
服务器
运维
在AWS上使用KMS客户端密钥加密S3文件,同时支持PySpark读写和Snowflake导入
现有AWSEMR
集群
上运行PySpark代码,可以读写S3上的数据文件,Snowflake数据仓库也需要导入S3上的文件到表。
weixin_30777913
·
2025-01-31 16:27
python
spark
大数据
云计算
数据仓库
重参数化(Reparameterization)的原理
在VAE中,我们的目标是最大化观测数据的
边缘
对数似然,这涉及到一个隐含变量zzz的积分或求和。
读思辨
·
2025-01-31 15:21
Python
深度学习知识
python
人工智能
Kubernetes可视化界面之DashBoard
1.1DashBoardKubernetesDashboard是Kubernetes
集群
的一个开箱即用的WebUI,提供了一种图形化的方式来管理和监视Kubernetes
集群
中的资源。
幸存者 · KXY
·
2025-01-31 14:07
Kubernetes
kubernetes
容器
云原生
DashBoard
kubernetes建立容器以及可视化界面
集群
管理
前言本文主要讲述在kubernetes上基于ipv4、ipv6双栈
集群
建立容器以及可视化界面的
集群
管理。
weixin_53682254
·
2025-01-31 14:37
IPV6在容器云中的部署
kubernetes
ubuntu
容器
Springboot(四十六)SpringBoot3整合redis并配置哨兵模式
前边我有尝试在Springboot2.6框架中集成redis哨兵
集群
。但是呢,Springboot3中部署redis的配置和Springboot2中的配置完全不同。
camellias_
·
2025-01-31 14:34
spring
boot
redis
后端
【FFmpeg】调用ffmpeg库进行
RTMP
推流和拉流
【FFmpeg】调用ffmpeg库实现
RTMP
推流1.FFmpeg编译2.
RTMP
服务器搭建3.调用FFmpeg库实现
RTMP
推流和拉流3.1基本框架3.2实现代码3.3测试3.3.1推流3.3.2拉流参考
东城山
·
2025-01-31 12:44
FFmpeg
ffmpeg
c++
c语言
video-codec
视频编解码
【ffmpeg命令】
RTMP
推流
文章目录前言推流是什么
RTMP
协议简介
RTMP
的基本概念
RTMP
的工作原理
RTMP
的优缺点ffmpeg
RTMP
推流推流命令综合解释ffplay播放
RTMP
流总结前言在现代的视频直播中,
RTMP
(Real-TimeMessagingProtocol
人才程序员
·
2025-01-31 11:13
音视频基础大合集
ffmpeg
视频编解码
实时音视频
语音识别
计算机视觉
音视频
视觉检测
2025年美国大学生数学建模竞赛思路与源代码【2025美赛A题】
例如,极其古老的寺庙和教堂的台阶可能会出现这样的情况:台阶中央的磨损程度大于台阶
边缘
的磨损程度,而且台阶的顶部
迎风斯黄
·
2025-01-31 11:13
数学建模
美赛
数学建模美赛
2025美赛
Apache Doris 3.0核心特性和生产实践解读
存算分离架构从3.0版本开始,Doris开始支持存算分离模式,用户可以在
集群
部署时选择采用存算一体模式或存算分离模式。存算分离对计算与存储进行解耦,计算节
王知无(import_bigdata)
·
2025-01-31 10:36
apache
Debezium系列之:debezium把sqlserver数据库多张表的数据发送到一个kafka topic
数据库多张表的数据发送到一个kafkatopic一、需求二、debezium实现sqlservercdc三、相关参数详解四、完整参数一、需求把一个sqlserver数据库多张表的数据全部发送到kafka
集群
的一个
快乐骑行^_^
·
2025-01-31 09:21
debezium
Debezium
sqlserver数据库
kafka
topic
DeepSeek极端榨取硬件性能被曝光
DeepSeek的出现是否意味着前沿LLM开发不再需要大规模GPU
集群
?简单来说:不是的。
极道Jdon
·
2025-01-31 08:13
javascript
reactjs
k8s ingress 原理
Kubernetes(k8s)中的Ingress是一种API对象,用于管理对
集群
内部服务的HTTP和HTTPS路由。
MosesZane
·
2025-01-31 08:09
K8S
kubernetes
容器
云原生
SpringBoot在Kubernetes上部署及其扩展实践
但是,如果想要把SpringBoot部署到Kubernetes
集群
上,那么就需要做一些额外的工
AI天才研究院
·
2025-01-31 08:08
Python实战
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
JVM 性能调优
JVM性能调优在高性能硬件上部署程序,目前主要有两种方式:通过64位JDK来使用大内存;使用若干个32位虚拟机建立逻辑
集群
来利用硬件资源。
码农小旋风
·
2025-01-31 08:38
后端
LLM模型部署经验分享
LLM模型部署经验分享作者:大连理工大学李凯首先,你需要选择一个合适的部署平台,这可以是本地服务器、云服务提供商(如AWS、Azure、GoogleCloud等)、
边缘
设备或者特定的部署服务(如HuggingFaceHub
lewis_kai
·
2025-01-31 06:56
阿里云
语言模型
在K8s中部署动态nfs存储provisioner
为了后续给虚拟机里的K8s
集群
安装可用的metrics和logs监控系统(metrics和logs的时序数据库需要永久存储),特为K8s
集群
提供基于nfs的文件服务器一台,并安装nfsprovisioner
超级阿飞
·
2025-01-31 06:24
k8s
cluster
kubernetes
容器
云原生
nfs
Helm Chart 实战指南
1.环境准备在开始之前,确保你已经具备以下环境:Kubernetes
集群
:可以是本地
集群
(如Minikube)或云服务(如GKE、EKS)。Helm:安
ivwdcwso
·
2025-01-31 03:00
运维
Heml
k8s
kubernetes
云原生
包管理
容器
logstash(自动拉取,过滤,推送日志的应用,也是elk架构中的l)
是一个数据采集加工处理以及传输的工具logstash类似于流水线,有三个模块,分辨是input>filter>output,input模块负责收集数据,filter负责处理数据,output负责输出数据logstash需要先保证web
集群
和
长东737
·
2025-01-31 02:51
elk
架构
对 oracle 19.9 数据库安装 19.13 补丁步骤
前提检查df-h磁盘空间要充足crsctlstatres
集群
状态要正常,最好重启主机再检查一遍(时钟不同步可能起不来,权限、密码可能导致不正常)selectname,database_role,open_modefromgv
whn1977
·
2025-01-30 23:01
PostgreSQL的一主一从
集群
搭建部署 (同步)
一、实验环境虚拟机名IP身份简称keep-postgres12-node1192.168.122.87主节点node1keep-postgres12-node2192.168.122.89备节点node2二、安装数据库源码包方式(主)1、创建用户[root@keep-postgres12-node1~]#groupaddpostgres[root@keep-postgres12-node1~]#u
keep__go
·
2025-01-30 23:00
PostgreSQL
postgresql
数据库
Java面试题-rabbitmq-001
为什么使用
集群
RabbitMQ节点不完全拷贝特性
集群
节点类型单节点系统必须是磁盘节点?RabbitMQ要求
集群
中至少有一个磁盘节点?mq的缺点
码者人生
·
2025-01-30 21:14
面试题
java技术面试题集
java面试题
java
面试题
rabbitmq
一个真正可用的docker-compse部署 单机版kafka 版本2.x
确保ZooKeeper
集群
与Kafka版本兼容。如果你计划使用KRaft模式替换传统的ZooKeeper模式,请确保你已经了解新模式的要求和配置。
garen_dimon
·
2025-01-30 14:40
软件研究
docker
kafka
容器
HDFS安全模式
当hdfs
集群
启动的时候,由于要做很多的事情,这期间
集群
进入了安全模式离开安全模式的条件:NameNode启动后会进入一个称为安全模式的特殊状态。处于安全模式的NameNode对于客户端来说是只读的。
哒啵Q297
·
2025-01-30 13:03
hdfs
hadoop
大数据
OpenCV中的
边缘
检测和轮廓处理
在图像处理和计算机视觉任务中,
边缘
检测和轮廓处理是非常重要的步骤。
Luzem0319
·
2025-01-30 12:55
opencv
人工智能
计算机视觉
企业技术架构图
简单说明:1.中间件基础运行环境是经过统一规划的以WebLogic、JBOSS为主的
集群
环境2.企业集成平台是以基础业务应用为基础服务于上层平台和基础业务应用的高度集成平台3.数据中心是企业公共数据的集中管理比如用户数据
iteye_14949
·
2025-01-30 11:47
企业架构图
技术架构图
Kafka原理总结
成为了一个高性能的发布与订阅消息系统一:概念理解Broker部署Kafka进程的服务被称之为Broker,Broker会接收Producer的消息,持久化到本地,然后Comsumer通Pull的形式进行消息拉取,通常使用
集群
的形式进行部署
DEMOAHUI
·
2025-01-30 10:08
mq中间件
kafka
python 分布式
集群
_Python搭建Spark分布式
集群
环境
本文没有使用一台电脑上构建多个虚拟机的方法来模拟
集群
,而是使用三台电脑来搭建一个小型分布式
集群
环境安装。
小国阁下
·
2025-01-30 05:32
python
分布式集群
安全访问服务
边缘
(SASE):网络新时代的安全与连接解决方案
随着信息技术的飞速发展,在企业纷纷拥抱数字业务的过程中,由于
边缘
计算、云服务、混合网络的逐渐兴起,使得本就漏洞百出的传统网络安全架构更加岌岌可危,企业和组织面临着日益复杂且多变的网络安全挑战。
德迅云安全杨德俊
·
2025-01-30 05:30
网络
安全
分布式
spark
集群
完全分布式搭建
)主节点:master-----资源管理调度和任务的分配---------类似yarn从节点:worker-----执行具体的计算任务整体运行架构:编写spark运行程序用户将应用程序提交给spark
集群
驱动其会创建对应的编程入口
。 。,。,。
·
2025-01-30 05:59
分布式
spark
大数据
Apache STORM工作原理详解
ApacheStorm是一个分布式实时计算系统,允许用户在
集群
上运行流式数据处理应用程序。
Neil Parker
·
2025-01-30 01:05
apache
storm
java
一图看懂 HBase 架构(全面详细)
操作HBase工作机制及读写流程HBase架构HBase前言HBase简介什么是HBaseHBase特点NoSQL与RDBMS对比HBase生态圈技术HBase架构Client客户端ZooKeeper
集群
协调一致性服务
BigData_Hubert
·
2025-01-30 01:00
大数据
hbase
hadoop
hbase
组件架构
大数据
AI
集群
:Exo 项目详解
引言随着人工智能技术的迅猛发展,越来越多的人希望在家中运行自己的AI
集群
。传统的AI
集群
通常需要昂贵的硬件和复杂的配置,但Exo项目正是为了解决这个问题而诞生的。
ivwdcwso
·
2025-01-30 00:57
运维
人工智能
AI
Exo
Mooncake:面向大语言模型服务的以 KVCache 为中心的架构
它采用以KVCache为中心的分解架构,将预填充和解码
集群
分离。它还利用GPU
集群
未充分利用的CPU、DRAM和SSD资源来实现KVCache的分解缓存。
步子哥
·
2025-01-29 22:42
AGI通用人工智能
语言模型
架构
人工智能
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他