E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
bigdata集群搭建
Hadoop架构
一、案列分析1.1案例概述现在已经进入了大数据(
BigData
)时代,数以万计用户的互联网服务时时刻刻都在产生大量的交互,要处理的数据量实在是太大了,以传统的数据库技术等其他手段根本无法应对数据处理的实时性
henan程序媛
·
2024-09-16 00:14
hadoop
大数据
分布式
【Linux 从基础到进阶】Kubernetes
集群搭建
与管理
Kubernetes
集群搭建
与管理Kubernetes(简称K8s)是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。
爱技术的小伙子
·
2024-09-15 03:00
Linux从基础到进阶
linux
kubernetes
运维
elasticsearch数据迁移之elasticdump
系列文章目录第一章es
集群搭建
第二章es集群基本操作命令第三章es基于search-guard插件实现加密认证第四章es常用插件文章目录系列文章目录前言一、elasticdump是什么?
迷茫运维路
·
2024-09-14 12:47
elasticsearch
中间件
elasticsearch
linux
运维
echarts象形渐变柱状图
/
bigdata
/components/item.vue'exportdefault{components:{item}}.page-con{width:100%;height:100%;.main-con
星星跌入梦境*
·
2024-09-14 10:02
echarts
angular.js
前端
DMDPC安装部署
本文是在1台Linux虚拟机上通过创建四个实例的方式进行
集群搭建
.2.DMDPC集群规划DMD
丷月亮是指路牌
·
2024-09-14 06:39
数据库
Redis安装详解(单机安装,sentinel哨兵模式,Cluster模式)
1.2linux中安装2Redis主从复制安装3Redis哨兵模式安装4Springboot项目操作RedisSentinel集群5官方cluster分区搭建5.1部署架构5.2RedisCluster的优势5.3
集群搭建
dream21st
·
2024-09-13 22:18
中间件学习笔记
sentinel
redis
java
【Redis】Redis
集群搭建
与管理: 原理、实现与操作
目录集群(Cluster)基本概念数据分片算法哈希求余⼀致性哈希算法哈希槽分区算法(Redis使⽤)
集群搭建
(基于docker)第⼀步:创建⽬录和配置第⼆步:编写docker-compose.yml第三步
Hsu琛君珩
·
2024-09-11 00:02
Redis
redis
bootstrap
数据库
MySQL8.0
集群搭建
文章目录环境准备安装MySQL8.0配置主服务配置从服务器主从复制:即主服务器上的所有操作(创建库,修改表等)会被同步到从服务器上,但是在从服务器上的操作不会进入到主服务器中环境准备两台服务器,一主一从安装docker#国内源curl-fsSLhttps://get.docker.com|bash-sdocker--mirrorAliyun启动dockersystemctlstartdocker配
我有一只肥螳螂
·
2024-09-09 08:46
MySQL
mysql
大数据(Big Data):探索信息时代的海量数据世界
大数据(
BigData
):探索信息时代的海量数据世界一、大数据的定义与特点大数据(
BigData
),或称巨量资料,是指那些在传统数据处理应用软件无法有效捕捉、管理和处理的数据集合。
hong161688
·
2024-09-06 05:19
大数据
Ingest Pipeline & Painless Script
DELETEtech_blogs#Blog数据,包含3个字段,tags用逗号间隔PUTtech_blogs/_doc/1{"title":"Introducing
bigdata
......","tags
折纸虚桐
·
2024-09-05 22:03
ES学习笔记
elasticsearch
mysql的主从复制延迟问题
mysql的主从复制延迟问题https://blog.csdn.net/qq_41683000/article/details/125436839一主一从,双主双从的mysql
集群搭建
,在单机应用的时候看起来没有问题
wowocpp
·
2024-09-05 00:06
mysql
数据库
kafka
集群搭建
Kafka
集群搭建
一、概念说明它是一个分布式消息系统,由linkedin使用scala编写,用作LinkedIn的活动流(ActivityStream)和运营数据处理管道(Pipeline)的基础。
java皮皮虫
·
2024-09-04 16:48
kafka
springboot
后台
kafka
kafka测试
kafka集群
基于分布式计算的电商系统设计与实现【系统设计、模型预测、大屏设计、海量数据、Hadoop集群】
Abstract1引言1.1研究背景1.2国内外研究现状1.3研究目的1.4研究意义2关键技术理论介绍2.1Hadoop相关组件介绍2.2分布式集群介绍2.3Pyecharts介绍2.4Flask框架3分布式
集群搭建
及数据准备
王小王-123
·
2024-09-03 04:54
hadoop
大数据
分布式
电商系统分析
分布式计算
【Mysql】通过Keepalived搭建mysql双主高可用集群
VIP(虚拟ip)hadoop01192.168.10.200centos7_x865.7192.168.10.253hadoop03192.168.10.202centos7_x865.7二、mysql
集群搭建
两台节点
维运
·
2024-08-31 15:13
数据库
mysql
数据库
HIVE 数据模型
体系结构:元数据/HQL的执行安装:嵌入/远程/本地管理:CLI/web界面/远程服务数据类型:基本/复杂/时间数据模型:数据存储/内部表/分区表/外部表/桶表/视图WEB管理工具:http://tdxy-
bigdata
HFDYCYY
·
2024-08-29 19:47
大数据
Openstack 与 Ceph
集群搭建
(下): Openstack部署
文章目录文章参考部署节点准备1.修改Host文件与hostname名称2.安装NTP软件3.网卡配置信息4.开启Docker共享挂载5.安装python虚拟环境6.安装kolla-ansible7.加载AnsiblegalaxyrequirementsOpenstack安装前预配置1.配置密码2.配置multinode文件3.修改全局配置文件Openstack正式安装1.启动bootstrap-s
范枝洲
·
2024-08-29 01:43
系统运维
openstack
ceph
clickhouse
集群搭建
文章目录安装clickhouse修改集群配置文件启动clickhouse集群测试集群的可用性安装clickhouse本次用了4台服务器搭建clickhouse集群,使用rpm安装方式在4台服务器上安装clickhouse,步骤如下:sudoyuminstall-ycurlcurl-shttps://packagecloud.io/install/repositories/altinity/clic
颍天
·
2024-08-28 14:56
clickhouse
数据库
读写分离
集群搭建
目录一、配置读写分离集群1、环境说明2、数据准备3、配置主库GRP1_RWW_01配置dm.ini配置dmmal.ini配置dmarch.ini配置dmwatcher.ini启动主库设置OGUID修改数据库模式4、配置备库GRP1_RWW_02配置dm.ini配置dmmal.ini配置dmarch.ini配置dmwatcher.ini启动备库设置OGUID修改数据库模式5、配置备库GRP1_RWW
奥德彪的蕉
·
2024-08-28 11:41
达梦
数据库
服务器
oracle
sql
运维
打造扛得住的MySQL数据库架构视频教程-数据库结构优化 高可用架构设计
打造扛得住的MySQL数据库架构视频教程-数据库结构优化高可用架构设计30套数据库系列Mysql/SQLServer/Redis/Mongodb/Nosql精讲训练营项目实战,数据库设计,架构设计,性能管理,
集群搭建
cd137a460a79
·
2024-08-28 04:10
数据库基础:mysql主从
集群搭建
position:表示从file的哪个位置开始;binlog_do_db:表示同步哪一个库在后面的slave配置中,这三个结果都需要使用到。4.Slave(6.85)节点配置配置从库(1)修改my.cnf文件,在[mysqld]加入下面的内容:#服务的唯一编号server-id=2#开启mysqlbinlog功能log-bin=mysql-bin#binlog记录内容的方式,记录被操作的每一行bi
2401_84049040
·
2024-08-27 00:58
程序员
数据库
mysql
android
基于Zookeeper搭建Kafka高可用集群
基于Zookeeper搭建Kafka高可用集群一、Zookeeper
集群搭建
为保证集群高可用,Zookeeper集群的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的集群。
数字游牧人0v0
·
2024-08-26 16:58
大数据BigData
kafka
java-zookeeper
zookeeper
大数据
zookeeper+KAFKA
集群搭建
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、集群管理等。因为Kafka集群是把状态信息保存在Zookeeper中的,并且Kafka的动态扩容是通过Zookeeper来实现的,所以需要优先搭建Zookeer
懵逼的运维弟弟
·
2024-08-26 16:28
Linux
zookeeper+KAFKA
集群搭建
山东大学大数据管理与分析知识点总结
大数据概述大数据(
bigdata
),或称巨量资料,指的是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产大数据指不用随机分析法(抽样调查)这样的捷径,而采用所有数据进行分析处理大数据四个本质特征大量化
weixin_51565263
·
2024-08-26 14:46
云计算
大数据
mapreduce
数据仓库
大数据-Big Data
大数据(
BigData
)是指规模庞大、多样化、高速度的数据集合。与传统数据相比,大数据具有一些显著的特点,并广泛应用于各个领域。
Dingdangr
·
2024-08-26 13:34
big
data
Redis
集群搭建
1.环境:centos6.7、redis-6.2.62.模式:5主+20丛+5备丛(即:1主-4从-1备丛)3.服务器环境检查及安装查看服务器是否安装了gccrpm-qgcc若没有安装,则进行gcc安装yuminstall-ygcc4.redis下载前往redis官网下载https://redis.io/downloadredis-6.2.6.tar.gz5.将redis-6.2.6.tar.gz
丿似锦
·
2024-08-24 21:00
数据库
redis
bootstrap
前端
达梦数据库DMDSC搭建
DMDSC目录前言DMDSC名词解析DMCSS控制节点(ControlNode)普通节点(NormalNode)DMCSS工作原理DMASMdmasvrmal搭建步骤准备共享盘初始化安装DM数据库软件
集群搭建
配置
大大大大大魔王丶
·
2024-08-23 20:21
数据库
Ubuntu下部署Hadoop集群+Hive(二)
Hadoop
集群搭建
准备环境hadoop-3.3.6.tar.gz,jdk-8u421-linux-x64.tar.gz根据自己的使用下载对的hadoop和jdk版本hadoop下载地址:ApacheHadoopJDK
岩屿
·
2024-08-23 14:46
hadoop
hive
BigData
学习日记
做一个简单的开篇说明从今天开始,每天定时更新当天所学知识,进行知识总结的同时进行一下日子的计算,也算为自己加油。
wsuan
·
2024-08-23 14:29
pyflink1.18.0 报错 TypeError: cannot pickle ‘_thread.lock‘ object
my_datastream.key_by(lambdax:x[0]).process(MyProcessFunction())#返回元组即:f0f1f2三列File"/Users/thomas990p/
bigdata
Soft
Thomas2143
·
2024-03-19 18:31
总结
pyflink
opendronemap
集群搭建
需求OpenDroneMap(ODM)是一个开源项目,旨在利用无人机采集的图像数据生成地图、模型和其他地理空间数据。它主要解决以下问题:航空摄影数据处理:ODM可以处理无人机拍摄的大量航空图像数据,通过图像处理和计算机视觉技术生成高质量的地图和模型。地图制作与更新:利用ODM,用户可以快速、成本效益地生成地图,并及时更新地理空间数据,有助于城市规划、灾害监测等领域的应用。三维建模:ODM可以生成精
Robber2000
·
2024-03-15 09:08
云计算
容器
运维
云原生
Hbase
集群搭建
超详细教程
Hbase
集群搭建
前言详细步骤1、下载安装包2、解压3、修改配置文件3.1修改hbase-env.sh文件3.2修改hbase-site.xml3.3修改regionservers文件4、分发hbase
笑看风云路
·
2024-03-13 09:02
集群搭建系列
hbase
hbase
hadoop
大数据
区块链学习Day01
学习前的知识储备1.go语言(必须掌握)2.数据库基本操作3.基本算法4.Linux基本操作5.Linux
集群搭建
6.Web常识Pow工作量证明一、概念的介绍1.P2P区块链有一个前提,就是P2P,这并非是借贷平台
宝哥的菜鸟之路
·
2024-03-11 14:13
区块链
学习
springcloud-nacos 配置中心和
集群搭建
SpringCloudNacos配置中心是一个用于管理和存储应用程序配置信息的服务。它提供了集中式的配置管理、动态配置更新、配置版本控制等功能,使得应用程序可以在运行时获取到最新的配置信息。要搭建SpringCloudNacos配置中心,你可以按照以下步骤进行操作:下载并安装Nacos:首先,你需要从Nacos的官方网站下载Nacos服务器的二进制文件,并将其解压到合适的目录。启动Nacos服务器
momo_128
·
2024-03-06 03:55
java
spring
cloud
spring
后端
Zabbix HA高可用
集群搭建
ZabbixHA高可用
集群搭建
ZabbixHA高可用
集群搭建
一、Zabbix高可用集群(ZabbixHA)二、部署Zabbix高可用集群1、两个服务端配置1.1主节点ZabbixServer配置1.2备节点
KK小草莓
·
2024-03-03 20:44
zabbix
Elasticsearch单机
集群搭建
第一步:下载解压官网下载elasticsearch安装包:下载地址创建一个elasticsearch的路径/usr/local/tools/elasticsearch解压tar-xzvfelasticsearch-7.5.0-linux-x86_64.tar.gz重命名mvelasticsearch-7.5.0elasticsearch-7.5.0-node-1创建好三个节点,如下图:image.
dafengyiba
·
2024-02-20 20:07
【k8s概念】一文搞懂k8s核心概念!!!
文章目录1.k8s简介1.1k8s概念1.2作用/功能2.k8s
集群搭建
方式3.k8s核心组件3.1MasterNode(控制平面组件)3.2WorkerNode4.k8s核心概念4.1容器4.2工作负载
我是小bā吖
·
2024-02-20 13:04
k8s
kubernetes
运维
docker
云原生
【Redis快速入门】Redis三种
集群搭建
配置(主从集群、哨兵集群、分片集群)
个人名片:作者简介:一名大三在校生,喜欢AI编程❄️个人主页:落798.个人WeChat:hmmwx53️系列专栏:️零基础学Java——小白入门必备重识C语言——复习回顾计算机网络体系———深度详讲HCIP数通工程师-刷题与实战微信小程序开发——实战开发HarmonyOS4.0应用开发实战——实战开发Redis快速入门到精通——实战开发每日一句:我很忙,但我要忙的有意义!欢迎评论点赞收藏加关注
落798.
·
2024-02-20 10:32
Redis入门到实战
redis
notepad++
数据库
Redis哨兵模式
一.哨兵的作用及工作原理1.哨兵的作用2.哨兵监测集群的方式3.master宕机后哨兵如何从众多slave中选举一个slave作为新的master4.哨兵如何实现故障转移5.总结二.哨兵
集群搭建
1.架构模式
钗头风
·
2024-02-20 05:02
Redis
redis
数据库
缓存
扩展学习|大数据,新的认识论和范式转变
文献来源:[1]KitchinR.
BigData
,NewEpistemologiesandParadigmShift[J].
BigData
&Society,2014,1(1):1-12.DOI:10.1177
封印师请假去地球钓鱼
·
2024-02-19 20:32
计算机辅助信息分析主题扩展阅读
大数据
科研范式转变
FastDFS 分布式
集群搭建
详解
文章目录前言1、整体架构2、安装配置FastDFS集群2.1配置tracker2.2配置storage3、启动集群4、查看集群情况5、nginx配置5.1配置storage的四台机器的nginx5.2配置tracker的两台机器的nginx5.3配置统一入口前言阅读本文章之前请先看上一篇单机版FastDFS安装配置详解,所以本文有些内容我就一笔带过,传送门:《FastDFS环境搭建及使用详解》1、
程序员大佬超
·
2024-02-19 16:39
FastDFS
分布式
FastDFS
fdfs
阿里云计算平台大数据基础工程技术团队直聘!!!
大数据基础工程技术团队,隶属于阿里云智能集团计算平台事业部,是一支负责阿里集团、公共云和混合云场景计算平台大数据&AI产品的稳定性建设、架构&成本优化、运维产品ABM(Apsara
Bigdata
Manager
·
2024-02-19 11:20
大数据
ETCD集群代码添加节点
集群搭建
下面只用同一台服务器进行三个成员节点的开启节点1.
RickJay
·
2024-02-19 11:45
SpringCloud之Nacos用法笔记
负载均衡策略根据集群负载均衡加权负载均衡Nacos环境隔离-namespaceNacos与eureka的对比临时实例与非临时实例设置Nacos配置管理统一配置管理微服务配置拉取配置自动刷新远端配置共享Nacos
集群搭建
初始化数据库下载
Gunalaer
·
2024-02-19 10:14
springcloud
spring
cloud
笔记
spring
单细胞注释
01-17多个样本单细胞分析流程-(jianshu.com)一、人工注释人工注释需要借助文献检索marker或者结合常用的注释数据库,例如两个常用的数据库:CellMarker(http://bio-
bigdata
.hrbmu.edu.cn
刘综一
·
2024-02-13 23:57
[
bigdata
-050] 规则引擎和专家系统pyke+pyclipse+drools
反欺诈最有效的方式,是搜索所有的欺诈事件,然后将欺诈行为和防范措施进行规则化,表达成产生式规则,再由规则引擎驱动进行反欺诈业务实战。产生式规则,就是AI领域早期的专家系统。规则引擎如下:1.clipsehttp://clipsrules.sourceforge.net/http://clipsrules.sourceforge.net/FAQ.html这个是nasa在1985年开发的,ansic,
未济2019
·
2024-02-13 20:37
hadoop 分布式集群安装与原理
对很多人来说,学习大数据都止步于
集群搭建
,即使是那些工作过很多年的JAVA程序员也不例外,我们分享一套能让您轻松完成
集群搭建
的方法,包括Hadoop的源码编译、企业级环境安装与配置和常用大数据组件的基本原理
海牛大数据_青牛老师
·
2024-02-13 12:44
dockerer-compose搭建单机clickhouse集群,工作中最新亲测能用,超详细
公司这几天让我搭建clickhouse集群,这一周我在公司的角色更像是运维人员搭建集群和服务,一个字干,另外kafka搭建点击这篇,zookeeper
集群搭建
点击这篇。
迷梦星河
·
2024-02-13 11:53
服务及集群搭建
大数据
docker
linux
java
clickhouse
【Fellow 云集 | 经管主题/EI会议 | 快见刊】第三届大数据、区块链与经济管理国际学术会议 (ICBBEM 2024),早投稿、早送审、早录用!
第三届大数据、区块链与经济管理国际学术会议(ICBBEM2024)The3rdInternationalConferenceon
Bigdata
BlockchainandEconomyManagement
艾思科蓝 AiScholar
·
2024-02-13 11:59
学术会议
大数据
区块链
信任链
人工智能
软件工程
线性回归
算法
python+大数据学习打卡day1
企业数据分析方向:现状分析:离线分析原因分析:实时分析预测分析:机器学习数据分析基本流程:采集、处理、分析、应用大数据:大数据(
bigdata
),指的是所涉及的资料量规模巨大到无法透过主
岁月不静好456
·
2024-02-13 11:11
big
data
学习
Zookeeper学习系列【二】Zookeeper 集群章节之
集群搭建
本章内容主要讲的是
集群搭建
相关的知识。本篇的内容主要包含以下几点:Zookeeper运行模式Zookeeper搭建一、Zookeeper运行模式Zookeeper有两种运行模式,单点模式和集群模式。
Richard_易
·
2024-02-13 04:20
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他