Hadoop分布式搭建

MYSQL8+CENTOS7.6 主从+keepalived搭建总结

一、环境准备总共3个IP地址：2个物理机IP，1个VIPMASTER：10.18.96.15SLAVE:10.18.96.16VIP：10.18.96.17操作系统：CENTOS7.6数据库：MYSQL8.0.20我的硬件资源是8核16GMYSQL8下载地址：依赖下载地址：（CMAKE如果使用YUM源安装了CMAKE3，也可以不下载了）二、依赖安装在安装MYSQL8之前，得先有前置准备，否则就是各
CRMEB定制开发·2025-02-02 00:14

XXL-JOB v2.4.2 发布 | 分布式任务调度平台

ReleaseNotes1、【优化】调度中心任务Next计算逻辑调整，避免Cron解析失败导致重复执行问题。2、【优化】Cron解析组件代码重构微调，健壮性提升；3、【优化】修改密码交互调整，避免CSRF隐患；4、【优化】JdkSerializeTool流关闭逻辑优化；5、【优化】任务信息、执行日志API非功能设计完善，避免越权隐患；6、【修复】漏洞修复，包括"CVE-2024-42681"子任务
·2025-02-02 00:26

spark和python的区别_Spark入门(Python)

Spark是第一个脱胎于该转变的快速、通用分布式计算范式，并且很快流行起来。
weixin_39934257·2025-02-01 23:42

spark python入门_python pyspark入门篇

一.环境介绍：1.安装jdk7以上2.python2.7.113.IDEpycharm4.package:spark-1.6.0-bin-hadoop2.6.tar.gz二.Setup1.解压spark
weixin_39686634·2025-02-01 23:12

Spark 学习-1 (python)

Spark官方文档快速入门指南Spark架构-Spark教程1.基本概念RDD（resilientdistributeddataset）弹性分布式数据集，对分布式数据和计算的基本抽象。
一二三四0123·2025-02-01 23:40

使用git创建本地的版本库repository

Git介绍Git是分布式版本控制系统，它就没有中央服务器的，每个人的电脑就是一个完整的版本库，这样，工作的时候就不需要联网了，因为版本都是在自己的电脑上。
Just_Paranoid·2025-02-01 23:08

Vue.js组件开发-实现全屏幻灯片左右切换特效

使用Vue实现全屏幻灯片左右切换特效步骤概述创建Vue项目：使用VueCLI快速搭建一个新的Vue项目。设计组件结构：创建一个FullscreenSlider组件，包含幻灯片容器和切换按钮。
LCG元·2025-02-01 22:05

TISC — 系统多学科协同仿真平台

德国TLK-ThermoGmbH公司的TISC软件是一款实现多学科物理协同仿真的平台工具，它提供了一个标准的协同仿真环境，仿真过程既可以支持本地也可以支持远程、分布式，能有效连接起来并进行同步和控制各仿真工具
经纬恒润·2025-02-01 22:34

nosql与mysql的区别_Mongodb Mysql NoSQL的区别和联系

MongoDB是一个基于分布式文件存储的数据库，由C++语言编写，皆在为WEB应用提供可扩展的高性能数据存储解决方案MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富
金七言·2025-02-01 22:31

centos7搭建flink1.18并以 standalone模式启动

版本组件版本scala2.12.20java1.8.0_181flink1.18.1关于scala和Java的安装参考：scala和java安装flink下载地址：flink下载链接集群规划bigdata01bigdata02bigdata03masterworkerworkerworker安装1.创建存放路径三个节点都需要操作用于存放安装包:mkdir/home/software/用于存放存放解
咸鱼c君·2025-02-01 20:50

集群部署时的分布式 session 如何实现？

面试题集群部署时的分布式session如何实现？
打不死的喜羊羊·2025-02-01 20:20

分布式微服务系统架构第90集：现代化金融核心系统

#1.1深化数字化转型，核心面临新挑战1、架构侧：无法敏捷协同数字金融经营模式转型。2、需求侧：业务需求传导低效始终困扰金融机构。3、开发侧：创新产品上市速度低于期望。4、运维侧：传统面向资源型监控体系难以支撑现代化核心。5、监管侧：对业务连续性导向趋严趋细。6、成本侧：单客核心的运营成本逐渐走高。#1.2重塑现代化核心，科技引领新趋势1、新理念：重构行业差异化竞争力的服务体系。2、新架构：构建面
掘金-我是哪吒·2025-02-01 20:50

网络拓扑映射器

管理分布式网络的IT管理员需要对其网络进行地理可视化。自动网络映射
ManageEngine卓豪·2025-02-01 20:48

《大数据时代“快刀”：Flink实时数据处理框架优势全解析》

Flink作为一款开源的分布式流处理框架，在这一领域崭露头角，备受瞩目。一、真正实时，毫秒级响应与部分将流处理模拟为微批处理的框架不同，Flink是专为实时流处理打造的“原生”引擎。
程序猿阿伟·2025-02-01 20:15

XXL-RPC v1.8.0 | 分布式服务框架

ReleaseNotes1、【重构】针对“Core/核心模块”进行架构模块化重构，拆分Provider、Invoker、Serializer、Remoting、Registry和Boot等六个核心模块：Provider：定位为服务提供者，提供RPC服务端能力，包括RCP/HTTPServer、业务Service扫描维护、服务执行等能力。Invoker：定位为服务调用者，提供RPC客户端能力，包括R
·2025-02-01 20:23

第1章 量子暗网中的血色黎明

这是人类耗时三十七年搭建的星际互联网，此刻，却被混沌指令集3.0疯狂啃噬，形成一个个巨大的认知黑洞，仿佛要将人类文明的所有信息吞噬殆尽。她伸出由液态金属构成的手指，在真空中缓缓勾勒
tuan_zhang·2025-02-01 19:11

看深度求索如何思索自己的未来

的崛起无疑是AI领域的一次现象级突破，但其未来能否持续"狂飙"，需从技术、生态、商业和行业环境四个维度进行系统性分析：一、技术护城河的虚实验证1.动态优化技术的含金量：将模型迭代周期压缩至周级别需突破分布式训练瓶颈
tuan_zhang·2025-02-01 19:11

大模型开发流程

架构搭建：搭建整体架构，搭建数据库，可以参考Halukisan/ModelDataBase:Es和向量数据库Milvus的构建与数据存储(github.com
HalukiSan·2025-02-01 19:39

汽车蓝牙钥匙定位仿真小程序

为了探索蓝牙Beacon在短距离定位场景下的可行性，我们搭建了一个简易原型：利用UniApp在移动端采集蓝牙信标的RSSI（信号强度），通过三边定位算法估算钥匙在车内或车周围的坐标，并使用FastAPI
程序员石磊·2025-02-01 19:04

DeepSeek R1本地化部署与联网功能实战指南：从零搭建智能对话系统

前言在人工智能技术快速发展的今天，如何将先进的对话模型DeepSeekR1部署到本地环境并赋予其联网能力，成为许多开发者和企业关注的重点。本文将深入讲解完整的本地化部署流程，并通过实例代码演示如何为模型添加实时网络访问功能。一、环境准备与基础架构1.1硬件需求推荐配置：NVIDIAGPU（RTX3090或更高）+32GB内存+50GB存储空间最低配置：CPU（支持AVX2指令集）+16GB内存+3
Coderabo·2025-02-01 18:32

Prometheus+grafana+alertmanager告警平台搭建

目录一：基本组件理解二：告警平台架构图三：prometheus部署3.1：创建用户3.2：下载安装包3.3：解压3.4：设置prometheus.yml3.5：将prometheus设置为系统服务3.6：启动prometheus服务四：node_exporter部署4.1：下载安装包：4.2：解压4.3:将node_exporter设置为系统服务4.4：启动node_exporter服务五：gra
zhangshaohuas·2025-02-01 18:27

vdist-1.3.1：Python项目自动化构建与分发工具

它集成了分布式系统支持，如Zookeeper，以及云原生技术标准，确保了高效的软件生命周期管理。该工具具备依赖管理、自动化构建流程、环境隔离和多平台支持等功能，并提供了解压后目录结构的详细说明。
46497976464·2025-02-01 18:57

实战 | Docker+Jmeter+InfluxDB+Grafana 搭建性能监控平台

1.为什么要搭建性能监控平台？
测试小迷糊·2025-02-01 17:24

CDH_6.3.2的搭建

一站式搭建大数据的应用1、前提条件和准备工作hostnamectlset-hostnamecdh01hostnamectlset-hostnamecdh02hostnamectlset-hostnamecdh032
我的K8409·2025-02-01 17:22

HBase Shell基本操作

如果Linux系统已配置HBase环境变量，可直接在任意目录下执行hbaseshell脚本命令，就可进入HBaseShell的命令行终端环境，exit可以退出HBaseShell（我安装的是伪分布式的HBase
wanglingli95·2025-02-01 17:20

安装HBase-2.4.12 (hadoop3.3.1)

1.下载https://www.apache.org/dyn/closer.lua/hbase/2.4.12/hbase-2.4.12-bin.tar.gz节点角色配置节点MasterZooKeeperRegionServernode001yesyesyesnode002backupyesyesnode003noyesyes2.解压下载的文件，并切换到新创建的目录。(base)[root@node
不饿同学·2025-02-01 17:18

如何搭建产品架构

而用户将会直接去接触搭建好的产品模型，这里模型的难易程度将直接性的影响用户的认可度。产品架构，最考验PM的判断力和设计能力。产品架构中有什么？
Fadeland·2025-02-01 16:43

使用Ollama本地化部署DeepSeek

它支持多种模型架构，并提供与OpenAI兼容的API接口，适合开发者和企业快速搭建私有化AI服务。Ollama的主要特点包括：轻量化部署：支持在本地设备上运行模型，无需依赖云端服务。
·2025-02-01 16:48

如何在 Kafka 中实现自定义分区器

Kafka是一个分布式流处理平台，能够高效地处理海量数据。默认情况下，Kafka使用键的哈希值来决定消息应该发送到哪个分区，但是有时我们需要根据特定的业务逻辑来定制分区策略。
My LQS·2025-02-01 16:38

探索全球分布式数据库的新篇章：Azure Cosmos DB .NET SDK v3

探索全球分布式数据库的新篇章：AzureCosmosDB.NETSDKv3azure-cosmos-dotnet-v3.NETSDKforAzureCosmosDBforthecoreSQLAPI项目地址
施刚爽·2025-02-01 15:33

【Git】使用笔记总结

文件名中含有空格3.gitadd触发LF回车换行警告4.gitpush提示不存在Origin仓库5.Git与GitHub中默认分支不一致问题6.gitpull提示无法合并无关联仓库概述Git是一个开源的分布式版本控制系统
悬铃木下的青春·2025-02-01 15:00

PyTorch中的unsqueeze函数(自用)

前言最近在学习swin_transformer的模型搭建，其中用到了广播机制，在理解广播机制的过程中发现自己对torch.unsqueeze()函数比较困惑，所以做了个小实验帮助自己理解。
黯岚岚岚岚岚·2025-02-01 15:58

分布式服务接口的幂等性如何设计（比如不能重复扣款）？

面试题分布式服务接口的幂等性如何设计（比如不能重复扣款）？面试官心理分析从这个问题开始，面试官就已经进入了实际的生产问题的面试了。一个分布式系统中的某个接口，该如何保证幂等性？
码农小旋风·2025-02-01 14:26

如何学习Java后端开发

文章目录一、Java语言基础二、数据库与持久层三、Web开发基础四、主流框架与生态五、分布式与高并发六、运维与部署七、项目实战八、持续学习与提升总结路线图学习Java后端开发需要系统性地掌握多个技术领域
写代码的大学生·2025-02-01 14:21

nodejs原生http简单搭建web服务器

原生搭建主要作为了解，真正搭建可以使用一些封装的模块express等简单搭建consthttp=require('http')constserve=http.createServer()serve.on
wcgdecsdn·2025-02-01 13:49

C/S架构与B/S架构

C/S架构是一个分布式的计算架构，客户端通过网络连接与服务器通信，完成任务。C/S架构的优点是数据处理效率高，实现灵活，但缺点是维护和安全方面的要求较高，且需要长期维护客户端和服务器。1.2什么
嗯嗯=·2025-02-01 13:18

jwt权限验证原理

1.JWT，全称是JsonWebToken，是一种JSON风格的轻量级的授权和身份认证规范，可实现无状态、分布式的Web应用授权！
深圳卢先生·2025-02-01 13:46

监控易：一体化智能运维在复杂网络环境的架构优势

本文将从架构优势入手，深入探讨监控易如何通过领先的技术实现分布式复杂网络的灵活扩展，并为企业提供高效、稳定、可靠的运维支持。
MXsoft618·2025-02-01 13:44

【Sharding-Jdbc总结】

文章目录shard-jdbc介绍核心功能分库分表：分布式事务：客户端框架：适用场景核心组件代码实现导包配置文件sql语句java代码shard-jdbc介绍Sharding-JDBC是ApacheShardingSphere
壹佰大多·2025-02-01 12:13

KOA框架编程2-路由使用

目录背景创建路由路由中间件注册测试背景上一篇文章已经完成了KOA骨架的搭建。这节课来讲解下如何添加路由。大家都知道，路由其实就是用来标识应用上的唯一的一个接口，所以接口通常又被称为资源。
独行侠_阿涛·2025-02-01 11:03

TDengine 做为 FLINK 数据源技术参考手册

ApacheFlink是一款由Apache软件基金会支持的开源分布式流批一体化处理框架，可用于流处理、批处理、复杂事件处理、实时数据仓库构建及为机器学习提供实时数据支持等诸多大数据处理场景。
TDengine （老段）·2025-02-01 11:02

Redisson详解

什么业务中用过Redis的分布式锁？在SpringBoot中怎么用分布式锁？用的是哪个工具类？怎么设这个分布式锁？什么是Redisson？
好运仔dzl·2025-02-01 11:32

node笔记_koa框架的路由

往期文章node_windows环境变量配置node_npm发布包linux_配置nodenode_nvm安装配置node笔记_http服务搭建（渲染html、json）node笔记_读文件node笔记
yma16·2025-02-01 11:32

缓存的多种实现方式

1.谷歌的guava包下面的Cache，基于内存的缓存2.自定义缓存，例如使用静态Map实现3.分布式缓存redis，memcached4.EHcache
养生编程大队长·2025-02-01 11:01

从零搭建一个Vue3 + Typescript的脚手架——day2

1.配置ElementPlusElementPlus简介ElementPlus是一个基于Vue3的组件库，它提供了丰富的组件和样式，可以帮助开发者快速构建现代化的Web应用。ElementPlus是基于ElementUI的Vue3版本，它提供了更多的组件和样式，同时也支持Vue3的CompositionAPI。ElementPlus是一个开源项目，它有丰富的文档和示例，可以帮助开发者快速上手。安装
DT——·2025-02-01 10:23

从零搭建一个Vue3 + Typescript的脚手架——day3

3.项目拓展配置(1).配置PiniaPinia简介Pinia是Vue.js3的状态管理库，它是一个轻量级、灵活、易于使用的状态管理库。Pinia是Vue.js3的官方状态管理库，它可以帮助开发者更好地管理应用的状态。Pinia是一个开源项目，它有丰富的文档和示例，可以帮助开发者快速上手。Pinia是一个强大的工具，它可以处理Vue.js3的许多方面，包括状态管理、路由、组件通信等。Pinia是一
DT——·2025-02-01 10:22

Java 分布式与微服务架构：现代企业应用开发的新范式

Java分布式与微服务架构应运而生，为解决这些问题提供了有效的方案。它们使得企业能够构建出更加高效、灵活和可维护的应用系统。二、分布式架构基础2.1分布式架构的概念分布式架构是将一个完整
来恩1003·2025-02-01 10:52

Hadoop--HA架构详解

为了解决上述问题，Hadoop给出了高容错，高可用的HA方案：一个HDFS集群至少存在两个nameNode，一个nameNode处在active（主）状态，其他nameNode处在standby（备
娘子，出来看上帝·2025-02-01 10:20

Hadoop HA 架构

企业里面,多台机器伪分布式每一个角色都是一个进程HDFS:NNSNNDNYARN:RMNM大数据所有组件,都是主从架构master-slaveHDFS读写请求都是先到NN节点,但是,HBase读写请求不是经过
weixin_30569033·2025-02-01 09:49

通过反射搭建简易的Servlet层自动化映射参数并调用Service层业务方法的框架

为了提高开发效率，我们可以通过反射机制搭建一个简易的框架，实现Servlet层参数的自动化映射和Service层方法的自动调用。1.框架设计思路我们的目标是实现以下功能：自动化参数映射：将
未来并未来·2025-02-01 09:42
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他