hadoop分布式环境搭建

Redis部署简单步骤及主从搭建

一·单机版部署Redis1·Redis的介绍Redis是一个开源的内存数据结构存储系统，它支持多种数据结构，包括字符串、哈希表、列表、集合、有序集合等，可以用于缓存、消息队列、排行榜、计数器、分布式锁等多种场景
喜欢慢生活·2024-02-09 12:28

ELK环境搭建

一、配置系统：Windows8.1elasticsearch：5.5.1logstash：2.0.0kibana：5.5.1注：由于实验性搭建，选择windows系统，但选择Linux系统效果更佳二、部署方案1.ELK+Redis2.ELK+Kafka注：本次搭建选用第一种方案三、安装前提:下载nssm1.Elasticsearch下载：download2.logstash下载：download3
枯木风·2024-02-09 12:08

数据治理 | 数据清洗必备 — 正则表达式

该板块将涉及以下几个模块：1.计算机基础知识(1)社科研究软硬件体系搭建——虚拟化技术概述与实践2.编程基础(1)数据治理|带你学Python之环境搭建与基础数据类型介绍篇(2)数据治理|带你学Python
企研数据·2024-02-09 11:15

深入了解RocketMQ消息中间件：架构、特性和应用场景

随着系统复杂度的增加和业务需求的变化，传统的直接接口调用已经无法满足大规模分布式系统的通信需求。
一休哥助手·2024-02-09 11:42

RDD

RDD是弹性分布式数据集;Internally,eachRDDischaracterizedbyfivemainproperties:*-Alistofpartitions*-Afunctionforcomputingeachsplit
Frank_8942·2024-02-09 11:27

Android 环境搭建

1、桥接工具安装网站地址：AndroidDevTools-Android开发工具AndroidSDK下载AndroidStudio下载Gradle下载SDKTools下载使用安装包：adb查看当前链接成功的设备：adbdevices使用adbshell指令来进入到手机的后台：
潘多拉的面·2024-02-09 11:22

【如何学习CAN总线测试】——Vector VH6501干扰仪测试BusOff

系列文章目录【如何学习CAN总线测试】系列文章目录汇总文章目录系列文章目录前言一、环境搭建1.硬件环境2.软件环境3.原理二、测试方法1.打开Disturbance(CAN)工程2.使能VH65013.
疯狂的机器人·2024-02-09 10:45

Spark是什么？与MapReduce的对比

Spark是一个基于内存的集群计算系统，是一个分布式的计算框架。Spark可以将计算任务分发到多个机器并行计算。
Tim在路上·2024-02-09 10:27

大数据Hadoop生态圈技术之浅析PageRank计算原理

二、计算环境——Hadoop-2.5.2——四台主机——两台NN的HA——两台RM的HA——离线计算框架MapReduce三、计算原理（1）思考
A尚学堂Nancy老师·2024-02-09 10:23

全网首发，20年架构师手写《架构解密：从分布式到微服务》开源

前言在当今互联网高速发展的时代，架构设计成为了软件开发中不可或缺的一环。随着云计算、大数据和人工智能等技术的快速崛起，如何构建高效、稳定和可扩展的系统架构，成为了每个软件工程师关注的焦点。而在这个领域中，架构师的作用愈发凸显。然而，对于很多开发者来说，架构设计并非易事。在日益复杂和多样化的系统需求下，如何设计出既符合业务需求又能够满足系统性能、可靠性和可扩展性要求的架构，一直是一个挑战。因此，架构
不会敲代码的谌·2024-02-09 09:26

RedissonClient妙用-分布式布隆过滤器

目录布隆过滤器介绍布隆过滤器的落地应用场景高并发处理多个过滤器平滑切换分析总结布隆过滤器介绍布隆过滤器（BloomFilter）是1970年由布隆提出的。它实际上是一个很长的二进制向量和一系列随机映射函数。布隆过滤器可以用于检索一个元素是否在一个集合中。它的优点是空间效率和查询时间都比一般的算法要好的多，缺点是有一定的误识别率和删除困难。什么业务场景需要使用这个布隆过滤器呢？我个人觉得是对误判数据
林犀居士·2024-02-09 09:40

腾讯AI大佬详解Apache Kafka实战

Kafka是一个分布式的、分区的、多复本的日志提交服务。它通过一种独一无二的设计提供了
笑起来真好看LQQ·2024-02-09 08:53

Kubernetes 实战 （二） -- 面向资源的分布式集群 - 运维舵手

本文所涉及的脚本均来自仓库k-kubernetes-public闻名不如见面--HPAHorizontalPodAutoscaling，水平部署自动化弹性伸缩，即K8s支持根据CPU/内存利用率自动伸缩Pod数量，从而动态调整负载。Yaml配置#无状态服务部署DeploymentapiVersion:apps/v1kind:Deploymentmetadata:name:nginx-hpaspec
coder_kkx·2024-02-09 08:00

Kubernetes----Kubernetes学习从入门到实战循序渐进系列篇

Kubernetes的产生背景与简介Kubernetes----Kubernetes组件简介及相关概念Kubernetes----Kubernetes常用插件简介Kubernetes----Kubernetes集群环境搭建
redrose2100·2024-02-09 08:30

macos安装local模式spark

文章目录配置说明安装hadoop安装Spark测试安装成功配置说明Scala-3.18+Spark-3.5.0Hadoop-3.3.6安装hadoop从这里下载相应版本的hadoop下载后解压，配置系统环境变量
SparklingTheo·2024-02-09 08:52

React Native环境配置搭建

ReactNative环境配置搭建（史上最详细教程和注意事项）一、安装node二、安装yarn三、安装JavaDevelopmentKit四、搭建Android开发环境ReactNative官网环境搭建教程写的不够详细
金炑颜·2024-02-09 08:49

Git简单了解

文章目录1、Git概述2、Git下载与安装3、Git代码托管服务3.1、使用码云托管服务1、Git概述什么是GitGit是一个分布式版本控制工具，主要用于管理开发过程中的源代码文件（Java类、xml文件
小林学习编程·2024-02-09 07:34

计算机网络（第六版）复习提纲29

第六章：应用层SS6.1域名系统DNS1DNS被设计为一个联机分布式数据库系统，并采用客户服务器方式（C/S）2域名的体系结构3域名服务器及其体系结构A域名服务器的分类1根域名服务器2顶级域名服务器（TLD
鸥梨菌Honevid·2024-02-09 07:29

EOS 开发环境运行 Hello World 合约

前提需要搭建好开发环境，可以参考之前的文章：EOS开发环境搭建。
SlowGO·2024-02-09 07:35

第二章 整车EE架构的升级关键点

第二章整车EE架构的升级关键点1.汽车EEA升级介绍  汽车电子电器架构升级主要体现在硬件架构，软件架构，通信架构三个方面，下表从介绍三个不同方面的主要升级方向内容硬件硬件从分布式向域控制器/中央集中式发展软件软件架构逐步实现分层解耦网络车载网络骨干由
_长风_·2024-02-09 07:26

第一章 整车EE架构和软件发展情况

第一章整车EE架构的基本介绍和发展1.架构形态整车架构形态目前呈三种阶段：分布式阶段、域内集中阶段、中央计算阶段分布式阶段域内集中阶段中央计算阶段2.架构特点分布式阶段各个ECU是完全分离的，且算力较低
_长风_·2024-02-09 07:53

Redis 笔记十二 Redisson分布式锁的使用

Redisson分布式锁的实现原理加锁机制如果该客户端面对的是一个rediscluster集群，他首先会根据hash节点选择一台机器。
新手路上的程序员·2024-02-09 07:19

【Redis笔记】分布式锁及4种常见实现方法

进程锁控制同一操作系统中多个进程访问某个共享资源，因为进程具有独立性，各个进程无法访问其他进程的资源，因此无法通过synchronized等线程锁实现进程锁什么是分布式锁分
lcx_defender·2024-02-09 07:18

Redisson分布式锁源码_01_可重入锁加锁

前言相信小伙伴都是使用分布式服务，那一定绕不开分布式服务中数据并发更新问题！单系统很容易想到Java的各种锁，像synchronize、ReentrantLock等等等，那分布式系统如何处理？
Roc Lau·2024-02-09 07:48

Redisson 分布式锁源码 01：可重入锁加锁

前言相信小伙伴都是使用分布式服务，那一定绕不开分布式服务中数据并发更新问题！单系统很容易想到Java的各种锁，像synchronize、ReentrantLock等等等，那分布式系统如何处理？
程序员小航·2024-02-09 07:16

SpringBoot中使用注解来实现 Redis 分布式锁-学习笔记

2.分析流程使用Redis作为分布式锁，将锁的状态放到Redis统一维护，解决集群中单机JVM信息不互通的问题，规定操作顺序，保护用户的数据正确。
qinxun2008081·2024-02-09 07:46

Spring Boot + Vue.js + FastDFS 实现分布式图片服务器（IDEA教学)

这个教程的项目采用SpringBoot+Vue.js+FastDFS开发一套完整实用的分布式图片服务。该教程采用IDEA教学，有完整的源码和笔记。
公众号-老炮说Java·2024-02-09 07:46

Redis笔记+Lua+Redisson分布式锁

前言仅记录学习笔记，如有错误欢迎指正。最近打算重新整理一下笔记，好好回顾一下之前学的东西。争取在6月份之前整理完毕，加油加油。一、RedisString（512M）,hash,list,set,zset5种数据类型Redis的持久化RDB：指定的时间间隔内生成数据集的时间点快照，但是一旦redis宕机，最后一次的数据就无法保存。将某个时间点上数据库的状态保存在一个压缩的二进制文件中，通过它可以还原
single-life·2024-02-09 07:15

Hyperledger Fabric模型和工具介绍

建议读者先了解一下区块链技术的一些基本概念，主要包括区块，链，分布式一致性算法，智能合约等，以便更好的理解Fabric是如何将这些理论知识通过技术手段实现的。Fabric模型Fab
冯宇Ops·2024-02-09 07:37

Git学习

Git学习文章目录前言一、Git是什么二、安装三、工作流程总结前言一、Git是什么Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。
星石传说·2024-02-09 07:27

常用的文件系统、存储类型小整理

趁假期整理学习一番~名称OSSFastDFSJuiceFSCIFSCephFSEFSNFS全称ObjectStorageService(对象存储服务)FastDistributedFileSystem(快速分布式文件系统
Hehuyi_In·2024-02-09 06:16

分布式系统架构介绍

1、为什么需要分布式架构？增大系统容量：单台系统的性能瓶颈，多台机器才能应对大规模的应用场景，所以就需要我们的应用支撑平台具备分布式架构。
xmh-sxh-1314·2024-02-09 06:46

zookeeper和k8s_Kubernetes(k8s)运行ZooKeeper，一个分布式系统协调器

运行ZooKeeper，一个分布式系统协调器目标在本教程之后，您将了解以下内容。如何使用StatefulSet部署ZooKeeper集合。如何使用ConfigMaps一致地配置集合。
weixin_39853843·2024-02-09 06:38

Kubernetes的有状态应用示例：ZooKeeper

和follower测试容忍node故障持久化存储参考环境RHEL9.3DockerCommunity24.0.7minikubev1.32.0ZooKeeper简介ApacheZooKeeper是一个分布式的开源协调服务
蓝黑2020·2024-02-09 06:03

SQL条件判断语句嵌套window子句的应用【易错点】--HiveSql面试题25

目录0需求分析1数据准备3数据分析4小结0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
莫叫石榴姐·2024-02-09 06:00

HiveSQL——条件判断语句嵌套windows子句的应用

0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
爱吃辣条byte·2024-02-09 06:58

Git入门

3.创建文件和文件夹三、git本地配置账号和邮箱四、实践操作1.从gitee克隆仓库到本地2.本地初始化仓库并推送远程3.从远程仓库拉取项目到本地4.版本冲突一、Git简介1.什么是GitGit是一种分布式版本控制系统
空空_k·2024-02-09 06:49

下一代浏览器插件开发框架 WXT 入门指南

因为我们在开发一款Chrome插件时，是采用HTML、CSS和JavaScript的传统方式开发，无法直接使用vue、react等常用框架去编写UI，编译环境也需要自己手动去搭建，往往一些简单的插件，光是环境搭建比业务开发时间还要长
codexu_461229187·2024-02-09 06:45

百家cms代审

环境搭建源码链接如下所示https://gitee.com/openbaijia/baijiacms安装至本地后直接解压到phpstudy的www目录下即可接下来去创建一个数据库用于存储CMS信息。
0e1G7·2024-02-09 05:26

大数据 - Spark系列《五》- Spark常用算子

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-09 05:25

【Redis】Redis安装、应用场景、数据类型、配置文件（很全）、发布订阅、事务、分布式锁、持久化、主从复制、集群等

文章目录Redis笔记Redis介绍应用场景相关技术安装Redis操作及数据类型Redis键操作（Key）Redis字符串（String）Redis列表（List）Redis集合（Set）Redis哈希（Hash）Redis有序集合（ZSet，SortedSet）BitmapsHyperLogLogGeospatialRedis配置文件UnitsNetwork网络相关GENERAL通用配置SNAP
haiqiang0225·2024-02-09 05:23

SQL、Hive中的SQL和Spark中的SQL三者联系与区别

联系：分布式计算：三者都是分布式计算的引擎，都可以在大数据集上进行高效的计算和处理。SQL支持：三者都支持SQL语法，用户可以通过SQL语句进行数据查询、分析和处理。
大数据ＳＱＬｂｏｙ·2024-02-09 05:20

vivado ROM_STYLE、RW_ADDR_COLLISION、SHREG_EXTRACT、SRL_STYLE、TRANSLATE_OFF/TRANSLATE_ON OFF/ON、USE_DSP

可接受的值为：•块：指示工具推断RAMB类型组件•分布式：指示工具推断LUTROM。指示工具推断常量阵列转换为分布式RAM（LUTRAM）资源。
cckkppll·2024-02-09 04:23

【MySQL数据库 - 基础篇学习大纲】

MySQL数据库-基础篇分为5个篇章：1.数据库概述与MySQL安装篇第01章：数据库概述第02章：MySQL环境搭建MySQL环境搭建2.SQL之SELECT使用篇第03章：基本的SELECT语句
深山老Java·2024-02-09 04:49

spark从入门到放弃二十八:Spark Sql (1)Data Set

同时SparkSql还可以作为分布式sql查询引擎。SaprkSql最重要的功能之一，就
意浅离殇·2024-02-09 03:17

flink简介

Flink简介其结构图如下：image.pngFlink架构Flink的分布式执行主要分成两个重要进程：master和worker。
三无架构师·2024-02-09 03:54

spark原理总体介绍

部署图image.png从部署图中可以看到整个集群分为Master节点和Worker节点，相当于Hadoop的Master和Slave节点。
tracy_668·2024-02-09 03:48

Memcached缓存服务器

特点原理配置与安装Memcached我们直接使用yum安装就可以了安装后启动修改配置文件测试开发端安装telnet进行远程连接memcached，端口探测以下显示为连接成功测试Memcached/redis是高性能的分布式内存缓存服务器
藻头男·2024-02-09 03:45

2020-11-04

B2C网站微服务架构图.png微服务划分图.png一简介1.1分布式基础概念微服务：拒绝大型单体应用，基于业务边界进行服务微化拆分，各个服务独立部署运行。
肝点啥_董晓宁·2024-02-09 02:51

Filter 实现过滤符合条件的请求并落库

其他系列文章导航Java基础合集数据结构与算法合集设计模式合集多线程合集分布式合集ES合集文章目录其他系列文章导航文章目录前言一、配置过滤器类二、定义数据表、实体类、Mapper2.1DDL2.2实体类
绿皮龟·2024-02-09 02:05
上一页 33 34 35 36 37 38 39 40 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他