Hadoop安装配置

3. Windows 10 - Nvm - Node - 创建 Vue项目 Vue-cli 脚手架 3.x

关联链接1.Windows10-Node与Vue-安装Vue2.x及3.x框架-项目创建要点-12.Windows10-Nvm——node版本管理工具的安装配置方法-报错问题集锦与解决方法-工程化Node
沐 修·2024-01-26 15:28

Spark3学习笔记

文章目录一、Spark基础1、Spark概述1.1Spark简介1.2SparkVSHadoop1.3Spark特点1.4Spark入门Demo2、Spark运行模式2.1概述2.2Local模式2.3Standalone
魅Lemon·2024-01-26 15:38

搭建k8s集群实战（三）安装配置containerd、kubelet、kubeadm、kubectl

k8s在1.24之后，使用containerd代码docker提供容器服务。下面说明如果安装containerd，并设置镜像仓库。添加源yuminstall-yyum-utilsyum-config-manager--add-repohttp://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo安装containerd由于CentOS
xiegwei·2024-01-26 13:56

TIDB7.5LTS集群安装配置手册

简介因近期有一个项目需要上线，在评估使用什么架构时，和开发同仁沟通需求，了解到该应用为OLTP但是数据量很集中，会有几张超大的表，如果要保证事务效率，使用mysql集群难免会要做分库分表，对后期的运维带来很大的挑战；而TIDB属于分布式集群，TIKV的行存模式非常适用于大表事务性业务，因此选型用TIDB来作为该应用的底层数据库架构；安装集群的一些基本配置要求请参考如下官方文档，这里不再赘述http
xiaofan23z·2024-01-26 11:02

Apache 辅助系统工具

一丶ApacheSqoop1.Sqoop的介绍：Sqoop的工作机制是将导入或者导出的命令翻译成MapReduce实现，Sqoop可以理解为：SQL到Hadoop或者Hadoop到SQL2.Sqoop的安装配置文件修改
月初，·2024-01-26 11:16

centos同步服务器时间

不同步互联网查看所有节点ntpd服务状态sudosystemctlstatusntpdsudosystemctlstartntpdsudosystemctlis-enabledntpd查询自己的网段ipaddr修改hadoop102
热爱技术的小陈·2024-01-26 10:39

安装配置UAP65和NC65

安装配置UAP65和NC651.UAP65安装反编译插件帮助，安装新软件，workwith中可以随便填，下面那个路径选自己文件夹的反编译插件然后首选项，常规，编辑器，文本关联，jdclassfileviewer
xiaoqdaxia·2024-01-26 09:16

Hadoop3.x源码解析

文章目录一、RPC通信原理解析1、概要2、代码demo二、NameNode启动源码解析1、概述2、启动9870端口服务3、加载镜像文件和编辑日志4、初始化NN的RPC服务端5、NN启动资源检查6、NN对心跳超时判断7、安全模式三、DataNode启动源码解析1、概述2、初始化DataXceiverServer3、初始化HTTP服务4、初始化DN的RPC服务端5、DN向NN注册6、向NN发送心跳四、
魅Lemon·2024-01-26 09:54

Hadoop3.x学习笔记

文章目录一、Hadoop入门1、Hadoop概述1.1简介1.2hadoop优势1.3hadoop组成1.4大数据技术生态体系2、环境准备(重点)2.1模板机配置2.2模板创建3、本地运行模式（官方WordCount
魅Lemon·2024-01-26 09:24

林浩然与Hadoop的奇幻数据之旅

林浩然与Hadoop的奇幻数据之旅LinHaoranandtheEnchantingDataJourneywithHadoop在一个名为“比特村”的地方，住着一位名叫林浩然的程序员大侠。
howard2005·2024-01-26 09:20

centos6.8 php7 nginx,CentOS 8.x编译安装Nginx1.16.x+MySQL8.0.x+PHP7.4.x 7.3.x 7.2.x 7.1.x 7.0.x 5.6.x 5.5...

本文档最后更新于2020年4月7日前传：1、CentOS8.0.1905系统安装配置图解教程http://www.osyunwei.com/archives/10256.html2、CentOS服务器初始化设置
weixin_39624367·2024-01-26 08:57

Hadoop YARN 在快手的应用实践与技术演进之路

yarn的背景yarn大家都比较熟悉了，是从Hadoop1.0分离到2.0的比较重要的特性，把原来的jobtracker集中式调度变成yarn的二级调度，解决集群扩展性的问题。
yoku酱·2024-01-26 08:32

Windows中Zookeeper与kafka的安装配置

一、Zookeeper安装与使用1.安装包下载直接在官网下载即可ApacheZooKeeper。下载后直接解压到本地即可。2.环境配置1>在目录中下增加data和log文件夹2>解压目录下的conf目录，将目录中的zoo_sample.cfg文件，复制一份，重命名为zoo.cfg(因为bin目录中的zkEnv配置文件中识别的配置文件名称即为zoo.cfg)3>在复制的zoo.cfg文件中将data
这个名字还中·2024-01-26 06:16

centos7下mysql5.7.42的安装配置

环境准备：机器配置：mysql5.7.42单机安装1、二进制安装：2、编辑配置文件：3、初始化数据库：4、配置环境变量:5、制作启动文件：6、用初始密码进入mysql，修改初始密码：7、一些问题及解决办法环境准备：操作系统：CentOS7.9[root@dengbao~]#cat/etc/redhat-releaseCentOSLinuxrelease7.9.2009(Core)mysql版本：m
前浪浪奔浪流·2024-01-26 05:36

通过养猪给女朋友讲解Hadoop(一)

六、规章整治奈何桥程序员老王，阎王爷，黑白无常，牛头马面，孟婆。“铃铃铃~”刚躺下的老王又被电话吵醒了，老王接起电话，习惯性地说：“老板，又是哪个系统挂了啊。”“我不是你老板，我是阎王爷”电话那头传来沧桑的声音。“阎王爷，我上有老，下有小，我知道我这么加班不对，但我都是为了生计啊，恳请阎王爷再宽限我几年吧，我把房贷还完就下去报道。”老王哽咽地说着。“这次找你不是想结束你在人间的进程，只是想让你来地
程序员峰哥·2024-01-26 05:55

Flink1.13集成Hadoop3.x以上版本

文章目录背景说明出现问题问题分析问题解决解决展示参考资料背景说明在搭建Flink的HA高可用集群后，打不开webUI界面出现问题打开log日志查看org.apache.flink.core.fs.UnsupportedFileSystemSchemeException:Couldnotfindafilesystemimplementationforscheme'hdfs'.Theschemeisn
未来影子·2024-01-26 04:22

flink1.13.0 环境搭建

#flink部署1.standalone模式2.yarn模式session-cluster模式job-cluster模式3.k8s模式注：yarn模式需要依赖hadoop环境，搭建请参考：https:/
AinUser·2024-01-26 04:50

【Jetbrains全家桶】PyCharm专业版学生用户申请（学信网）+Toolbox App安装配置教程（修改系统、配置和日志目录）

文章目录一、Jetbrains学生用户免费使用1.[Jetbrains官网](https://www.jetbrains.com.cn/en-us/)新申请更新资料申请界面2.[学信网](https://www.chsi.com.cn/xlcx/index.jsp)教育部学籍在线验证报告本人身份核验申请报告二、安装ToolboxApp[ToolboxApp](https://www.jetbrai
QomolangmaH·2024-01-26 04:40

橘子皮的实习周记——第一周总结

一周小总结：目前入职上班时间一周，主要内容是对一个项目进行一些基础的添加操作(用领导A的话来说，就是熟悉一下业务)，我最头疼的就是使用kafkahbasehadoop这些技术，对MySQL内的数据进行一个同步
程序员橘子皮·2024-01-26 03:35

Flink1.13.x+iceberg环境搭建

1.安装hadooptar-zxvfhadoop-2.10.1.tar.gz配置JDK和Hadoop环境变量vi/etc/profileexportJAVA_HOME=/usr/lib/jvm/java
姚贤贤·2024-01-26 02:22

HDFS操作

文章目录主要内容1.编程实现以下指定功能，并利用Hadoop提供的Shell命令完成相同任务：一.shell命令行实现1.向HDFS中上传任意文本文件，如果指定的文件在HDFS中已经存在，则由用户来指定是追加到原有文件末尾还是覆盖原有的文件
K要努力·2024-01-26 02:43

java代码审计入门--01

入门知识总体目标方向先熟悉一些基本的流程安装配置对应环境与分析工具常规漏洞代码审计分析一些框架漏洞代码审计分析学习方向个人认为主要的方向如下：学习了解java的基本使用学习掌握常见Web漏洞的原理（注入
划水的小白白·2024-01-26 01:33

InstantClient+PLSQL安装配置教程

开门见山：Oracleclient和Instantclient都是属于Oracle客户端，Instantclient被称为即时客户端，其相比于前者更为易用轻便、体积更小且拥有作为Oracle客户端的基本功能；而OracleClient体积大、功能全安装和配置均较为复杂，一般使用Instantclient即可。由于Oracle体积太大，可以安装instantclient+plsql取代安装庞大的客户
你若安好我便天晴·2024-01-26 01:51

Hbase伪分布式的安装和配置

一、版本信息和环境1、版本信息：jdk1.8.0_112hadoop-2.6.0zookeeper-3.4.6hbase-1.2.6.12、环境hadoop+zookeeper+hbase,hadoop
lukeyan·2024-01-26 00:41

CentOS7安装配置Redis并配置开机自动启动

下载下载地址：http://www.redis.cn/安装可以使用wget下载rediswgethttp://download.redis.io/releases/redis-6.0.6.tar.gz或者下载后的压缩包上传到服务器将压缩包解压到/opt目录中tar-zxvfredis-6.0.6.tar.gz-C/opt/配置进入Redis目录cd/opt/redis-6.0.6安装C++环境yu
你都会上树？·2024-01-26 00:52

centos手动下载配置redis并自启动

有些服务器不能自动安装配置redis，仓库找不到之类的问题，就需要手动下载配置redis，记录下，方便以后使用（ps，如果报错可能是gcc缺失）1、下载Redis源码包：访问Redis官网或可信的软件仓库
硕宝宝不能太宅·2024-01-26 00:45

【基础配置】Python2/Python3并存安装配置教程

Nx01产品简介Python是一种高级的、解释型的、面向对象的通用编程语言，具有简单易学、代码可读性强、功能强大、可移植性好等特点。它可以应用于多种领域，如Web开发、数据科学、人工智能、机器学习、科学计算、自动化测试等。Python由GuidovanRossum于1989年底发明，目前已成为世界上最流行的编程语言之一。Nx02下载地址https://www.python.org/download
晚风不及你ღ·2024-01-25 23:26

大数据技术之Spark

1.2SparkandHadoopHadoop的MapReduce是大家广为熟知的计算框架，那为什么咱们还要学习新的计算框架Spark呢，这里简单说一下Spark和Hadoop的关系。
严同学正在努力·2024-01-25 21:38

大数据开发之Spark（完整版）

第1章：Spark概述1.1什么是spark回顾：hadoop主要解决，海量数据的存储和海量数据的分析计算。spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。
Key-Key·2024-01-25 21:05

MySQL5.7+ 解压缩版安装配置方法

下MySQL5.7+解压缩版安装配置方法centos7官网下载安装mysql-server#wgethttp://dev.mysql.com/get/mysql-community-release-el7
牧竹子·2024-01-25 20:33

Hadoop on Yarn 提交job失败：java.net.ConnectException：Connection refused

报错：INFOorg.apache.hadoop.service.AbstractService:ServiceNodeManagerfailedinstateSTARTED;cause:org.apache.hadoop.yarn.exceptions.YarnRuntimeException
Anthons·2024-01-25 20:58

sqoop之hive数据仓库和oracle数据库数据转换

sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、oracle)间进行数据的传递，可以将一个关系型数据库（例如：MySQL,Oracle,Postgres
Summer_1981·2024-01-25 20:37

spakr 提交任务

当前集群支持3中集群管理Standalone（spak框架自身拥有能力）ApacheMesosHadoopYARNKubernetes使用/spark-submit脚本提交任务，脚本后面可以接参数.
新鲜氧气·2024-01-25 19:55

如何在Ubuntu安装配置SVN服务端并实现无公网ip访问内网资料库

个人主页:Aileen_0v0热门专栏:华为鸿蒙系统学习|计算机网络|数据结构与算法个人格言:“没有罗马,那就自己创造罗马~”文章目录前言1.Ubuntu安装SVN服务2.修改配置文件2.1修改svnserve.conf文件2.2修改passwd文件2.3修改authz文件3.启动svn服务4.内网穿透4.1安装cpolar内网穿透4.2创建隧道映射本地端口5.测试公网访问6.配置固定公网TCP端
Aileen_0v0·2024-01-25 17:48

hadoop 问题集

1.org.apache.hadoop.yarn.exceptions.InvalidAuxServiceException:TheauxService:mapreduce_shuffledoesnotexistyarn
Pure_Eyes·2024-01-25 17:18

大数据学习之Redis、从零基础到入门（二）

二、Redis安装配置1.VMWare本地虚拟机VMWare准备的为64位查看自己的VMWare是32位还是64位getconfLONG_BIT2.Redis的安装2.1系统选择选择Linux系统2.2Linux
十二点的泡面·2024-01-25 16:38

大数据分析组件Hive-集合数据结构

Hive的数据结构前言一、array数组类型二、map键值对集合类型三、struct结构体类型前言Hive是一个基于Hadoop的数据仓库基础设施，用于处理大规模分布式数据集。
Aimyon_36·2024-01-25 15:15

[AIGC 大数据基础]hive浅谈

Hive作为一个基于Hadoop的数据仓库基础设施，为用户提供了类SQL的查询语言和丰富的功能，使得处理大规模数据变得更加简单和高效。
程序员三木·2024-01-25 14:17

hadoop集群部署

hadoop简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构,是一个存储系统+计算框架的软件框架，主要解决海量数据存储与计算的问题，是大数据技术中的基石。
Cat God 007·2024-01-25 12:45

Hadoop集群的部署，安装和管理（头歌）

示例集群信息以下表格为本教程所用示例集群节点信息：我们准备了三台虚拟服务器，连接方式如下：第一步我们需要在evassh服务器初始化虚拟服务器：cd/optwrapdockerulimit-funlimiteddockerload-iubuntu16-ssh.tardocker-composeup-d注意：请不要在各个虚拟服务器之间进行ssh登录，这种操作会导致无法保存配置数据。正确方法是：在虚拟服
小坏蛋儿&·2024-01-25 12:14

hadoop集群规划部署

一、集群规划三台硬件资源，部署hadoop版本，hadoop-3.3.5，部署后配置文件。Hadoop配置文件分两类：默认配置文件和自定义配置文件。
Snower_2022·2024-01-25 12:43

Hbase集群安装部署

安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper集群，并启动HBase集群安装部署下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com
我还不够强·2024-01-25 12:02

详解Linux运维工程师高级篇（大数据安全方向）.

hadoop安全目录：kerberos（已发布）elasticsearch（已发布）http://blog.51cto.com/chenhao6/2113873knoxoozierangerapachesentry
weixin_30588729·2024-01-25 10:14

学会Kafka

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档目录前言一、kafka概述1.消息中间件对比2.Kafka介绍3.kafka安装配置4.kafka入门二、Kafka的高可用设计1.集群2
学习中的程序媛~·2024-01-25 10:58

大数据Hadoop/Hive学习笔记一（基础概念）

大数据Hadoop/Hive学习笔记一（基础概念）一，概念介绍：大数据：大数据一般用来描述一种数量庞大，复杂的数据集，传统数据处理应用程序难以应对。
lucky_myj·2024-01-25 09:46

ubuntu 22.04 安装mysql-8.0.34

ubuntu22.04安装mysql-8.0.341、基础安装配置更新软件包：sudoaptupdate查看可用软件包：sudoaptsearchmysql-server安装最新版本：sudoaptinstall-ymysql-server
觉皇嵌入式·2024-01-25 09:26

Hadoop-HDFS写流程（从命令行到完成）

一、简单回顾下HDFS的架构如果不了解HDFS的可以看下我写的一篇博客，这里先贴下官网架构图：二、源码分析源码中写的肯定是最真实的，下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4
隔着天花板看星星·2024-01-25 09:23

Hadoop-HDFS高可用

原理参考官网介绍：ApacheHadoop3.3.6–HDFSHighAvailabilityUsingtheQuorumJournalManager二、背景在Hadoop2.0.0之前，NameNode
隔着天花板看星星·2024-01-25 09:52

Hadoop-MapReduce使用说明

下面让我们跟着官网来学习下吧ApacheHadoop3.3.6–MapReduceTutorial二、运行流程大致描述1、用户通过jo
隔着天花板看星星·2024-01-25 09:52

Hadoop-YARN概览

一、什么是YARNYetAnotherResourceNegotiator，另一种资源协调者，简称YARN。基本思想是将资源管理和作业调度/监视的功能拆分为单独的守护进程。其想法是拥有一个全局ResourceManager（RM）和每个应用程序的ApplicationMaster（AM）。可以支持单个作业，也可以支持多个作业的DAG。被称为另一种资源协调者，那就证明有一种比YARN更早的资源协调者
隔着天花板看星星·2024-01-25 09:52
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他