Linux安装Hadoop

Linux安装Mysql8，过程详细（离线安装mysql）

因公司需要，需要在服务器上安装一个mysql，但是机器没有外网权限，所以记录一下安装过程，供大家参考。官网下载安装包地址：https://dev.mysql.com/downloads/如图示，选择MySQLCommunityServer如图示，选择对应版本进行下载，此处我的选择是8.0.33点击下载按钮弹出下图，点击红框中的连接，跳过登录，直接下载检查服务器是否已经安装mysql使用命令查看是否
荔枝味的真知棒·2024-01-25 17:19

hadoop 问题集

1.org.apache.hadoop.yarn.exceptions.InvalidAuxServiceException:TheauxService:mapreduce_shuffledoesnotexistyarn
Pure_Eyes·2024-01-25 17:18

网安培训第三期——Docker和python

文章目录day1Docker安装windows安装dockerlinux安装dockerdocker入门11.配置国内镜像源2.常用命令day1题目day2docker入门2docker挂载文件day2
GrandNovice·2024-01-25 15:25

虚拟系统管理器QEMU/KVM

的共享目录输入命令连接共享目录smbclient//ip/共享目录-U用户名输入密码从共享目录下载单个文件到主机get文件名共享目录的名称中包含空格时，将名称放在双引号中退出连接quit上传文件put文件名Linux
忘心虚无·2024-01-25 15:48

大数据分析组件Hive-集合数据结构

Hive的数据结构前言一、array数组类型二、map键值对集合类型三、struct结构体类型前言Hive是一个基于Hadoop的数据仓库基础设施，用于处理大规模分布式数据集。
Aimyon_36·2024-01-25 15:15

[AIGC 大数据基础]hive浅谈

Hive作为一个基于Hadoop的数据仓库基础设施，为用户提供了类SQL的查询语言和丰富的功能，使得处理大规模数据变得更加简单和高效。
程序员三木·2024-01-25 14:17

hadoop集群部署

hadoop简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构,是一个存储系统+计算框架的软件框架，主要解决海量数据存储与计算的问题，是大数据技术中的基石。
Cat God 007·2024-01-25 12:45

Hadoop集群的部署，安装和管理（头歌）

示例集群信息以下表格为本教程所用示例集群节点信息：我们准备了三台虚拟服务器，连接方式如下：第一步我们需要在evassh服务器初始化虚拟服务器：cd/optwrapdockerulimit-funlimiteddockerload-iubuntu16-ssh.tardocker-composeup-d注意：请不要在各个虚拟服务器之间进行ssh登录，这种操作会导致无法保存配置数据。正确方法是：在虚拟服
小坏蛋儿&·2024-01-25 12:14

hadoop集群规划部署

一、集群规划三台硬件资源，部署hadoop版本，hadoop-3.3.5，部署后配置文件。Hadoop配置文件分两类：默认配置文件和自定义配置文件。
Snower_2022·2024-01-25 12:43

Linux安装ftp服务

linux安装ftp服务1、打开终端，修改root用户密码：sudopasswdroot然后会要求输入当前用户的密码接着输入root的密码最后确认输入root的密码2、切换到root用户：suroot然后要求输入
php技师·2024-01-25 12:03

Hbase集群安装部署

安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper集群，并启动HBase集群安装部署下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com
我还不够强·2024-01-25 12:02

详解Linux运维工程师高级篇（大数据安全方向）.

hadoop安全目录：kerberos（已发布）elasticsearch（已发布）http://blog.51cto.com/chenhao6/2113873knoxoozierangerapachesentry
weixin_30588729·2024-01-25 10:14

大数据Hadoop/Hive学习笔记一（基础概念）

大数据Hadoop/Hive学习笔记一（基础概念）一，概念介绍：大数据：大数据一般用来描述一种数量庞大，复杂的数据集，传统数据处理应用程序难以应对。
lucky_myj·2024-01-25 09:46

Hadoop-HDFS写流程（从命令行到完成）

一、简单回顾下HDFS的架构如果不了解HDFS的可以看下我写的一篇博客，这里先贴下官网架构图：二、源码分析源码中写的肯定是最真实的，下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4
隔着天花板看星星·2024-01-25 09:23

Hadoop-HDFS高可用

原理参考官网介绍：ApacheHadoop3.3.6–HDFSHighAvailabilityUsingtheQuorumJournalManager二、背景在Hadoop2.0.0之前，NameNode
隔着天花板看星星·2024-01-25 09:52

Hadoop-MapReduce使用说明

下面让我们跟着官网来学习下吧ApacheHadoop3.3.6–MapReduceTutorial二、运行流程大致描述1、用户通过jo
隔着天花板看星星·2024-01-25 09:52

Hadoop-YARN概览

一、什么是YARNYetAnotherResourceNegotiator，另一种资源协调者，简称YARN。基本思想是将资源管理和作业调度/监视的功能拆分为单独的守护进程。其想法是拥有一个全局ResourceManager（RM）和每个应用程序的ApplicationMaster（AM）。可以支持单个作业，也可以支持多个作业的DAG。被称为另一种资源协调者，那就证明有一种比YARN更早的资源协调者
隔着天花板看星星·2024-01-25 09:52

Hadoop-HDFS读流程（从输入命令到回显）

一、简单回顾下HDFS的架构如果不了解HDFS的可以看下我写的一篇博客，这里先贴下官网架构图：二、静静的思考一会儿爱因斯坦说过：想象力比知识更重要。想象力推动世界，是知识进化的源泉。我们先不看源码，先通过官方架构图和我们对HDFS的了解来想象下读流程是什么样的。我要读HDFS上的一份文件，首先需要知道它在哪台节点上，HDFS上存储的文件都是以块的形式存放在各个DataNode节点上。因此需要知道这
隔着天花板看星星·2024-01-25 09:52

Hadoop-MapReduce-源码跟读-客户端篇

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、从WordCount进入源码用idea将源码加载进来后
隔着天花板看星星·2024-01-25 09:52

hadoop 三种运行方式

一、本地运行方式1创建在hadoop-3.3.5文件下面创建一个wcinput文件夹[antares@hadoop1hadoop-3.3.5]$mkdirwcinput[antares@hadoop1hadoop
Snower_2022·2024-01-25 09:51

Hadoop-MapReduce-跟着日志理解整体流程

一、数据准备viinput_01.txtviinput_02.txtviinput_03.txt文本内容如下：-----------------input_01.txt----------------javascalapythonc++javajsgogovbaccc++javascalapythonphpcsshtmljsjavajavascalavbac#.netRRRjava--------
隔着天花板看星星·2024-01-25 09:49

HBase学习五：运维排障之备份与恢复

HBase的所有文件都存储在HDFS上，因此只要使用Hadoop提供的文件复制工具distcp将HBASE目录复制到同一HDFS或者其他HDFS的另一个目录中，就可以完成对源HBase集群的备份工作copyTable
Studying！！！·2024-01-25 09:49

Linux安装MySQL8.x详细步骤

一、获取mysql参考这篇文章，但是文章中有些问题，改正了一下。官网下载使用ftp工具上传或者使用wget指令下载1.下载mysqlwgethttps://dev.mysql.com/get/Downloads/MySQL-8.0/mysql-8.0.20-linux-glibc2.12-x86_64.tar.xz2.解压mysqltarxvfmysql-8.0.20-linux-glibc2.1
等待花开I·2024-01-25 09:17

大数据平台组件日常运维操作说明（Hadoop/Zookeeper/Kafa/ES/Mysql/Spark/Flume/Logstash/Tomcat）

Hadoop日常运维操作说明hdfs生产环境hadoop为30台服务器组成的集群，统一安装配置，版本号为2.7.7部署路径：/opt/hadoop启动用户：hadoop配置文件：/opt/hadoop/
love6a6·2024-01-25 07:12

Elasticsearch7.17.5 Linux安装部署

Elasticsearch安装部署下载地址：https://www.elastic.co/cn/downloads/past-releases#elasticsearch单机&集群单台Elasticsearch服务器提供服务，往往都有最大的负载能力，超过这个阈值，服务器性能就会大大降低甚至不可用，所以生产环境中，一般都是运行在指定服务器集群中。除了负载能力，单点服务器也存在其他问题：单台机器存储容
四维大脑·2024-01-25 07:03

linux安装jenkins及相关配置

1.准备1.1安装JDK（必须）：https://blog.csdn.net/weixin_43909881/article/details/1182771471.2安装maven：https://blog.csdn.net/weixin_43909881/article/details/1182769422.安装我的系统是CentOS7，根据官网推荐的方式进行安装，其他linux系统也可以在官网
小白菜菜菜菜菜菜菜菜菜菜菜菜·2024-01-25 07:02

基于CentOS7 Hadoop-2.7.2伪分布式部署

1、基本环境Linux版本：CentOS7.0JDK版本：jdk-7u79-linux-x64.tar.gzHadoop版本：hadoop-2.7.2.tar.gzjdk以及Hadoop安装在/usr目录下
程序员小H·2024-01-25 07:23

Hadoop HDFS 实现原理图文详解

一、HDFS体系结构1.1HDFS简介Hadoop分布式文件系统(HDFS)是运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
禅与计算机程序设计艺术·2024-01-25 07:49

震惊！装了这个插件能让你的vscode开发效率快10倍！

简介上一篇我们介绍了在idea里边摸鱼，斗地主，看小说，玩大富翁，经过了一段时间这个vscode版本的插件终于是做出来了先是搞了一个vue和electron版本的，可以支持web和打包成windows，mac,linux
是赵敢敢啊·2024-01-25 06:26

全网最全最详细Java项目部署指南(建议收藏)

服务器规格1.1服务器配置1.2服务器选择从服务器的采购成本来看从数据的安全性方面来看从后期服务方面来看从软件使用便捷性来讲2、网络2.1网络选择2.2网络带宽3、图形化工具二、系统部署规范1、系统环境Linux
九辰O·2024-01-25 06:02

Hive运行机制与使用

hive介绍hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。
小猪Harry·2024-01-25 05:09

Linux安装cockpit的问题

虽然书上安装cockpit的教程仅有短短一行代码，但因为没有在红帽子上注册账户，废了好大劲搜索教程后，流程为：卸载红帽子的yum，下载CentOS的yum源遇到的问题在于：卸载完yum后，意识到自己的linux无法联网，并且yum和Python3版本不兼容的问题，最后选择更换镜像。。。1、解决不在sudoers文件中此事将被报告直接切换到根用户：sudo-i进入root用户模式：sudo-s（目录
Jizhi_Zhang·2024-01-25 03:40

零基础学习【Linux】这一篇就够了

Linux学习目录1.Linux简介1-1.Linux系统版本2.Linux安装2-1.安装方式2-2.Vmware安装2-3.Linux安装2-4.Vmware克隆2-5.Vmware快照2-6.连接工具安装
程序员iteng·2024-01-25 03:47

PXE高效批量网络装机

建立内存空间的映射图，从而将系统的软硬件环境带到一个合适的状态，以便为最终调用操作系统内核准备好正确的环境加载启动安装菜单加载内核和initrd系统（文件才能使用文件）加载根系统（）运行anaconda的安装向导Linux
小艺要秃头·2024-01-25 01:34

Linux安装Tomcat

1.下载Tomcat#通过wget直接下载即可wgethttps://mirrors.tuna.tsinghua.edu.cn/apache/tomcat/tomcat-8/v8.5.53/bin/apache-tomcat-8.5.53.tar.gz2.解压tar-zxvfapache-tomcat-8.5.53.tar.gz-C/usr/local3.修改Tomcat默认字符集进入tomcat
SimpleORBoy·2024-01-25 00:23

Spark基本架构及原理

Hadoop和Spark的关系Spark运算比Hadoop的MapReduce框架快的原因是因为Hadoop在一次MapReduce运算之后,会将数据的运算结果从内存写入到磁盘中,第二次Mapredue
李飞_fd28·2024-01-24 20:50

2019-05-15

主流程1.关闭防火墙2.机器间实现免密3.zk部署4.hadoop部署实现流程2.免密登录ssh-keygen回车一直到最后（有3次）生成本机秘钥后，同步到自己机器和其他机器ssh-copy-idhostxshell
泡泡_bbb9·2024-01-24 15:54

通过hadoop jar命令运行提交MapReduce到YARN中

实现Wordcount大概流程：给定数据输入的路径，给定结果输出的路径；将输入路径内的数据中的单词进行计数，将结果写到输出路径如下：在hadoop下找hadoop-mapreduce-examples-
%HelloWorld%·2024-01-24 13:28

MapReduce配置 & YARN集群部署

1：编辑mapred-env.sh；添加如下配置#设置jdk路径exportJAVA_HOME=/opt/module/jdk#设置JobHistoryServer进程内存为1GexportHADOOP_JOB_HISTORYSERVER_HEAPSIZE
%HelloWorld%·2024-01-24 13:28

部署Hadoop集群

在node1节点执行，以root身份1：在VMware虚拟机集群上部署HDFS集群1）准备好hadoop安装包；目前最新3.3.4；了解：2）上传解压hadoop①：上传hadoop到node1节点；②
%HelloWorld%·2024-01-24 13:27

Hive在VMware中部署

会在日志文件中生成root用户的一个随机密码，使用下面命令查看密码：如果你想设置简单密码，需要设置mysql密码安全级别：(进入mysql中实行)然后就可以简单密码了：(进入mysql中实行)步骤二：配置hadoop
%HelloWorld%·2024-01-24 13:27

linux安装mysql

安装前，我们可以检测系统是否自带安装MySQL:rpm-qa|grepmysql如果你系统有安装，那可以选择进行卸载:rpm-emysql//普通删除模式rpm-e--nodepsmysql//强力删除模式，如果使用上面命令删除时，提示有依赖的其它文件，则用该命令可以对其进行强力删除安装MySQL：接下来我们在Centos7系统下使用yum命令安装MySQL，需要注意的是CentOS7版本中MyS
羞涩的二黄·2024-01-24 13:54

Kafka集群的安装与配置（二）

2.2.2生产者命令行操作1）查看操作生产者命令参数[atguigu@hadoop102kafka]$bin/kafka-console-producer.sh2）发送消息[atguigu@hadoop102kafka
ole_triangle_java·2024-01-24 12:59

linux安装mycat2 搭建主从复制 读写分离 分库分表

linux安装mycat2搭建读写分离分库分表一、安装mycat21.下载mycat2压缩包2.解压3.修改权限4.配置物理地址5.启动mycat6.连接mycat二、主从复制1.环境说明2.配置主从复制三
理塘丁甄·2024-01-24 11:03

Windows下hive中insert语句报错

报错信息我的hadoop和hive版本都是3.0版本(建议hadoop3.x版本、hive2.x版本，我在使用中发现有些问题)[08S01][2]Errorwhileprocessingstatement
林园857·2024-01-24 10:27

Linux下SpringBoot实现Word转PDF

Linux安装L
God_Moon·2024-01-24 09:00

hbase 总结

HBase什么是HBasehbase是一个基于java、开源、NoSql、非关系型、面向列的、构建与hadoop分布式文件系统（HDFS）上的、仿照谷歌的BigTable的论文开发的分布式数据库。
l靠近一点点l·2024-01-24 08:24

Hbase原理、基本概念、基本架构

概述HBase是一个构建在HDFS上的分布式列存储系统；HBase是基于GoogleBigTable模型开发的，典型的key/value系统；HBase是ApacheHadoop生态系统中的重要一员，主要用于海量结构化数据存储
wyl9527·2024-01-24 08:24

HBase介绍及简易安装（转）

HBase介绍及简易安装（转）HBase简介HBase是ApacheHadoop的数据库，能够对大型数据提供随机、实时的读写访问，是Google的BigTable的开源实现。
weixin_33711647·2024-01-24 08:23

Hadoop集群（第12期)_HBase简介及安装

HBase简介HBase是ApacheHadoop的数据库，能够对大型数据提供随机、实时的读写访问，是Google的BigTable的开源实现。
weixin_30451709·2024-01-24 08:23
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他