Hadoop离线基础总结

通过yum获取rpm离线安装包

通过yum获取rpm离线安装包离线安装不可避免需要下载对应安装包，此时可以通过yum命令只下载不安装的rpm安装包。
不爱吃奶昔（zsl0）·2024-01-08 19:44

2021-11-22 Zookeeper Shell脚本

/bin/bashcase$1in"start"){foriinhadoop102hadoop103hadoop104doecho----------zookeeper$i启动------------ssh
不爱吃奶昔（zsl0）·2024-01-08 19:12

解决Docker报错问题：Docker Desktop – Unexpected WSL error

最近因为准备在NAS上通过Docker容器方式安装MYSQL，发现https://hub.docker.com网站被墙了，无法自动安装，同时又找不到靠谱的离线镜像，所以准备在Window上安装Docker
IT东·2024-01-08 19:34

hadoop/etc/hadoop 下没有mapred-site.xml，只有mapred.xml.template

默认情况下，/usr/local/hadoop/etc/hadoop/文件夹下有mapred.xml.template文件，我们要复制该文件，并命名为mapred.xml，该文件用于指定MapReduce
比特小怪兽·2024-01-08 19:34

整站下载器是什么 ？

快速建站,深层分析网站、离线浏览网站等用途。这里小编给大家推荐一款免费的整站下载器供大家参考IIS7整站下载器能做些什么？功能说明：1、可多站同时下载、多站多时扒。2、可单页扒。
编辑何惧·2024-01-08 19:46

hadoop命令汇总

启动和关闭hadoop服务一键启动/停止start-hdf.shstop-hdf.sh单进程关闭启动hdfs--daemonstop/start/statusnamenode或者hadoop--daemonstop
你很棒滴·2024-01-08 19:17

HDFS常用命令（方便大家记忆版）

1.文件操作(1)列出HDFS下的文件/usr/local/hadoop$bin/hadoopdfs-ls(2)列出HDFS文件下名为in的文档中的文件/usr/local/hadoop$bin/hadoopdfs-lsin
姚兴泉·2024-01-08 18:01

Hidataplus-3.3.2.0-005公测版本基于openEuler release 22.03 (LTS-SP2)的测试

测试角色如下：hadoop、yarn、zookeeper、hive、impala。
杨航的技术博客·2024-01-08 16:35

给Hadoop初学者的一些建议

零基础学习hadoop,没有想象的那么困难，也没有想象的那么容易。从一开始什么都不懂，到能够搭建集群，开发。整个过程，只要有Linux基础，虚拟机化和java基础，其实hadoop并没有太大的困难。
丨程序之道丨·2024-01-08 15:29

基于深度学习大模型实现离线翻译模型私有化部署使用，通过docker打包开源翻译模型，可到内网或者无网络环境下运行使用，可以使用一千多个翻译模型语言模型进行翻译

基于深度学习大模型实现离线翻译模型私有化部署使用，通过docker打包开源翻译模型，可到内网或者无网络环境下运行使用，可以使用一千多个翻译模型语言模型进行翻译，想要什么语种直接进行指定和修改就行。
代码讲故事·2024-01-08 14:33

大数据技术期末复习第七章——MapReduce练习

A、Map函数将输入的元素转换成形式的键值对B、Hadoop框架是用Java实现的，MapReduce应用程序则一定要用Java来写C、不同的Map任务之间不能互相通信D、MapReduce框架采用了Master
锦鲤儿·2024-01-08 12:01

Hadoop学习之路（四）HDFS 读写流程详解

1.HDFS写操作1.1图解HDFS读过程hdfs写操作流程图.pngimage.png1.2数据写入过程详解1、使用HDFS提供的客户端Client,向远程的NameNode发起RPC请求；2、NameNode会检查要创建的文件是否已经存在，创建者是否有权限进行操作，成功则会为文件创建一个记录，否则会让客户端抛出异常；3、当客户端开始写入文件的时候，客户端会将文件切分为多个packets，并在内
shine_rainbow·2024-01-08 12:21

[嵌入式AI从0开始到入土]1_昇腾Altas 200 DK上手

上手第二章下载昇腾案例并运行第三章官方模型适配工具使用第四章炼丹炉的搭建（基于Ubuntu23.04Desktop）第五章Ubuntu远程桌面配置第六章下载yolo源码及样例运行验证第七章转化为昇腾支持的om离线模型第八
工具人呵呵·2024-01-08 11:02

[嵌入式AI从0开始到入土]7_转化为昇腾支持的om离线模型

[嵌入式AI从0开始到入土]嵌入式AI系列教程注：等我摸完鱼再把链接补上可以关注我的B站号工具人呵呵的个人空间，后期会考虑出视频教程，务必催更，以防我变身鸽王。第一章昇腾Altas200DK上手第二章下载昇腾案例并运行第三章官方模型适配工具使用第四章炼丹炉的搭建（基于Ubuntu23.04Desktop）第五章Ubuntu远程桌面配置第六章下载yolo源码及样例运行验证第七章转化为昇腾支持的om离
工具人呵呵·2024-01-08 11:02

[嵌入式AI从0开始到入土]5_Ubuntu远程桌面配置

上手第二章下载昇腾案例并运行第三章官方模型适配工具使用第四章炼丹炉的搭建（基于Ubuntu23.04Desktop）第五章Ubuntu远程桌面配置第六章下载yolo源码及样例运行验证第七章转化为昇腾支持的om离线模型第八
工具人呵呵·2024-01-08 11:01

Win10环境下Hadoop(单节点伪分布式)的安装与配置--bug(yarn的8088端口打不开+)

Win10环境下Hadoop(单节点伪分布式)的安装与配置--bug(yarn的8088端口打不开+)一、本文思路【1】、配置java环境–JDK12（Hadoop的底层实现语言是java,hadoop
老妹儿的·2024-01-08 11:19

实战Flink Java api消费kafka实时数据落盘HDFS

flink版本1.13kafka版本0.8hadoop版本3.1.42实验过程2.1启动服务程序为了完成Flink从Kafka消费数据
大数据程序终结者·2024-01-08 11:13

JanusGraph简介

JanusGraph支持Hadoop框架，并能够利用Hadoop对图进行大批量的处理和分
娃娃学软件·2024-01-08 10:15

大数据 Yarn - 资源调度框架

Hadoop主要是由三部分组成，除了前面我讲过的分布式文件系统HDFS、分布式计算框架MapReduce，还有一个是分布式集群资源调度框架Yarn。
善守的大龙猫·2024-01-08 10:48

Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】 (转)

目录[-]（一）hadoop相关安装部署（二）hive（三）pig（四）hadoop原理与编码（五）数据仓库与挖掘（六）Oozie工作流（七）HBase（八）flume（九）sqoop（十）ZooKeeper
我爱大海V5·2024-01-08 08:15

《深入理解Hadoop（原书第2版）》——2.4 Hadoop 2.0

本节书摘来自华章计算机《深入理解Hadoop（原书第2版）》一书中的第2章，第2.4节，作者[美]萨米尔·瓦德卡（SameerWadkar），马杜·西德林埃（MadhuSiddalingaiah），杰森
weixin_34174322·2024-01-08 08:44

Flume基础知识（十）：Flume 聚合实战

1）案例需求：hadoop100上的Flume-1监控文件/opt/module/group.log，hadoop101上的Flume-2监控某一个端口的数据流，Flume-1与Flume-2将数据发送给
依晴无旧·2024-01-08 08:23

Spark Core进阶知识

结果数据的核对方式:1-在离线文件中直接ctrl+F搜索关键内容核对(不常用)2-一般原始数据会存放在MySQL/Hive中一份,可以编写和代码逻辑完全一样的SQL来进行核对,可以通过如下方式来提高核对效率
MSJ3917·2024-01-08 07:52

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax类图

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax概述【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax快速入门【大数据进阶第三阶段之Datax学习笔记】
伊达·2024-01-08 06:12

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax概述

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax概述【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax快速入门【大数据进阶第三阶段之Datax学习笔记】
伊达·2024-01-08 06:12

【大数据进阶第三阶段之Datax学习笔记】使用阿里云开源离线同步工具DataX 实现数据同步

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax概述【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax快速入门【大数据进阶第三阶段之Datax学习笔记】
伊达·2024-01-08 06:40

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax快速入门

【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax概述【大数据进阶第三阶段之Datax学习笔记】阿里云开源离线同步工具Datax快速入门【大数据进阶第三阶段之Datax学习笔记】
伊达·2024-01-08 06:39

Hadoop精选18道面试题(附回答思路)

1.简述Hadoop1和Hadoop2的架构异同HDFSHA(HighAvailablity)一旦Active节点出现故障，就可以立即切换到Standby节点，避免了单点故障问题。
Byyyi耀·2024-01-08 06:00

Unrecognized option: -v Error: Could not create the Java Virtual Mac

yarn报错Unrecognizedoption:-vError:CouldnotcreatetheJavaVirtualMac这是因为jdk和hadoop或者是其他的在环境变量path中，因为yarn.cmd
꧁“杂货店”꧂·2024-01-08 04:39

【Nginx】在线安装与离线安装

目录1、下载nginxnews1.2、安装包2、在线安装第一步，安装pcre第二步，安装openssl、zlib、gcc依赖第三步，安装nginx第四步，关闭防火墙，访问nginx编辑3、离线安装第一步安装
陶然同学·2024-01-08 02:41

unipush2.0 保姆级教程

1.在manifest.json中App模块配置，选择Push2.0在线推送是应用在打开的时候会接到通知，离线推送在关闭和打开时都会接到消息2.去开发者后台开通unipush3.在应用管理中选择目前要开通
_Legend_King·2024-01-08 01:28

通过dockerfile基于centosdocker镜像和postgresql12的离线安装包制作单机版的Docker镜像

可以按照以下步骤来制作一个基于CentOSDocker镜像和PostgreSQL12离线安装包的单机版Docker镜像：首先，创建一个空文件夹作为工作目录。
东北霸主劳德利·2024-01-08 01:08

0x800c0006 安装失败 .NET framework 4.0解决方法

百度查询了下解决方法，直接下载离线安装包进行安装总结：离线安装netframework4.0
白昼小丑·2024-01-08 00:19

F. linux：帮助命令help、man、info

[root@hadoop01udisk]#ls--help[root@hadoop01udisk]#manls[root@hadoop01udisk]#infols
小猪Harry·2024-01-08 00:40

25、Spark核心编程之RDD持久化详解

不使用RDD持久化的问题首先看一段代码JavaRDDlinesRDD=javaSparkContext.textFile("hdfs://hadoop-100:9000/testdate/1.txt")
ZFH__ZJ·2024-01-07 23:21

长链接与在线文件

微信，你可以发送一个文件给对端，即使对端不在线，这个文件也可以暂存在服务器上面，直到接收端上线消费或者超时，这个叫离线文件。
Fireplusplus·2024-01-07 22:21

Hive元数据迁移及升级方案

Hive的架构和工作原理简介Hive是基于Hadoop之上的数仓，便于用户可以基于SQL（HiveQL）进行数据分析，其架构图如下:从上图可知，Hive主要用来将建立结构化数据库和后端分布式结构化文件的映射
云原生大数据·2024-01-07 22:49

Net framework3.5(包含.Net2.0/.Net3.0)(离线安装)

windowsserver2012r2，2010r2安装Netframework3.5(包含.Net2.0/.Net3.0)下载地址:Netframework3.5(包含.Net2.0/.Net3.0)(离线安装
静静香甜·2024-01-07 19:23

hadoop调优

hadoop调优1HDFS核心参数1.1NameNode内存生产配置1.1.1NameNode内存计算每个文件块大概占用150byte，如果一台服务器128G，能存储的文件块如下128(G)*1024(
健鑫.·2024-01-07 18:25

hadoop调优(二)

hadoop调优(二)1HDFS故障排除1.1NameNode故障处理NameNode进程挂了并且存储数据丢失了，如何恢复NameNode？
健鑫.·2024-01-07 18:25

熟悉HDFS常用操作

1.利用Hadoop提供的Shell命令完成下列任务（1）向HDFS中上传任意文本文件，如果指定的文件在HDFS中已经存在，由用户指定是追加到原有文件末尾还是覆盖原有的文件。#检查文件是否存在.
cwn_·2024-01-07 17:11

熟悉HBase常用操作

1.用Hadoop提供的HBaseShell命令完成以下任务（1）列出HBase所有表的相关信息，如表名、创建时间等。
cwn_·2024-01-07 17:11

惊心动魄的Hadoop-6小时350T数据恢复

Hadoop在调整前，将Hadoop进行关闭.stop-all.sh进行关闭我们在第一步进行关闭的时候这里就出现问题。
胖琪的升级之路·2024-01-07 17:17

Hive入门

一、Hive概述1.1Hive简介Hive是基于Hadoop的一个数据仓库工具，它可以将结构化或半结构化的数据文件转化为一张数据库表，并提供简单的sql查询功能。
爱过java·2024-01-07 17:04

wsl相关笔记

导入导出可用于迁移wsl子系统的位置、离线部署等导出系统镜像wsl--exportCentos7D:\WSL\Centos7.tar注销原有的linux系统wsl--unregisterCentos7导入系统
inspirely·2024-01-07 16:36

机器学习之AUC、AUPRC、F1等评价指标的含义

AUC=0.506031AUC(areaunderthecurve)是模型评估指标，特别是二分类模型使用的主要离线评测指标之一。参考博客，AUC值是ROC曲线与x轴围成的面积。
小手指动起来·2024-01-07 16:27

学习笔记-日志采集和实时分析简单实例

一个出口直接写到ElasticSearch，提供Kibana进行日志分析可视化处理；一个出口直接写到HDFS,提供后期离线统计分析处理；一个出口写入Kafka中，提供SparkStreaming进行近实时日志统计分析处理
人生偌只如初见·2024-01-07 13:27

linux下spark的python编辑_如何在Linux下构建Spark Python编程环境

火花编程环境Spark可以独立安装或与Hadoop一起使用.在安装Spark之前linux的python编程环境，首先请确保您的计算机上已安装Java8或更高版本.火花安装访问Spark下载页面，然后选择最新版本的
weixin_39543478·2024-01-07 13:10

linux下spark的python编辑_Linux下搭建Spark 的 Python 编程环境的方法

Spark编程环境Spark可以独立安装使用，也可以和Hadoop一起安装使用。在安装Spark之前，首先确保你的电脑上已经安装了Java8或者更高的版本。
weixin_39752800·2024-01-07 13:10

virtualbox的下载，打开.vdi文件并启动Hadoop系统

目录一、virtualbox的下载二、新建Ubuntu系统1、确定好镜像系统的位置2、新建虚拟系统三、Hadoop系统的启动1、启动Hadoop2、启动hbase3、启动spark4、启动hive5、hadoop
汤汤upup·2024-01-07 13:08
上一页 37 38 39 40 41 42 43 44 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他