Linux安装Hadoop

hive 用户自定义函数udf，udaf，udtf

udf：一对一的关系udtf：一对多的关系udaf：多对一的关系使用Java实现步骤自定义编写UDF函数注意：1.需要继承org.apache.hadoop.hive.ql.exec.UDF2.需要实现
Logan_addoil·2023-12-22 05:47

SSH免密码登录设置

在Hadoop等应用，通常要设置SSH免密码登录来管理集群。这里记录一下Linux配置免密码登录设置。
norvid·2023-12-22 05:06

Hbase--面试题整理-01

01-Hbase的特点以下五点需要准确说出的，如果可以还可以将一下Hbase的写入比读取快的原因(1)Hbase一个分布式的基于列式存储的数据库,基于Hadoop的hdfs存储，zookeeper进行管理
李小李的路·2023-12-22 03:51

Impala 基于hive的交互式实时分析工具(二) 概念及原理介绍

impala和hive的区别概括：hive是【基于hadoop】的适合【离线批处理复杂sql分析的数仓工具】，impala是【基于hive】的适合【实时交互简单sql的数仓工具】执行计划1.hive：hive
章云邰·2023-12-22 01:34

Linux安装Hadoop软件

书到用时方恨少1.首先在/home/下创建一个文件夹叫hadoopimage.png2.进入到hadoop文件夹下，下载hadoop包image.png3.解压刚刚下载的hadoop文件包image.png4
olaH·2023-12-22 00:35

大数据处理与分析

掌握分布式并行编程框架MapReduce掌握基于内存的分布式计算框架Spark理解MapReduce的工作流程、Spark运行原理熟悉机器学习概念一.MapReduceHadoopMapReduce是一个软件框架
僖僖cc·2023-12-21 22:34

大数据处理与分析-Spark

导论(基于Hadoop的MapReduce的优缺点）MapReduce是一个分布式运算程序的编程框架，是用户开发“基于Hadoop的数据分析应用”的核心框架MapReduce是一种用于处理大规模数据集的编程模型和计算框架
僖僖cc·2023-12-21 22:03

SSH无密登陆配置

基本语法：ssh域名/IP地址示例：（1）从hadoop100服务器上远程连接hadoop101服务器[hadoop@hadoop100~]$sshhadoop101如果出现如下内容Areyousureyouwanttocontinueconnecting
程序员储物箱·2023-12-21 21:26

Linux环境安装Hadoop

（1）下载Hadoop安装包并上传下载Hadoop安装包到本地，并导入到Linux服务器的/opt/software路径下（2）解压安装包解压安装文件并放到/opt/module下面[root@hadoop100
程序员储物箱·2023-12-21 21:55

VMware克隆虚拟机

要求：利用模板虚拟机hadoop100，克隆出hadoop101虚拟机。
程序员储物箱·2023-12-21 21:22

HBase基础知识（二）：HBase集群部署、HBaseShell操作

/bin/bashcase$1in"start"){foriinhadoop100hadoop101hadoop102doecho----------zookeeper$i启动------------ssh
依晴无旧·2023-12-21 21:48

tableau问题：clickhouse_odbc,linux安装失败问题排查

1、windowstableau客户端安装clickhouse_odbc没问题，tableau服务器linux安装clickhouse_odbc失败,客户端发布的时候提示参考文档：linuxclickhouse_odbc
紫慕晗·2023-12-21 21:36

Java/Vue若依架构项目gitlab配置自动集成（CI/CD）

安装gitlab参考文档：linux安装GitLab教程安装所需基础环境：git（cenOS7自带的git版本较低，需要升级成最新版本，否则执行自动构建的时候会报错）jdk1.8mavennode.js
被代码耽误的演员·2023-12-21 20:27

19k字图文讲解Vision科研常用的系统环境配置和工具（附详细命令行）

猛码Memmat|转载请注明来源目录ArchLinux安装指南（新手向）前言准备工作检查网络通过SSH远程连接（可选）硬盘分区格式化并挂载分区设置中国镜像源（推荐）安装系统系统初始化设置进阶设置设置交换空间
猛码Memmat·2023-12-21 20:21

本地MinIO存储服务如何创建Buckets并实现公网访问上传文件

文章目录前言1.创建Buckets和AccessKeys2.Linux安装Cpolar3.创建连接MinIO服务公网地址4.远程调用MinIO服务小结5.固定连接TCP公网地址6.固定地址连接测试前言MinIO
日出等日落·2023-12-21 19:51

大数据----33.hbase中的shell文件操作

一、数据库操作1、进入hbase客户端、帮助命令[root@hadoop06hbase]#bin/hbaseshell[root@hadoop06hb
学无止境的大象·2023-12-21 19:10

大数据----31.hbase安装启动

三台机器都执行：zkServer.shstartHadoop正常部署Hadoop集群的正常部署并启动。
学无止境的大象·2023-12-21 19:40

大数据--- 14.MapReduce的本地操作和集群计算与打包到hadoop运行

MapReduce的本地操作和集群计算与打包到hadoop运行通过MapReduce处理本地手机销量1.通过MapReduce来操作我们上面文件的统计；其实就是使用框架来做计算；他的优点就是吧之前我们处理数据和
学无止境的大象·2023-12-21 19:39

大数据---33.HBase数据结构

一、HBase简介HBase是一个开源的、分布式的、版本化的NoSQL数据库（即非关系型数据库），依托Hadoop分布式文件系统HDFS提供分布式数据存储，利用MapReduce来处理海量数据，用Zookeeper
学无止境的大象·2023-12-21 19:07

计算机毕业设计hadoop+spark+hive直播可视化分析大屏 直播推荐系统 数据仓库 体育赛事分析 足球分析 推荐系统 体育赛事推荐系统 大数据毕业设计

开发技术：selenium(Python爬虫)、spark、hadoop、scala、hive、sqoop、Flask、echarts、mysql分析流程：python爬取直播数据存到.csv文件、mysql
计算机毕业设计大神·2023-12-21 19:26

Hadoop进阶2-Hadoop权威指南C1-C6阅读笔记

本文是Hadoop权威指南-第三版的阅读笔记，内容包括第1-6章内容记录了一些个人认为重要的知识点。
neo_ng·2023-12-21 18:02

【大数据优质案例】基于大数据分析的物流数据可视化平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于大数据分析的物流数据可视化平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:50

【大数据项目】基于大数据分析的全国信息教育平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于大数据分析的全国信息教育平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:50

【大数据项目】基于大数据分析的餐饮行业数据分析平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于大数据分析的餐饮行业数据分析平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:50

【大数据优质项目】基于数据分析的保险行业可视化分析平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于数据分析的保险行业可视化分析平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:49

2023大数据应用开发赛题02套

目录2023年全国职业院校技能大赛赛题第02套任务A：大数据平台搭建（容器环境）（15分）子任务一：Hadoop完全分布式安装配置子任务二：Flume安装配置子任务三：FlinkonYarn安装配置任务
长风有续X·2023-12-21 17:54

Flume多路复用模式把接收数据注入kafka 的同时，将数据备份到HDFS目录

启动hadoop、在hdfs中创建需要访问的目录配置Hadoop的核心配置文件core-site.xml：设置Hadoop的核心配置参数，例如NameNode的地址、数据块大小、副本数量等。
HaveAGoodDay.·2023-12-21 17:52

2023大数据应用开发赛题03套

目录任务A：大数据平台搭建（容器环境）（15分）子任务一：HadoopHA安装配置子任务二：Hive安装配置子任务三：Kafka安装配置任务B：离线数据处理（25分）子任务一：数据抽取子任务二：数据清洗子任务三
长风有续X·2023-12-21 17:52

生产经验——分区的分配以及再平衡

bin/kafka-topics.sh--bootstrap-serverhadoop102:9092--alter--topicfirst--partitions7复制CustomConsumer类，
zmx_messi·2023-12-21 15:03

Hive入门＋部署

看黑马视频做的笔记目录概念1.基本概述2.基础架构总架构部署1.安装MySQL2.配置Hadoop3.下载解压Hive4.下载MySQLDriver包注意！
Y蓝田大海·2023-12-21 14:32

hive与hadoop的版本对应问题

以hive-3.1.2为例，查看hive-3.1.2对应的Hadoop版本号的方式是：下载apache-hive-3.1.2-src.tar.gz链接：https://mirrors.bfsu.edu.cn
qiaoqiao2332·2023-12-21 14:32

Hive环境搭建（ubuntu 20.04 + java 1.8.0_281 + hadoop 3.1.0 + hive 3.1.2）

Hive依赖于Hadoop，而Hadoop依赖于Java。因此搭建Hive环境需要先装java，然后装hadoop，然后才是hive。
qiaoqiao2332·2023-12-21 14:02

hdfs如何把一整个目录都复制到本地, 包括目录中的子目录和子文件

在Hadoop分布式文件系统（HDFS）中，你可以使用hadoopfs-copyToLocal命令将整个目录复制到本地。该命令支持递归复制，包括目录中的子目录和子文件。
言之。·2023-12-21 14:27

【大数据项目】企业经营数据可视化平台

欢迎各位前来交流讨论精彩专栏推荐订阅不然下次找不到哟天码编程-SpringBoot项目案例推荐天码编程-SSM项目案例推荐天码编程-Python项目案例推荐天码编程-小程序项目案例推荐天码编程-大数据项目案例推荐文末获取源码项目名企业经营数据可视化平台技术栈Hadoop
天码编程·2023-12-21 12:53

基于大数据可视化的智慧人才数据分析平台

SpringBoot项目案例推荐天码编程-SSM项目案例推荐天码编程-Python项目案例推荐天码编程-小程序项目案例推荐天码编程-大数据项目案例推荐文末获取源码项目名基于大数据可视化的智慧人才数据分析平台技术栈Hadoop
天码编程·2023-12-21 12:53

《PySpark大数据分析实战》-14.云服务模式Databricks介绍基本概念

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-21 11:45

《PySpark大数据分析实战》-13.Spark on YARN模式代码运行流程

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-21 11:44

《PySpark大数据分析实战》-16.云服务模式Databricks介绍运行案例

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-21 11:08

Sqoop入门：如何下载、配置和使用

下载和配置Sqoop是Apache的一个开源工具，主要用于在Hadoop和关系数据库之间传输数据。
冷月半明·2023-12-21 11:00

tesserocr linux安装

经历了三次分别在windows和linux安装失败(缺少wheel、缺少vc++、缺少tesseract等各种错误全遇到了)之后，终于找到了正解，网上可行的办法不多，分享一波先安装tesseract（别管那么多
橙皇cc·2023-12-21 11:52

Hadoop/Spark 太重，esProc SPL 很轻

Hadoop/Spark就是其中重要的软件技术，由于开源免费而广受欢迎。
码农翻身·2023-12-21 10:07

大数据概念与hadoop起源

1、大数据定义根据维基百科的定义，大数据是指根据常用软件工具捕获、管理和处理数据所耗时间超过可容忍时间的数据集。按照麦肯锡的定义，大数据是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合。在特征方面，大数据不仅“容量大”，还有很多其他的特色。总体而言，可以用“5V+1C”来概括：Variety(多样_化）、Volume(海量）、Velocity(快速）、Vitality
Ace_Wang·2023-12-21 09:50

Hadoop集群的搭建（全网最详细，看了就会）

Hadoop是Apache旗下的一个用java语言实现开源软件框架，是一个开发和运行处理大规模数据的软件平台。允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。
叶落长街·2023-12-21 08:49

Hadoop集群搭建详细教程

Hadoop环境搭建1.环境准备1.首先创建一台模板机所谓的模板机是进行了一些最基础的配置，比如说进行主机名修改、网络配置、下载一些插件等准备工作。
百万攻程狮·2023-12-21 08:49

Hadoop 集群环境搭建

目录第一部分：系统安装...31：图形化安装...32：选择中文...33：安装选项...34：软件选项...45：安装位置...46：网络配置...67：开始安装...78：创建用户...79：重启系统...710：登录测试...8第二部分：初始化设置...91：SSH远程登录...92：yum源更新...93：安装vim和wget.114：增加test用户权限...125：修改主机/tec/h
惊鸿若梦一书生·2023-12-21 08:17

Linux安装JDK、Maven、Tomcat、Redis、Dubbo Admin以及Zookeeper

作为开发，在日常工作和学习过程中，无法避免在Linux系统上安装各类开发工具及软件，这在本人看来是耗时耗力且繁琐的工作，如能记录下所用到的工具包的安装步骤，那么将会节省大量的时间。本文将详细阐述并记录JDK、Maven、Tomcat、Redis、DubboAdmin以及Zookeeper的完整安装步骤。一、准备安装包以下为各个安装包的下载地址，大家可根据自身情况选择所需的版本：注：Zookeepe
王哲晓·2023-12-21 08:08

Kali Linux安装Xrdp远程桌面工具结合内网穿透实现远程访问Kali桌面

文章目录前言1.Kali安装Xrdp2.本地远程Kali桌面3.Kali安装Cpolar内网穿透4.配置公网远程地址5.公网远程Kali桌面连接6.固定连接公网地址7.固定地址连接测试前言Kali远程桌面的好处在于，它允许用户从远程位置访问Kali系统，而无需直接物理访问该系统。这使得用户可以在不同的位置使用Kali系统，而无需在每个位置都安装Kali系统。此外，远程桌面还可以提高Kali系统的安
手插口袋谁也不爱♡·2023-12-21 07:25

大数据分析- 基于Hadoop/Mahout的大数据挖掘

目前对大数据的分析工具，首选的是Hadoop平台。Hadoop在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势，事实上已成为当前互联网企业主流的大数据分析平台。一、培训对象1，系统架构师、系
shenmanli·2023-12-21 06:58

“大数据分析挖掘-基于Hadoop/Mahout/Mllib的大数据挖掘（含Spark、Storm和Docker应用介绍）”培训

目前对大数据的分析工具，首选的是Hadoop/Yarn平台。Hadoop/Yarn在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势，事实上已成为当前互联网企业主流的大数据分析平台。为解决广大
shenmanli·2023-12-21 06:58

【大数据存储与处理】实验五 Python 操作 MongoDB

【实验内容与要求】：安装pymongo方法一：cd/home/hadoop/myshare/pymongo-3.10.1.tar.gztarzxvfpymongo-3.10.1.tar.gzmvpymongo
friklogff·2023-12-21 06:55
上一页 41 42 43 44 45 46 47 48 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他