本地模式

快速掌握zookeeper

文章目录1、是什么1.1特点1.2数据结构1.3应用场景1.3.1统一命名服务1.3.2统一配置管理1.3.3统一集群管理1.3.4服务器动态上下线1.3.5软负载均衡1.4下载地址2、安装2.1本地模式安装
weixin_44203609·2022-09-17 18:17

Apache Hive 通用调优featch抓取机制 mr本地模式

目录ApacheHive-通用优化-featch抓取机制mr本地模式Fetch抓取机制mapreduce本地模式切换Hive的执行引擎ApacheHive-通用优化-join优化-reduce端join-map
·2022-09-02 14:03

chartmuseum部署指引 helm chart repo

Docker安装-本地模式未使用云厂商提供的对象存储服务chartmuseum不提供UI，权限管理等功能，如需要此类功能，需要使用harbor提供的chart仓库服务，harbor底层用的也是chartmuseum
无聊的上帝op·2022-09-02 13:52

spark(2) -- spark运行模式及Spark local模式安装与Spark Standalone集群

 Spark框架编写的应用程序可以运行在本地模式(LocalMode)、集群模式(ClusterMode)和云服务(Cloud)，方便开发测试和生产部署。
erainm·2022-08-24 14:54

6.2.3 Spark《RDD高阶》序列化,依赖,持久,容错,分区,广播,累加,TopN《原理初》独立作业提交,洗牌原理,RDD优化《SQL概述》数据抽象,类型《SQL编程》SpkSes,DF&DS

目录第4节RDD编程高阶Spark原理4.1序列化4.2RDD依赖关系4.3RDD持久化/缓存4.4RDD容错机制Checkpoint4.5RDD的分区1、本地模式(取决于核数)2、伪分布式（x为本机上启动的
CH_ENN·2022-08-17 07:29

Hive (十) --------- 企业级调优

目录一、执行计划二、Fetch抓取三、本地模式四、表的优化1.小表大表Join(MapJOIN)2.大表Join大表3.GroupBy4.Count(Distinct)去重统计5.笛卡尔积6.行列过滤五
在森林中麋了鹿·2022-08-10 13:32

HIVE优化和数据倾斜、合并小文件

HIVE优化和数据倾斜、合并小文件执行计划（explain）Fetch抓取本地模式小表join大表(MapJoin)大表join大表空值异常key需要过滤空值非异常需要转换Groupby优化笛卡尔积行列过滤合理设置
吃再多糖也不长胖·2022-08-10 13:00

Unity3D热更新LuaFramework入门实战(2)——资源热更新

（转至https://zhuanlan.zhihu.com/p/21386682）1、创建物体为了调试的方便，笔者先将框架配置为本地模式，待测试热更新时再改成更新模式。
山竹炒大蒜·2022-08-03 22:43

Spss Modeler关联规则Apriori模型、Carma算法分析超市顾客购买商品数据挖掘实例

Apriori模型关联规则是数据挖掘算法中主要技术之一，是在无指导学习系统中挖掘本地模式的最普便形式。在数据挖掘中，常见的关联规则挖掘模型有AIS、SETM、A
·2022-07-18 13:44

2 Zookeeper 单击安装

（二）Zookeeper本地模式安装下载地址镜像库地址：http://archive.apache.org/dist/zookeeper/apache-zookeeper-3.6.0.tar.gz需要安装
look-word·2022-07-18 08:36

2 Zookeeper 单击安装

（二）Zookeeper本地模式安装下载地址镜像库地址：http://archive.apache.org/dist/zookeeper/apache-zookeeper-3.6.0.tar.gz需要安装
look-word·2022-07-15 21:00

Hive调优策略总结

文章目录1.Fetch抓取2.本地模式3.MapJoin（数据倾斜问题）4.GroupBy5.Count(distinct)6.笛卡尔积7.动态分区调整8.并行执行9.严格模式10.JVM重用11.推测执行
一片枯黄的枫叶·2022-06-17 10:30

hadoop本地模式部署_简述Hadoop各种部署方式及学习路线

Hadoop是一个由Apache基金会所开发的分布式系统的基础架构；Hadoop的核心就是HDFS和MapReduce，HDFS为海量数据的持久化存储提供了一个分布式环境，MapReduce则是在HDFS的基础之上对海量数据进行计算；需要特别声明的是：MapReduce既是一个计算框架，也是一种编程思想，这种框架为海量数据分布式计算提供了可能性，编程思想则是实现这种计算的思路和灵魂。HDFS自身设
weixin_39898248·2022-06-07 09:48

【学习笔记】大数据技术之Zookeeper（基础篇）

大数据技术之Zookeeper1.Zookeeper入门1.1概述1.2特点1.3数据结构1.4应用场景1.5下载地址2.Zookeeper本地安装2.1本地模式安装2.2配置参数解读3.Zookeeper
prague6695·2022-05-28 02:47

Spark安装部署 ——一篇文章轻松学会三种Spark运行环境的搭建

♂️本文目录Spark三种运行环境的搭建1、本地模式1.1、本地环境部署1.2、命令行工具1.
it春和·2022-05-28 02:44

大数据技术之Zookeeper——（一）Zookeeper的入门与安装+选举机制+客户端常用操作

是在hadoop集群搭建完成后的基础上搭建的（包括虚拟机jdk等）文章目录一、Zookeeper介绍1.1概述1.2特点1.3zookeeper的数据结构1.4应用场景二、安装Zookeeper2.1本地模式
「已注销」·2022-05-28 02:39

大数据技术之——zookeeper的安装部署

♂️本文目录大数据技术之——Zookeeper的安装一、本地模式安装部署1.1、安装前准备1.2、修改配置1.3、操
it春和·2022-05-28 02:58

【大数据实验】01：Hadoop3伪分布部署

Hadoop3伪分布部署OVERVIEWHadoop3伪分布部署实验环境：Hadoop3环境搭建（本地模式）1.实验原理：2.实验步骤：（1）安装JDK8（2）安装Hadoop3（3）在Hadoop3上执行
hello world 999·2022-05-06 11:00

本地模式搭建Hive

这里我们使用本地模式搭建时，尝试使用mysql来进行数据存储。
QYHuiiQ·2022-04-21 21:33

ZooKeeper学习笔记

教学视频源码文章目录01.课程介绍02.概述03.特点04.数据结构05.应用场景统一命名服务统一配置管理统一集群管理服务器动态上下线软负载均衡06.下载地址07.本地模式安装Linux下安装Windows
巨輪·2022-03-23 18:25

【CentOS】安装 Hadoop （单机版）

文章目录1、上传hadoop安装包2、解压安装包并重名命3、配置Hadoop环境变量4、配置Hadoop文件5、测试Hadoop本地模式的运行环境准备装有jdk的可上网虚拟机hadoop-2.7.1.tar.gz
骑着蜗牛ひ追导弹'·2022-02-28 10:54

Spark：基础入门与环境搭建

的功能及特点05：Spark的应用场景06：MR的设计回顾07：Spark的基本设计08：Spark与MR设计对比09：环境部署：版本与编译10：环境部署：运行模式11：环境部署：集群架构12：环境部署：本地模式环境
多么哇塞的陈哇塞·2022-02-28 10:08

好程序员大数据笔记之：Hadoop集群搭建

一、hadoop本地模式和伪分布式模式之间的区别1.单机(非分布式)模式。这种模式在一台单机上运行，没有分
好程序员IT·2022-02-27 09:10

Hive从入门到精通3：Hive环境搭建之远程MySQL模式

Hive共有三种安装模式：1.单用户模式（本地模式、嵌入模式）；2.本地MySQL模式；3.远程MySQL模式。
金字塔下的小蜗牛·2022-02-20 13:06

硬盘重装系统：电脑本地硬盘重装系统步骤

1.首先我们点韩博士里的“U盘启动下”，再点本地模式，再选择安装的目录，最好不要安装到U盘或者C盘里，以免重装时出现问题。2.在安装本地模式之前，我们可以选择PE版的。
韩博士装机大师·2022-02-14 10:09

Hive 从 0 到 1 学习 —— 第十章 Hive 企业级调优

文章目录1.Fetch抓取2.本地模式3.表的优化3.1小表、大表Join3.2大表Join大表3.2.1空KEY过滤3.2.2空key转换3.3MapJoin3.3.1开启MapJoin参数设置3.3.2MapJoin
dwjf321·2022-02-06 11:57

Hadoop完全分布式安装部署

Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。
·2021-12-06 11:02

八、hive3.1.2 安装及其配置（本地模式和远程模式）

目录前文hive3.1.2安装及其配置（本地模式和远程模式）1、下载hive包2、修改其环境变量3、MySQL配置Centos7MySQL安装步骤：1、设置MySQL源2、安装MySQLCommunityServer3
李好秀·2021-11-23 23:00

八、Hive3.1.2 安装及其配置（本地模式和远程模式）

文章目录前文hive3.1.2安装及其配置（本地模式和远程模式）1、下载hive包2、修改其环境变量3、MySQL配置Centos7MySQL安装步骤：**1、设置MySQL源**2、安装MySQLCommunityServer3
李好秀·2021-11-23 23:43

Hadoop实战篇-集群版（2）

Hadoop实战篇（2）作者|WenasWei前言在上一篇的Hadoop实战篇介绍过了Hadoop-离线批处理技术的本地模式和伪集群模式安装，接下来继续学习Hadoop集群模式安装;将从以下几点介绍:Linux
·2021-11-18 18:15

Spark记录（一）：Spark全景概述

二、Spark的主要组件如下图所示：三、Spark运行时架构Spark共有三种运行模式：本地模式、集群模式、客户端模式。生产环境基本都是用集群模式。
淡墨痕·2021-11-06 23:00

Hive安装部署

在命令行中显示数据库名和数据的表头f-设置小规模数据时，使用本地模式，提高效率。本机练习时常用4：将对应的mysql驱动程
龟速扣代码·2021-11-06 20:00

Spark面试题（一）

（☆☆☆☆☆）1）本地模式 Spark不一定非要跑在hadoop集群，可以在本地，起多个线程的方式来指定。
·2021-10-26 23:25

sandbox-repeater源码

通过阅读说明了解功能提供流量录制回放功能其中repeater-console是流量管理系统的简单实现明确目标熟悉整个实现机制针对支持服务，做相应录制回放系统改造｜开发针对不支持的协议｜组件，能进行开发支持按照说明初步使用本地模式将
Rechel_uniq·2021-10-20 19:01

电脑正常做系统

因为C盘你等会要格式化运行并制作PE把油漆桶点exe运行就是这样，然后把本地模式的位置换成D或者EF点击“安装”就不用管了。速度超级快！等会完成自己手动重启就行一定会有人问！是不是按F8还是F12啊？
·2021-10-10 17:29

Spark--spark工作模式详解(local/standalone/yarn)

Spark运行模式分类本地模式；standalone模式；sparkonyarn模式，又分未yarn-client和yarn-cluster；sparkonmesos模式（暂时没有了解）本地模式-localSpark
李小李的路·2021-06-21 15:17

iOS 获取本机的设备信息UIDevice

UIDevicecurrentDevice];//设备名称NSLog(@"name-------%@",myDecive.name);//设备模式NSLog(@"model--------%@",myDecive.model);//设备的本地模式
Joker_King·2021-06-20 08:24

Hadoop实战篇（1）

WenasWei前言在前面介绍过了Hadoop-离线批处理技术的整体架构，接下来便开始学习安装配置并使用Hadoop;将从以下几点介绍:Linux环境的配置与安装HadoopHadoop的三种安装模式介绍本地模式安装伪集群模式安装一
·2021-06-18 22:24

react

一样都是包管理工具如果要使用默认情况下必须先下载才能正常用npminstall-gyarn设置yarn的镜像源为淘宝镜像：npmconfigsetregistryhttp://registry.npm.taobao.org/本地模式
李继恩·2021-06-16 10:01

Spark任务提交模式及参数

1.本地模式-local[k]本地使用k个worker线程运行saprk程序.这种模式适合小批量数据在本地调试代码用.
西三旗靓仔·2021-06-12 15:14

快乐大数据第8课 Spark计算引擎概述

(一)本地模式启动在node01上cd~/apps/spark2.2bin/spark-shell定义变量valrdd=sc.parallelize(1to100,3)#生成三个分区，每个分区中的数值是
快乐大数据·2021-06-09 10:21

Hive从入门到精通1：Hive环境搭建之单用户模式

Hive共有三种安装模式：1.单用户模式（本地模式、嵌入模式）；2.本地MySQL模式；3.远程MySQL模式。
金字塔下的小蜗牛·2021-06-06 22:30

Zookeeper 学习笔记 (详细)

Zookeeper一、Zookeeper入门(1)概述(2)特点(3)数据结构(4)应用场景(5)下载地址二、Zookeeper安装(1)本地模式安装部署①安装前准备②配置修改③操作Zookeeper(
黑桃️·2021-06-04 17:22

大数据之安装Hadoop—科多大数据

安装hadoop有三种模式：本地模式：将需要上传的文件内容统一放在一个本地磁盘的某个文件夹下。伪分布式：一台的主机，但该主机上有会有文件系统-hadoop的文件系统。
大数据在说话·2021-05-21 10:16

解决zeppelin spark 读取文件 报hadoop连接错误

如果本地没有安装hadoop的话，报连接被拒绝image.png这个由于本机已经安装了Hadoop,使用的是伪分布式模式,所以Spark会读取Hadoop的配置信息.我们这里先不启动Hadoop,使用本地模式
Helen_Cat·2021-05-21 04:50

Hadoop | Hadoop本地模式安装部署

hadoop下载下载过程链接：https://www.jianshu.com/p/a28e2305a48c本地部署过程（DeploymentProcess）下载hadoop安装包后不作任何设置，默认的就是本地模式本地模式最简单
Ada54·2021-05-19 14:15

Hadoop单节点安装（1）本地模式

Hadoop单节点安装（1）本地模式参考文章：http://hadoop.apache.org/docs/r2.7.4/hadoop-project-dist/hadoop-common/SingleCluster.htmlLocal
tonyemail_st·2021-05-19 00:43

Spark环境搭建、运行模式、RDD简单操作

简单操作文章目录实验环境实验原理安装配置环境监控安装前的环境准备关闭spark服务解压Scala安装包配置环境变量解压Spark安装包，添加配置解压Spark安装包启动spark集群Spark运行模式本地模式
北山啦·2021-05-18 11:08

hive基础架构

HiveStructureMetastore服务和存储的方式1.内嵌模式2.本地模式3.远程模式建议采取远程模式，这样的模式可以将数据库层完全置于防火墙后，客户就不再需要用户名和密码登录数据库，避免了认证信息的泄漏
留年已忘却·2021-05-16 02:57

Hive 企业级调优

Fectch抓取是指对某些情况下的查询不必使用MapReduce计算将hive.fetch.task.conversion设置成more，在全局查找、字段查找、limit查找等都不走MapReduce2本地模式多数的
djm猿·2021-05-15 17:27
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他