本地模式

Scala版SpringBoot + Impala

工作需要做查询并导出数据的接口，考虑了SpringBoot+Spark和Impala，Spark只测试了本地模式，时间有限暂时没有测试yarn模式，但是Spark更适合做数据分析，查询Impala是比较高效的
心有余力·2019-09-30 11:56

微信小游戏换量导航组件，支持云模式二维码跳转！

「Creator星球游戏开发社区」公众号与「微笑游戏」公众号以及旗下的「微笑盒子」微信小程序联合为CocosCreator小游戏开发者提供了一个简单易用的小游戏导航控件，目前支持3大模式5类应用场景：本地模式微信云模式微笑模式下图是几种用法在微信上的测试
张晓衡·2019-09-26 11:00

Hive调优-萌贝树母婴无骗子

Fectch抓取是指对某些情况下的查询不必使用MapReduce计算将hive.fetch.task.conversion设置成more，在全局查找、字段查找、limit查找等都不走MapReduce2本地模式
qq5d7718e868b3d·2019-09-21 16:31

Hive 企业级调优

Fectch抓取是指对某些情况下的查询不必使用MapReduce计算将hive.fetch.task.conversion设置成more，在全局查找、字段查找、limit查找等都不走MapReduce2本地模式多数的
灰白世界·2019-09-13 15:42

rsync同步远程主机目录，并通过md5校验目录

工作模式shell模式，也称作本地模式，用于同步本地的文件或者目录。rsync[OPTION...]SRC.
baboon_chen·2019-09-06 23:24

spark安装

、下载地址http://spark.apache.org/downloads.html2、解压tar-zxvfspark-2.4.4-bin-hadoop2.7.tgz-C/opt/module/3、本地模式运行第一个程
我是属车的·2019-09-05 11:00

Storm 系列（一）—— Storm和流处理简介

Storm具有以下特点：支持水平横向扩展；具有高容错性，通过ACK机制每个消息都不丢失；处理速度非常快，每个节点每秒能处理超过一百万个tuples；易于设置和操作，并可以与任何编程语言一起使用；支持本地模式运行
黑白影·2019-09-03 07:00

【Zookeeper】本地模式安装

安装步骤上传gz包通过rz命令，将zookeeper-3.4.10.tar.gz安装包上传到/opt/soft/文件夹下。[root@bigdata111soft]#rz[root@bigdata111soft]#lshadoop-2.8.4.tar.gzjdk-8u144-linux-x64.tar.gzzookeeper-3.4.10.tar.gz解压包通过tar命令解压zookeeper到/
ShadowFiend·2019-09-02 11:00

Spark学习笔记 ---workConut

local[5]");conf.setAppName("WordConuts");1.可以设置spark的运行模式1.1local--在eclipse，IDEA中开发spark程序要用local模式，本地模式
wudonglianga·2019-08-28 00:16

触发器设置错误导致sa账号无法登陆Logon failed for login 'sa' due to trigger execution

跑到数据库主机，用本地模式登陆，还是不行，sa账号也不行，本地也不行，难道
lbship·2019-08-22 13:09

【Hadoop】单机、伪分布式、完全分布式集群搭建

搭建Hadoop本地模式本地模式就是单机装hadoop。
ShadowFiend·2019-08-10 17:00

SparkStreaming之读取Kafka数据

原文链接：https://www.jianshu.com/p/30614ff250b5本文主要记录使用SparkStreaming从Kafka里读取数据，并计算WordCount主要内容：1.本地模式运行
lvtula·2019-07-31 14:03

超详细的Hadoop环境搭建（Ubuntu18.04.2）

环境安装Hadoop运行在Linux环境中，虽然借助工具也可以部署在Windows上，但是还是建议在Linux环境中进行部署，第一部分将简单介绍Linux环境的安装、配置、JDK安装第二部分：Hadoop本地模式安装
Andrew_Lii·2019-07-19 21:20

Hive基本操作

linux命令;2.Hive中执行hdfs的操作dfs-ls/;3.Hive的模式本地模式开发阶段建议使用本地模式sethive.exec.mode.local.auto=true;集群模式(默认)生产环境建议使用集群模式
m_target·2019-07-12 10:14

笔记-hadoop本地模式、伪分布式、分布式的搭建

目录hadoop运行环境搭建VM虚拟机安装centos，Linux系统配置安装Java和hadoopJAVA安装Hadoop安装hadoop本地模式本地模式grep案例本地模式Wordcount案例hadoop
liu_1221·2019-07-11 20:41

Hive调优技巧

设置为none后所有类型的查找语句都要走MapReduce；2.本地模式sethive.exec.mode.local.auto=t
Stitch_x·2019-07-01 00:35

02 使用Storm的本地模式完成词频统计

前面我们已经安装了storm，storm有两种模式，一是本地模式，主要用于学习和测试，另一个是集群模式，实际生产中使用这种模式。本节将阐述如何使用本地模式的storm进行词频统计。
张力的程序园·2019-06-26 12:57

啃掉Hadoop系列笔记(03)-Hadoop运行模式之本地模式

Hadoop的本地模式为Hadoop的默认模式，不需要启用单独进程，直接可以运行，测试和开发时使用。
传奇的博客·2019-06-26 07:00

鸿蒙出来后H5足以取代原生app

本地模式的H5渲染效果，其实已经在性能上无限接近于原生。也就是说当你使用file://而非http://访问H5页面的时候，打开速度也是非常快的。
梁素芬·2019-06-26 00:00

Hive 企业调优

9.企业级调优9.1Fetch抓取Fetch抓取：Hive中对某些情况的查询可以不必使用MapReduce计算；hive.fetch.task.conversion:more9.2本地模式大多数的HadoopJob
思考与践行·2019-06-21 19:00

ZK的本地及分布式安装部署

一、本地模式安装部署1)安装前准备：安装jdk上传zookeeper到linux系统下修改tar包权限[root@bigdata111software]$chmodu+xzookeeper-3.4.10
Conlin2019·2019-06-21 15:22

spark快速大数据分析之学习记录（二）

题外话：这是一个“连载”，主要用于记录并监督我每周的Spark学习进程一.spark下载和安装【本地模式】【系统：linux】下载spark前，需要确保你之前已经下载好了jdk和Python，以下是我的整个下载和安装过程
KYkankankan·2019-06-16 17:27

Storm 系列（一）—— Storm和流处理简介

Storm具有以下特点：支持水平横向扩展；具有高容错性，通过ACK机制每个消息都不丢失；处理速度非常快，每个节点每秒能处理超过一百万个tuples；易于设置和操作，并可以与任何编程语言一起使用；支持本地模式运行
hei bai ying·2019-06-07 16:57

Hive与mysql的初识以及安装

（在linux终端操作Hive）Hive有三种安装方式：1、内嵌模式（元数据保村在内嵌的derby种，允许一个会话链接，尝试多个会话链接时会报错，不适合开发环境）2、本地模式（本地安装mysql替代derby
Soul.相惜·2019-05-25 17:55

hadoop的运行模式

hadoop/common/hadoop-2.7.7/（3）hadoop2.7.6版本详情介绍https://hadoop.apache.org/docs/r2.7.6/2）Hadoop运行模式（1）本地模式
趣学程序·2019-05-20 23:00

【Hadoop学习】本地模式下的官方grep和wordcount案例

1.grep案例1）在hadoop-2.7.2文件下新建一个input文件夹mkdirinput2)将/etc/hadoop目录下所有的配置文件拷贝到input文件夹下面cpetc/hadoop/*.xmlinput/3)运行grep命令筛选出符合规则的结果hadoopjarshare/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jargrep
Anneaisun1995·2019-05-15 23:54

大数据学习笔记之Zookeeper（二）：Zookeeper实战篇（一）

原文链接：http://www.cnblogs.com/LeesinDong/p/10835250.html文章目录2.1本地模式安装部署2.2配置参数解读2.1本地模式安装部署1）安装前准备：（1）安装
as403045314·2019-05-06 21:00

flink 消费 kafka数据，将结果写入到elasticsearch中

各组件在mac上过程如下：1.本地安装下载 kafka_2.12-2.2.0下载kafka：https://kafka.apache.org/quickstart#quickstart_download本地模式使用
慕雨潇潇·2019-04-29 00:00

hive深度优化，提高效率50%不再是幻想——>>>>>超级详细

#开启本地模式sethive.exec.mode.local.auto=true;#注意：表示加载文件的最大值，若大于该配置仍会以集群方式来运行hive.exec.mode.local.auto.inputbytes.max
砥砺前行的疯子·2019-04-27 13:26

Spark学习之在集群上运行Spark

也就是说，你可以在小数据集上利用本地模式快速开发并验证你的应用，然后无需修改代码就可以在大规模集群上运行。首先介绍分布式Spark应用的运行环境架构，然后讨论在集群上运行Spark应用时的一些配置项。
|旧市拾荒|·2019-04-19 16:00

大数据面试题——Hive篇

在本地模式下，每个Hive客户端都会打开到数据存储的连接并在该连接上请求SQL查询。在远程模式下，所有的Hi
提灯寻梦在南国·2019-04-16 19:07

hadoop 伪分布式部署(linux) 超详细版

Hadoop配置本地模式下，不需要配置也可以使用，因此伪分布式需要追加如下配置：exportHADOOP_HOME="/usr/local/hadoop-2.7.2"exportPATH=$HADOOP_HOME
Henry_Lin_Wind·2019-03-30 11:45

Hadoop伪分布模式安装

（1）本地模式（localmode）这种运行模式在一台单机上运行，没有HDFS分布式文件系统，而是直接读写本地操作系统中的文件系统。
DATA小白·2019-03-29 16:26

Linux环境下，Eclipse运行hadoop的本地模式

的安装可以参考我的博客：Linux安装JDK完整步骤（centOS7）：https://blog.csdn.net/Henry_Lin_Wind/article/details/80884975Hadoop本地模式安装
Henry_Lin_Wind·2019-03-26 11:41

Hadoop本地模式安装

2、解压安装包到指定的位置tar-zxvfhadoop-2.9.2.tar.gz-C/usr/local2运行MapReduce程序来验证安装是否成功1、用hadoop自带的wordcount例子来在本地模式下测试跑
Henry_Lin_Wind·2019-03-25 18:32

Storm使用eclipse本地模式跑报错

4825[SLOT_1024]ERRORo.a.s.d.s.Slot-Errorwhenprocessingeventjava.nio.file.FileSystemException:C:\Users\ADMINI~1\AppData\Local\Temp\8f3e5d83-e404-4524-b7b3-79e39139da5b\workers\46cd3e57-5f7c-4629-87c5-7
djw745917·2019-03-20 22:45

Flink部署模式

本地模式的安装唯一需要的只是Java1.7.x或更高版本，本地运行会启动SingleJVM，主要用于测试调试代
大数据研习社·2019-03-18 00:00

Hadoop----单节点集群安装

Hadoop的安装模式单节点上的独立模式（Standalone/loacal）也叫本地模式，使用的文件系统：本地文件系统，运行在单个jvm上，一般用来进行开发测试MapReduce程序单节点上的伪分布模式
HHH992·2019-03-16 23:17

Hive性能优化

Hive常用性能优化方法如下1、Hive的本地模式需要处理的数据量不大，可以使用Hive的本地模式，该模式比Hadoop的集群模式运行速度要快，启用Hive本地模式的命令如下。
murphyZ·2019-03-12 19:11

MapReduce几种提交方式

本地模式运行1.在Windows里的IDE直接运行main方法，会将job提交给本地执行器localjobrunner执行---本地存放Hadoop安装包---输入输出数据可以放在本地路径下(c:/wc
Rest探路者·2019-03-11 09:00

Flink本地模式启动时Task Managers启动失败

环境：修改前启动命令：/usr/local/src/flink-1.7.2启动信息：Startingcluster.Startingstandalonesessiondaemononhostbasic.Startingtaskexecutordaemononhostbasic.终止命令：./bin/stop-cluster.sh终止信息：Notaskexecutordaemon(pid:3589)
Jon2os0on·2019-03-10 18:55

2）zookeeper安装

下载地址http://zookeeper.apache.org/本地模式安装部署1）安装前准备安装JDK拷贝zookeeper安装包到Linux系统下解压到指定目录$tar-zxvfzookeeper-
bullion·2019-03-10 14:55

node 常用语句

node的安装分为全局模式和本地模式。一般情况下会以本地模式运行，包会被安装到和你
w_zhuan·2019-03-05 17:43

hadoop学习笔记之配置、三种模式配置及区别

目录JDK、Hadoop安装、配置本地模式（standaloneoperation）配置实例1实例2伪分布式模式配置本地运行YARN上运行三种模式区别单机模式伪分布式模式完全分布式模式JDK、Hadoop
Dilly__dally·2019-03-02 02:48

hadoop学习笔记之配置、三种模式配置及区别

目录JDK、Hadoop安装、配置本地模式（standaloneoperation）配置实例1实例2伪分布式模式配置本地运行YARN上运行三种模式区别单机模式伪分布式模式完全分布式模式JDK、Hadoop
Dilly__dally·2019-03-02 02:48

Hive性能调优的最佳实践

语法1.2.2例子1.2.3查看统计信息1.3日志2.表设计调优2.1分区表2.2分桶表2.3创建索引2.3.1创建索引语法2.3.2删除索引3.数据格式调优3.1文件格式3.2压缩4.作业调优4.1本地模式
jmx_bigdata·2019-02-28 17:33

追源索骥：透过源码看懂Flink核心框架的执行流程

html追源索骥：透过源码看懂Flink核心框架的执行流程前言1.从Hello,WorldWordCount开始1.1flink执行环境1.2算子（Operator）的注册（声明）1.3程序的执行1.3.1本地模式下的
yyoc97·2019-02-28 00:07

【hive-部署】hive搭建及mysql配置

hive安装部署有三种模式，本地模式，单用户模式，多用户模式。本文只做多用户模式配置。
粮忆雨·2019-02-12 10:54

Hive----3.Hive 执行过程实例分析

JoinOperator等操作符Operator是Hive的最小处理单元每个操作符代表一个HDFS操作或者MapReduce作业Hive通过ExecMapper和ExecReducer执行MapReduce程序，执行模式有本地模式和分布式两种模式
XiaodunLP·2019-02-04 22:05

最详细Flink安装以及案例之WordCount

前言：本文主要介绍如何将Flink以本地模式运行在单机上。
CSDN_小路·2019-01-23 19:10
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他