HadoopClient

【大数据基础平台】星环TDH社区集群版本部署

目录一、概述二、环境配置三、安装Manager四、配置集群五、安装服务六、基本配置6.1开启安全6.2安装TDH客户端6.3集群外使用hadoopclient6.3.1使用hadoop/hdfs6.3.2
开着拖拉机回家·2023-11-03 06:43

今晚九点|一个小运维的《Golang 入门心路历程》

公开课主题：一个小运维的《Golang入门心路历程》主要内容：缘起初识熟悉实践爱上缘起本人之前是hadoophbase运维，为了节约成本hadoopclient都是多用户的，也就是不同的业务线在同一台机器上
51reboot·2023-03-25 14:49

【2019-07-31】jj场景下日志收集办法

步骤一：首先在yarn上找到停止的任务的appid（可以），格式为applications_xxxxx_xxxx，状态为Finished步骤二：进入大数据客户端安装目录cd/opt/hadoopclient
学师大术·2023-03-10 08:51

Hadoop RPC Client工作原理分析

文章目录前言HadoopClient的内部结构组成ClientId和CallIdClientConnection和ConnectionCall的组织关系ClientRPCCall的处理流程相关链接前言对于
Android路上的人·2021-04-17 11:44

jupyter notebook on spark 远程配置

环境：server：centos7+annaconda2+python2+jupyter+spark+hadoopclient：windows10+浏览器在服务器上安装spark+hadoop集群之后，
thinklog2018·2020-09-14 20:18

Hbase(五) hbase内部原理

一、系统架构客户端连接hbase依赖于zookeeper，hbase存储依赖于hadoopclient：1、包含访问hbase的接口，client维护着一些cache（缓存）来加快对hbase的访问，比如
weixin_30443895·2020-08-26 09:33

kettle支持kerberos认证的hive集群

162.1.115.89kettle----结束步骤1下载完整客户端，安装至目录“/opt/hadoopclient”。步骤3使用vi/etc/profile编辑以下内容插入到文
半_调_子·2020-08-21 17:33

hadoop client 本地开发调试客户端搭建

hadoopclient本地开发调试客户端搭建在实际的开发环境中，在集群环境中开发往往存在很多安全隐患，例如集群文件被误删等等，所以一般的开发工作都是本地完成开发的。
微溪·2020-07-08 10:42

在spring boot下如何通过rest 接口 来上传文件 和下载文件 到 hadoop hdfs

本文将用代码来演示在springboot里面，用hadoopclient，通过restfulAPI来上传文件和下载文件到hadoophdfs。里面有一些代码依赖坑，注意绕行。
大树叶·2020-07-04 12:57

我是world，这是我的Hadoop WordCount之旅（二）

我叫world，helloworld的world，咱们书接上回，上回书说到我们一家被一个叫小客(hadoopclient)的运送到了一个叫hdfs的地方，我们在那等待着被MapReduce进行体检。
GQB1226·2020-06-21 20:20

MapReduce学习笔记

MapReduce应用1.在使用IDE开发MapReduce应用时，在maven工程的pom.xml文件中需要加入对hadoop-client的依赖，它包含了和HDFS及MapReduce交互所需要的所有Hadoopclient-side
书忆江南·2020-06-21 05:41

视频版|一个小运维的《Golang 入门心路历程》

公开课主题：一个小运维的《Golang入门心路历程》主要内容：缘起(Go语言)初识(Go语言)熟悉(Go语言)实践(Go语言)爱上(Go语言)缘起本人之前是hadoophbase运维，为了节约成本hadoopclient
51reboot·2019-12-24 10:27

hadoop streaming 使用总结

hadoopclient：客户端可以让用户访问集群，hadoopclient使用手册，通过配置hadoop-site.xml文件，实现访问不同集群，同时该客户端目录的xx/xx/hadoop/bin/hadoop
coder_oyang·2018-11-08 10:32

Spark DataSet和RDD与DataFrame转换成DataSet

二、创建DataSet首先需要导入SparkCore、SparkSQL、HadoopClient依赖包。pox.xml文件如下：4.0.0
leboop·2018-08-10 23:13

Spark DataSet和RDD与DataFrame转换成DataSet

二、创建DataSet首先需要导入SparkCore、SparkSQL、HadoopClient依赖包。pox.xml文件如下：4.0.0
leboop·2018-08-10 23:13

hadoop client机搭建

阅读更多hadoopclient机作为集群的堡垒机使用，使得集群环境和开发环境分离开来选择集群外的一台机器，搭建client机，流程如下：（1）配置单向（master可以ssh到client，client
功夫小当家·2018-04-26 11:00

C++读写HDFS代码

1.C++读写HDFS工程HadoopClient代码1.1operate_hdfs.h:#ifndef__OPERATE_HDFS_H#define__OPERATE_HDFS_H#includeclassoperatehdfs
FlyGently·2017-09-11 11:21

hive一些问题

hadoopclient/hiveclient去连接微软云Azure上的HDI报错：hive--servicemetastoreExceptioninthread"main"org.apache.thrift.transport.TTransportException
1350368559·2016-04-20 10:17

CentOS6.7和Ubuntu12.04安装HadoopClient的一些问题

CentOS6.7安装Client(hadoop、hive)查看Linux系统版本[root@AAC-DMP-06amos]#lsb_release-aLSBVersion::base-4.0-amd64:base-4.0-noarch:core-4.0-amd64:core-4.0-noarch:graphics-4.0-amd64:graphics-4.0-noarch:printing-4.
1350368559·2016-04-09 21:36

Hadoop提交Job Client端源码分析

博客链接http://blog.csdn.net/a822631129/article/details/50310903），分析到了执行用户写的mapreduce程序，本文分析mapreduce程序中hadoopclient
a822631129·2015-12-17 15:00

5分钟深入浅出 HDFS

是通过Hadoopclient进行的。
qwq998492·2015-11-05 11:14

HDFS HA系列实验之五：client 配置

Hadoopclient访问HDFS是通过client端的hadoop配置文件来访问hadoop集群的，一般的情况下我们在配置文件core-site.xml中配置fs.defaultFS是使用一个类似hdfs
哭你吃完·2014-11-14 09:00

HDFS HA系列实验之五：client 配置

Hadoopclient访问HDFS是通过client端的hadoop配置文件来访问hadoop集群的，一般的情况下我们在配置文件core-site.xml中配置fs.defaultFS是使用一个类似hdfs
book_mmicky·2014-05-13 15:00

Hive配置项的含义详解

mapred.reduce.tasks：每个作业的reduce任务数，默认是hadoopclient的配置1个；hive.exec.reducers.bytes.per.reducer：每个reducer
龙明倩·2014-03-17 20:31

Hive配置项的含义详解（2）

mapred.reduce.tasks：每个作业的reduce任务数，默认是hadoopclient的配置1个；hive.exec.reducers.bytes.per.reducer：每个reducer
Change Dir·2013-08-15 14:00
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他