E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HADOOP基本操作命令大全
MySQL
基本操作
详解
MySQL是一个流行的开源关系型数据库管理系统(RDBMS),它被广泛用于Web应用程序的开发。一、MySQL主要版本介绍MySQL1.0(1995年):MySQL的首个版本。它是由MichaelWidenius(Monty)、DavidAxmark和AllanLarsson开发的。MySQL3.23(2001年):引入了许多重要的功能,包括存储过程、触发器和视图。这个版本标志着MySQL开始成为
love6a6
·
2024-01-29 19:42
mysql
浅析大数据的技术生态圈(
Hadoop
,hive,spark)
大数据本身是个很宽泛的概念,
Hadoop
生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆,各有各的用处,互相之间又有重合。
Rysinal
·
2024-01-29 19:11
hadoop
大数据
hadoop
spark
生态圈
浅析大数据汇总
传统的数据库技术已经无法满足对这些海量数据的存储和处理需求,因此出现了分布式存储和计算技术,如
Hadoop
、HBase等。
shinelord明
·
2024-01-29 19:10
大数据
开源
阿里云服务器2024年2核16G、4核32G、8核64G配置最新收费标准及活动价格
2核16G、8核64G、4核32G配置的云服务器处理器与内存比为1:8,这种配比的云服务器一般适用于数据分析与挖掘,
Hadoop
、Spark集群和数据库,缓存等内存密集型场景,因此,多为企业级用户选择,
qq_3304559116
·
2024-01-29 18:17
阿里云
阿里云
服务器
云计算
CICD -- (一) 持续集成 git + jenkins
一、版本控制系统1、什么是版本控制系统2、git
基本操作
2.1、本地安装git2.2、配置Git2.3、检查配置文件2.3、创建本地仓库2.4、使用git提交内容到版本管理中2.5、如何修改git版本控制的文件名
知无涯学无尽
·
2024-01-29 18:10
CICD
git本地仓库
基本操作
1.git:查看系统有没有安装Git安装完成后,在开始菜单里找到“Git”->“GitBash”,蹦出一个类似命令行窗口的东西,就说明Git安装成功!2.设置全局属性,用户名和邮箱$gitconfig--globaluser.name"qiansao"$gitconfig--globaluser.email"
[email protected]
"3.gitinit:创建版本库$gitinitInit
一粒有梦想的痞老板
·
2024-01-29 18:44
全面解析基于
Hadoop
模型的数据分析平台框架
本文主要讲解以下两个方面:♦
Hadoop
MapReduce与Hive技术研究♦数据分析平台框架设计与环境配置
Hadoop
MapReduce与Hive技术研究一、
Hadoop
框架工作机制
Hadoop
框架定义
丨程序之道丨
·
2024-01-29 17:04
【Java 数据结构】二叉树
二叉树1.树型结构(了解)1.1概念1.2概念(重要)1.3树的表示形式(了解)1.4树的应用2.二叉树(重点)2.1概念2.2两种特殊的二叉树2.3二叉树的性质2.4二叉树的存储2.5二叉树的
基本操作
山顶是一定要去的
·
2024-01-29 14:11
java
数据结构
开发语言
intellij-idea
eclipse
数据结构(链表)
文章目录一、单链表1、单链表定义2、初始化单链表2.1、不带头结点的单链表2.2、带头结点的单链表3、单链表
基本操作
3.1、按位序插入(带头结点)3.2、按位序插入(不带头结点)3.3、指定结点的后插操作
微笑伴你而行
·
2024-01-29 14:36
蓝桥杯
数据结构
链表
【若泽大数据第一天】--在vmware workstation上安装CentOS6.5系统
一、下载并安装vmwareworkstationpro12二、下载CentOS6.5镜像文件三、创建虚拟机并命名为
hadoop
0011、在VM12中选择创建新虚拟机2、自定义高级3、默认下一步4、选择稍后安装操作系统
naroutofan
·
2024-01-29 11:25
Elasticsearch集群部署及Head插件安装
由于ES比较吃内存,所以每台服务器的配置要求为:CPU:2核内存:2G我的三个节点分别是
Hadoop
Node01、
Hadoop
Node02、
Hadoop
Node03,以下操作全部基于
Hadoop
Node01
景鹏虎晓
·
2024-01-29 11:54
elasticsearch
es
spark快速入门java_Spark 快速入门
既然本教程中我们不使用HDFS,你可以随便下载一个适配任何
Hadoop
的版本的Spark。
陈兰香
·
2024-01-29 11:54
spark快速入门java
Docker基础操作-使用dockerfile、docker-compose操作镜像和容器(常用命令)
简介目录简介一个开源的应用容器引擎
基本操作
镜像容器数据卷Dokerfile自定义镜像:Docker-ComposeDocker搭建私有镜像仓库可视化工具(Portainer)常用命令一个开源的应用容器引擎
ZHJSZSD
·
2024-01-29 11:39
docker
容器
运维
基于大数据平台的kylin安装部署手册
目录一.单例Kylin部署1.环境准备1.1软件要求1.2硬件要求1.3
Hadoop
环境1.4安装前环境检查1.4.1开启时钟同步1.4.2安装net-tools1.4.3检查hbase是否可用1.4.4
猿来孺词
·
2024-01-29 10:26
部署安装
大数据
kylin
分布式
数据仓库
数据分析
MR和Spark的比较
二、
hadoop
和spark的shuffle相同和差异?三、Spark与
Hadoop
差异一、Spark为什么比MR快?
猿来孺词
·
2024-01-29 10:55
mr
spark
大数据
分布式
hadoop
Elk运维-Elastic7.6.1集群安装部署
集群安装结果说明实例配置安装软件安装账号
hadoop
12C4G磁盘:50G云服务器elasticsearchkibanard
hadoop
22C4G磁盘:50G云服务器elasticsearchrd
hadoop
32C4G
消逝的bug
·
2024-01-29 10:11
运维
elk
数据库
Hadoop
学习之路(七) MapReduce框架Partitioner分区
Partitioner分区的作用是什么?在进行MapReduce计算时,有时候需要把最终输出数据分到不同的文件中,比如按照省份划分的话,需要把同一省份的数据放到一个文件中;按照性别划分的话,需要把同一性别的数据放到一个文件中。我们知道最终的输出数据是来自于Reducer任务。那么如果要得到多个文件,意味着有相同数量的Reducer任务在运行。Reducer任务的数据来自于Mapper任务,也就是M
shine_rainbow
·
2024-01-29 10:26
[转载]超赞,老外的一种避免递归查询所有子部门的树数据表设计与实现!
查出所有子孙部门查询子孙部门总数判断是否叶子节点其他
基本操作
完结通常树形结构的存储,是在子节点上存储父节点的编号来确定各节点的父子关系,例如这样的组织结构:image.png与之对应的表数据(department
南城故事
·
2024-01-29 10:44
长光工程师培训20180108
UG学习--王老师一、概述二、
基本操作
操作界面;文件管理操作;编辑对像;通用工具;视图布局;图层;系统参数等三、实体建模基础1.概述2.草图
遇见学无止境
·
2024-01-29 09:44
HDFS
HDFS入门1.1.HDFS介绍HDFS是
Hadoop
DistributeFileSystem的简称,意为:
Hadoop
分布式文件系统。是
Hadoop
核心组件之一,作为最底层的分布式存储服务而存在。
VincentLeon
·
2024-01-29 08:44
Hadoop
, HIve, Spark关系简述
大数据∈数据管理系统的范畴数据管理系统:数据怎么存?数据怎么算?单机数据管理时代下,数据处理的任务:IO密集型;数据存不下?HDFS用于存放多机器的数据并提供相关Api接口。HDFS中引入了一个模块:MapReduce(基于磁盘计算)。MapReduce:提供了一个任务并行的框架,通过它的Api抽象让用户把这个并行程序分成两个阶段,即Map阶段(分工),Reduce阶段(汇总)。Hive:在Had
小白兔奶糖ovo
·
2024-01-29 07:22
hadoop
hive
spark
备战蓝桥杯--数据结构及STL应用(基础)
今天轻松一点,讲一讲stl的
基本操作
吧!首先,让我们一起创建一个vector容器吧!
cocoack
·
2024-01-29 07:19
数据结构
c++
开发语言
蓝桥杯
兴趣是最好的老师
图片发自App兴趣是最好的老师每年过年难免被弟弟妹妹们拉着陪爸爸打一两次麻将,我似乎一直是技术最烂的一个,多少年来,我一直学不会如何计算从哪里抓牌,怎么算账,只是知道
基本操作
也是牌路狭窄,目光短浅,别人有很多方法各种途径可以赢牌
刘慧烨
·
2024-01-29 06:16
记一次Flink自带jar包与第三方jar包依赖冲突解决
flink版本1.14.5
hadoop
2.6.0为了实现flink读取hive数据写入第三方的数据库,写入数据库需要调用数据库的SDK,当前SDK依赖的protobuf-java-3.11.0.jar,
一枚小刺猬
·
2024-01-29 06:10
flink
flink
jar
hadoop
Hadoop
面试题及参考答案
目录1、什么是
Hadoop
及其组件2、
Hadoop
的守护进程3、
Hadoop
的YARN/HDFS/MapReduce分别包含哪些组件,每个组件的职能是什么?
zuolixiangfisher
·
2024-01-29 06:02
Hadoop
hadoop
hdfs
大数据
hadoop
面试题
0.思维导图1.HDFS1.HDFS的架构♥♥ HDFS主要包括三个部分,namenode,datanode以及secondarynamenode。这里主要讲一下他们的作用:namenode主要负责存储数据的元数据信息,不存储实际的数据块,而datanode就是存储实际的数据块,secondarynamenode主要是定期合并FsImage和edits文件(这里可以进行扩展,讲一下为什么有他们的
韩顺平的小迷弟
·
2024-01-29 06:27
大数据面试题
hadoop
大数据
分布式
数据库总结2
上篇数据库
基本操作
数据库操作目录1数据库开发操作1.1基本查询(不带任何条件)1.2条件查询(where)1.3分组查询(groupby)1.4排序查询(orderby)1.5分页查询(limit)1.6
it优质男
·
2024-01-29 05:55
数据库
java
数据库
sql
大数据之
Hadoop
-MapReduce(1)
第1章MapReduce概述1.1MapReduce定义MapReduce是一个分布式运算程序的编程框架,是用户开发“基于
Hadoop
的数据分析应用”的核心框架。
jackyan163
·
2024-01-29 04:18
Hive初体验
首先,确保启动了Metastore服务{runjar就是metastore;
hadoop
要先启动}可以执行:bin/hive进入到HiveShell环境中,可以直接执行SQL的语句;·创建表(hive里面的字符串就是
%HelloWorld%
·
2024-01-29 03:09
hive
hadoop
数据仓库
[m1pro ] ssh: connect to host localhost port 22: Connection refused
在学习
Hadoop
的时候,使用sshlocalhost遇到以下问题原因:本地没有打开远程登录解决办法:打开远程登录成功结果
程序员三木
·
2024-01-29 03:33
大后端
ssh
服务器
数据库
一起学习ETCD系列——运维操作之etcdctl使用
文章目录概要一、命令二、实操2.1、
基本操作
2.2、watch2.3、租约2.4、分布式锁2.5、角色2.6、用户2.7、认证2.8、集群概要本文主要用来总结ETCD客户端ctcdctl的命令操作,在运维过程中可能常常用到的
pigfu
·
2024-01-29 02:50
ETCD
etcd
etcdctl使用
spark shuffle
这个就是spark和
hadoop
的主要区别,基于内存进行运算。
流砂月歌
·
2024-01-29 01:13
Linux服务器配置与管理(第一次实验)
实验目的及具体要求1.熟悉Ubuntu桌面环境和
基本操作
2.熟悉命令语法格式3.掌握Linux各类命令的使用方法4.熟悉Linux操作环境实验仪器、设备和材料笔记本电脑软件VMwareWorkstation17PlayerUbuntu64
戏神
·
2024-01-29 00:27
linux
运维
服务器
ubuntu
Linux服务器配置与管理
Spark运行原理
无论是性能,还是方案的统一性,对比传统的
Hadoop
,优势都非常明显。
hellozhxy
·
2024-01-28 23:41
spark
spark
快乐学Python,DataFrame的
基本操作
对于DataFrame对象,我们只是简单将其打印出来,这一篇我们来学习围绕DataFrame的
基本操作
(添加行、列,删除行、列,排序等),除了DataFrame,也会介绍另外一个重要的pandas数据结构
我爱娃哈哈
·
2024-01-28 23:58
玩转Python数据分析
python
开发语言
pandas
主内存与工作内存交互协议
文章目录八种原子操作八种
基本操作
八种原子操作关于主内存与工作内存之间的具体交互协议,即一个变量如何从主内存拷贝到工作内存、如何从工作内存同步到主内存之间的实现细节,Java内存模型定义了以下八种原子操作来完成
小阳小朋友
·
2024-01-28 23:48
并发
java
后端
数仓治理-小文件治理
希望对大家有所帮助https://mp.weixin.qq.com/s/HDxAGhGIPvXF38wPiXZ7xg[离线计算-Spark|Hive]HDFS小文件处理-腾讯云开发者社区-腾讯云HDFS小文件过多会对
hadoop
爱吃辣条byte
·
2024-01-28 23:40
数据治理
大数据
数据仓库
数据结构 - 顺序表
基本操作
目录前言:接口实现顺序表
基本操作
顺序表初始化(SeqListInit)检查空间进行增容(SeqListCheckCapacity)顺序表打印(SeqListPrint)销毁(SeqListDestroy
NO.-LL
·
2024-01-28 21:39
数据结构
数据结构
链表
算法
数据结构-顺序表
基本操作
-C语言代码
目录一、准备工作#include#include#include//动态顺序表typedefintSLDataType;typedefstructSeqList{SLDataType*a;//指向动态开辟的数组intsize;//存储数据的个数intcapacity;//存储空间的大小}SL;1.这里SLDataType是给int的一个别名,因为顺序表的类型不一定是int,也有可能是double等
Srtive
·
2024-01-28 21:09
数据结构
c语言
算法
数据结构-顺序表构建及其
基本操作
顺序表的实现及其
基本操作
(C语言实现)总述顺序表是最简单的数据结构之一,在计算机中顺序表一般以数组的形式保存,我们都知道数组是线性保存的,因此顺序表也是线性保存的,线性表的连续存储值得是在计算机中用一块连续的存储空间保存线性表的元素
不万能的小方
·
2024-01-28 21:07
数据结构
链表
算法
数据结构-线性表
文章目录数据结构—线性表1.线性表的定义和
基本操作
线性表的定义线性表的特点线性表的
基本操作
2.线性表的顺序存储和链式存储表示顺序存储链式存储单链表循环链表双向链表数据结构—线性表1.线性表的定义和
基本操作
线性表的定义定义
小哼快跑
·
2024-01-28 21:07
数据结构
数据结构
线性表
考研
数据结构-顺序表中
基本操作
数据结构—顺序表中
基本操作
1.顺序表的初始化【算法步骤】为顺序表L动态分配一个预定义大小的数组空间,使elem指向这段空间的基地址。将表的当前表长设为0。
小哼快跑
·
2024-01-28 21:07
数据结构
数据结构
算法
顺序表的基本操作
2021-08-10 HDFS Web报错Couldn‘t preview the file.
添加配置信息dfs.webhdfs.enabledtrue第二步:配置浏览器所在系统的hosts文件windows:在C:\Windows\System32\drivers\etc\hosts末尾增加内容(
Hadoop
学习是一种信仰_zdy
·
2024-01-28 21:28
大数据
hadoop
大数据
hdfs
HDFS文件系统的根目录和用户主目录解析
HDFS文件系统的根目录是/,用户主目录是/user/[
hadoop
用户名]根据上面的截图,所有的文件都放在根目录及其子目录下。
问君何能尔?心远地自偏
·
2024-01-28 21:57
大数据
Name node is in safe mode
相信
hadoop
用户经常为安全模式头痛,但是又是难以避免的。安全模式开启通常是由于hdfs文件系统数据完整性缺失造成。所以核心就是想办法让hdfs文件系统数据变得完整,相对没有损坏。
大数据东哥(Aidon)
·
2024-01-28 21:27
大数据
hadoop
safemode
safemode
hadoop
safe
mode
Name
node
is
in
safe
记一次HDFS Web报错Couldn‘t preview the file. NetworkError: Failed to execute ‘send‘ on ‘XMLHttpRequest‘
tpreviewthefile.NetworkError:Failedtoexecute‘send’on‘XMLHttpRequest’:Failedtoload‘http://slave1:9864/webhdfs/v1/Hello
Hadoop
.txt
一花一世界~
·
2024-01-28 21:55
Linux-Centos
x.x
Hadoop
大数据
hadoop
hdfs
大数据
经验分享
centos
Java技术栈 ——
Hadoop
入门(二)
Java技术栈——
Hadoop
入门(二)一、用MapReduce对统计单词个数1.1项目流程1.2可能遇到的问题1.3代码勘误1.4总结一、用MapReduce对统计单词个数1.1项目流程(1)上传jar
键盘国治理专家
·
2024-01-28 21:51
Java技术栈
java
hadoop
开发语言
Splay(伸展树)的
基本操作
(c++)
Myfirstblog\color{white}{\rmMy\first\blog}Myfirstblog写给新手,大佬勿喷{\rm写给新手,大佬勿喷}写给新手,大佬勿喷目录前置知识Splay是什么支持的操作左旋右旋伸展
基本操作
前驱后继插入删除查某数排名查排名为
chs_bilianment
·
2024-01-28 21:06
平衡树
算法
数据结构
c++
flink架构
它集成了使用所有常见的群集资源管理器,例如
Hadoop
YARN和Kubernetes,但也可以设置为作为独立集群,甚至作为库。
m0_66520412
·
2024-01-28 20:29
flink
架构
大数据
计算机实验报告3
这节课做的主要是Word2010的
基本操作
,一共有三个实验部分。不过…由于张小乖的技术辣鸡,没能做完……(好难受π_π)但是,张小乖做的还是算快的了,做完了两个实验!
Passerby_5cf8
·
2024-01-28 20:03
上一页
20
21
22
23
24
25
26
27
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他