E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hbase集群安装
Hbase
高可用集群部署
Zookeeper集群的正常部署并启动Hadoop集群的正常部署并启动配置环境变量vi/etc/profile#
Hbase
-HAexport
HBASE
_HOME=/home/xyp9x/
hbase
-2.0.5
衡超越爱学习~
·
2024-01-19 00:21
Hbase
hbase
hadoop
big
data
HBase
学习三:集群部署
集群启停顺序:启动Hadoop—>启动
HBase
—>关闭
HBase
—>关闭Hadoop1环境准备1.0环境前期准备参考基础环境配置1.1机器准备hostnameipvm1ip1vm2ip2vm3ip31.2
Studying!!!
·
2024-01-19 00:50
中间件
HBase
【数据采集与预处理】数据传输工具Sqoop
Sqoop安装配置(一)下载Sqoop安装包并解压(二)修改配置文件(三)拷贝JDBC驱动(四)验证Sqoop(五)测试Sqoop是否能够成功连接数据库四、导入数据(一)RDBMS到HDFS(二)RDBMS到
HBase
Francek Chen
·
2024-01-18 22:19
大数据技术基础
sqoop
hadoop
大数据
数据库
MacBook Linux安装zookeeper
MacBookLinux安装zookeeperZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
的重要组件。
beyond阿亮
·
2024-01-18 17:12
zookeeper
macbook
linux
大数据 - Kafka系列《一》- Kafka基本概念
类似于
hbase
里面的region的概念3.Consumer:消费者4.Zookeeper1.1什么是k
王哪跑nn
·
2024-01-18 15:05
kafka
大数据
大数据
kafka
分布式
书签留存文档
mavenSpringBoot官方文档学习实现一个简单的数据库连接池-CSDN博客不安装oracle客户端,用plsql连接oracle-郑文亮-博客园IDEA中创建mavenweb项目的详细部署kettle连接
hbase
-CSDN
Liang.Wang
·
2024-01-18 09:13
eclipse
java
tomcat
作为刚入职的小白,怎么才能学好大数据 ?
大数据学习方向一、大数据运维之Linux基础打好Linux基础,以便更好地学习Hadoop,
hbase
,NoSQL,Spark,Storm,docker,openstack等。
铁拳虎
·
2024-01-18 09:40
大数据学习
大数据开发
大数据入门
数据分析
Hadoop
Kafka
大数据
大数据技术
人工智能
spark
Linux
大数据
大数据学习
大数据开发
大数据小白初探
Hbase
从零到入门
目录1.前言2.初识
Hbase
2.1有了HDFS为什么还需要
HBase
呢?2.2
HBase
主要做什么的?2.3
HBase
架构特点?2.4
HBase
的适用场景?2.5
HBase
的数据模型和物理储存格式?
北京-景枫
·
2024-01-18 09:10
hbase
大数据
列簇式存储
HBASE
学习一:原理架构详解
1、架构原理1.1、基本概念
HBase
是一款面向列存储,用于存储处理海量数据的NoSQL数据库。它的理论原型是Google的BigTable论文。
Studying!!!
·
2024-01-18 08:34
中间件
hbase
学习
架构
beego的控制器Controller篇 — Session控制
session配置及使用beego内置了session模块,目前session模块支持的后端引擎包括memory、cookie、file、mysql、redis、couc
hbase
、memcache、postgres
leellun
·
2024-01-18 08:50
beego从入门到实践
beego
LINUX上新建用户无法进入
hbase
进行操作 2020-08-26
1.在LINUX上新建用户coscp用户,coscp用户没有权限,进入
hbase
进行操作,调用脚本在
hbase
上新建表,会提示没有权限解决方法给用户授权:grant'coscp','RWXCA'2.使用
1edee8a22fc9
·
2024-01-18 07:04
Spark—shell,
Hbase
—shell
Spark:SPARKSQLresults=spark.sql("SELECT*FROMpeople")//读取JSON文件valuserScoreDF=spark.read.json("hdfs://master:9000/people.json")Spark内置函数的使用除select()外,还可以使用filter()、groupBy()等方法对DataFrame数据进行过滤和分组,比如:df
꧁༺朝花夕逝༻꧂
·
2024-01-18 07:21
spark
大数据
分布式
Hbase
必背面试题
1,
hbase
读流程首先通过meta表找到要读数据的region所在的RegionServer,然后去BlockCash中读取,如果没有就去Memstore中读取,如果也没有,那就去Hfile中去读(1
写scala的老刘
·
2024-01-18 06:09
【SpringBoot框架篇】25.集成Minio实现文件的分布式对象存储
文章目录1.简介2.安装使用2.1.下载二进制文件安装2.1.1单机部署2.1.2.
集群安装
2.1.2.1创建存储路径2.1.2.2.创建集群启动脚本2.1.2.3.分别启动4个节点2.2.使用docker
皓亮君
·
2024-01-18 03:10
springBoot
spring
boot
linux
后端
分布式
Nacos 单机、
集群安装
Mysql持久化
Nacos单机、
集群安装
Mysql持久化关于Nacos是什么跟EurekaConsulEtcdZooKeeper等等注册中心有啥区别。
Mr__joe
·
2024-01-18 02:32
【远程访问】
Hbase
+Phoenix(伪分布式部署)
目录Server端部署
Hbase
+Phoenix环境下载安装包安装JDK并配置环境变量配置ssh免密登录(可选)安装并启动zookeeper安装
hbase
安装phoenix启停
hbase
验证
hbase
是否启动
itachi-uchiha
·
2024-01-18 02:46
数据库
hbase
分布式
big
data
standalone
AntDB单机版安装指南
以下地址包含单机版安装以及
集群安装
指导,已经非常详细,不再赘述安装过程,只记录几个需要注意的点。
itachi-uchiha
·
2024-01-18 02:45
数据库
antdb
Hbase
--读取数据快还是写数据快
首先,需要明确的是,
Hbase
写入速度比读取速度要快,根本原因LSM存储引擎从存储引擎的角度分析
Hbase
底层的存储引擎为LSM-Tree(Log-StructuredMerge-Tree)。
李小李的路
·
2024-01-17 21:20
Windows下
HBase
的搭建
@[TOC]Windows下
HBase
的搭建
HBase
下载与设置(Windows)本人刚刚接触
HBase
,为了配置
HBase
,参考了一些博客,按照操作顺序执行后存在一些问题,解决后,得出了有效的步骤,并一定对所有情况都适用
qq_42725437
·
2024-01-17 17:51
经验
Hadoop
集群安装
(入门级)
Hadoop
集群安装
配置三台主机(每台主机都需要配置)修改IP使用vi/etc/sysconfig/network-scripts/ifcfg-xx不同的机器可能不同修改三台主机ipaddr地址如下192.168.200.101master192.168.200.102slave1192.168.200.103slave2
blueoftravel
·
2024-01-17 17:20
ZooKeeper 原理及其在 Hadoop 和
HBase
中的应用
简介ZooKeeper是一个开源的分布式协调服务,由雅虎创建,是GoogleChubby的开源实现。分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。基本概念本节将介绍ZooKeeper的几个核心概念。这些概念贯穿于之后对ZooKeeper更深入的讲解,因此有必要预先了解这些概念。集群角色在
Java程序员YY
·
2024-01-17 15:08
elasticsearch 工作原理_ELK技术栈ElasticSearch,Logstash,Kibana
基础部分工作原理es增删改内部原理ELK
集群安装
部署文档管理索引管理搜索聚合分析分词数据建模Javaapi零停机indexsegmentmerge乐观锁并发控制索引别名相关度评分算法与定制近似聚合算法docvalues
weixin_39730284
·
2024-01-17 12:50
elasticsearch
工作原理
elasticsearch
按月聚合
kibana创建索引
kibana启动
kibana查询es语法
logstash
启动
Hbase
- 自定义Rowkey规则
在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制TableInputFormat来实现我们的需求了,我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
kikiki2
·
2024-01-17 11:48
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki4
·
2024-01-17 10:29
HBase
当中的二级索引的基本介绍
由于
HBase
的查询比较弱,如果需要实现类似于selectname,salary,count(1),max(salary)fromusergroupbyname,salaryorderbysalary等这样的复杂性的统计需求
临界爵迹
·
2024-01-17 06:44
大数据
数据库
hbase
HBase
的协处理器
1、起源
Hbase
作为列族数据库最经常被人诟病的特性包括:无法轻易建立“二级索引”,难以执行求和、计数、排序等操作。
临界爵迹
·
2024-01-17 06:43
大数据
数据库
hbase
HBase
三个重要机制
1、flush机制当MemStore达到阈值,将Memstore中的数据Flush进Storefile涉及属性:
hbase
.hregion.memstore.flush.size:134217728即:
临界爵迹
·
2024-01-17 06:13
大数据
hbase
HBase
的预分区
1、手动指定预分区
hbase
(main):001:0>create'staff','info','par
临界爵迹
·
2024-01-17 06:13
大数据
hbase
HBASE
学习四:常用命令汇总梳理
1、服务状态2、问题排查3、运维操作、命令积累#基础判断业务状态命令#自动均衡region命令
Studying!!!
·
2024-01-17 05:59
中间件
HBase
kylin集群负载均衡(kylin3,
hbase
RIF问题)
hbase
历险记目录
hbase
历险记寻找问题分析原因解决方案方案1(资源问题、失败)方案2(成功)寻找问题不知道你是不是有这样的疑惑。
向他一样rap
·
2024-01-17 05:52
kylin
hbase
kylin
负载均衡
大数据
HBase
基础
HBase
基础
HBase
1.
HBase
简介1.1
HBase
定义1.2
HBase
数据模型1.2.1
HBase
逻辑结构1.2.2
HBase
物理存储结构1.2.3数据模型1.3
HBase
基本架构2.
HBase
奇妙的代码
·
2024-01-17 05:21
大数据
#
Java
hbase
数据库
大数据
HBase
集群写入出现大量毛刺排查
一名10年以上大数据架构&研发经验从业者,目前主要从事云原生大数据方向设计,擅长云原生技术、数据架构、数据平台构建、大数据组件性能调优问题现象查看监控,业务请求量正常,但是server端毛刺严重近期在
HBase
KubeData
·
2024-01-17 02:12
大数据技术
大数据
架构
hbase
mongo
集群安装
Mongo集群部署1.部署准备1.1Mongo集群环境1.1.1mongo版本版本号:4.0.01.1.2硬件环境:|172.16.18.73|172.16.20.211|172.16.21.190||mongos|mongos|mongos||configserver|configserver|configserver||shardserver1主节点|shardserver1副节点|shard
Braint_java
·
2024-01-16 22:03
【大数据】zookeeper-3.9.0安装
目录前言一、zookeeper概述1.zookeeper特点2.zookeeper数据结构3.应用场景二、zookeeper安装说明(就要用最新版)1.本地安装2.
集群安装
3.选举机制4.集群启动停止脚本
欧叶冲冲冲
·
2024-01-16 22:40
zookeeper
大数据
zookeeper
分布式
程序人生
笔记
学习
00-初识MySQL
非关系型数据库:MongoDB,Redis,
HBase
等。MySQL是一个关系型数据库管理系统,是IT界使用
绿色的小苹果
·
2024-01-16 21:51
HBase
实践 |
HBase
TB级数据规模不停机迁移最佳实践
背景有关
HBase
集群如何做不停服的数据迁移一直都是云
HBase
被问的比较多的一个问题,目前有许多开源的工具或者
HBase
本身集成的方案在性能、稳定性、使用体验上都不是很好,因此阿里云提供了BDS迁移服务
王知无(import_bigdata)
·
2024-01-16 16:38
HBase
集群管理
通过之前文章的描述,我们已经有能力设计并部署搭建
HBase
集群了当我们的
HBase
集群开始运行的时候,新的挑战又来了例如,我们可能会遇到在集群运行的时候添加或者删除节点又或者需要拷贝/备份整个集群的数据等等如何在集群运行的时候以最小的代价来执行这些操作呢
xiaohei.info
·
2024-01-16 16:08
HBase
hbase
集群
管理
运维
DataX&数据同步(全量)
1.DataX简介1.1DataX概述 DataX是阿里巴巴开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、
HBase
、FTP
韩顺平的小迷弟
·
2024-01-16 11:29
大数据
数据同步
Hbase
用法总结
Hbase
用法总结一、
Hbase
命令进入
hbase
命令行在
hbase
的安装目录下bin/
hbase
shell虽然类似sql命令,但所有执行都不需要加分号结束,有SQL编写强迫症的需要注意适应1、DDL操作
天选之子123
·
2024-01-16 10:53
大数据
hbase
网络
数据库
Hadoop 3.2.4 集群搭建详细图文教程
MapReduce是计算框架、代码层面的组件,没有集群之说二、Hadoop集群部署方式标题三、
集群安装
3.1集群角色规划集群模式主要用于生
༺࿈誓言࿈༻
·
2024-01-16 05:10
hadoop
大数据
分布式
大数据技术原理与应用 第三版 林子雨 期末复习(二) Hadoop HDFS
HBase
大数据技术原理与应用第三版林子雨期末复习(二)HadoopHDFS
HBase
Hadoop生态系统HDFSHDFS结构块NameNode与SecondNameNode与DataNode数据冗余存储HDFS
头发多多,肆意生长
·
2024-01-16 05:21
大数据技术
hadoop
hdfs
hbase
大数据
大数据技术原理与应用期末复习(林子雨)
大数据技术原理与应用期末复习(林子雨)Hadoop的特性
HBase
编程实践NoSQL的四大类型键值数据库优点:缺点:列族数据库优点:缺点:文档数据库优点:缺点:图数据库优点:缺点:NoSQL的三大基石CAP
laowang357
·
2024-01-16 05:50
大数据
hadoop
spark
hive
kafka使用zookeeper完成集群搭建
1、zookeeper
集群安装
zookeeper下载:ApacheDownloadMirrors1.1、zookeeper解压修改配置文件名#1、解压到指定目录tar-zxvfapache-zookeeper
知其_所以然
·
2024-01-16 03:04
kafka
k8s 部署 Atlas
编译Atlasmvncleanpackage-DskipTests-Dfast-Drat.skip=true-Pdist,embedded-
hbase
-solrAtlas内嵌
hbase
solr先启动
hbase
胖胖胖胖胖虎
·
2024-01-15 22:07
K8S
大数据组件
kubernetes
atlas
Zookeeper使用详解
介绍ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
的重要组件。
有梦想的攻城狮
·
2024-01-15 09:25
架构设计
zookeeper
分布式
云原生
分布式计算平台 Hadoop 简介
其主要采用MapReduce分布式计算框架,包括根据GFS原理开发的分布式文件系统HDFS、根据BigTable原理开发的数据存储系统
HBase
以及资源管理系统YARN。
rookiexiong
·
2024-01-15 08:19
Hadoop学习
分布式
hadoop
大数据
架构设计:远程调用服务架构设计及zookeeper技术详解
当我研究学习hadoop的相关技术时候,有两块知识曾经让我十分的困惑,一个是
hbase
,一个就是zookeeper。
Java圈子
·
2024-01-15 01:15
Building online
HBase
cluster of Zhihu based on Kubernetes
Buildingonline
HBase
clusterofZhihubasedonKubernetes采用Kubernetes进行
hbase
部署,扩展性大大增强。
mtj66
·
2024-01-14 21:24
spark
hbase
CDH
大数据容器化
记录知乎容器平台演进及与大数据融合实践http://www.sykv.cn/cat/bigdata/4140.htmlBuildingonline
HBase
clusterofZhihubasedonKuberneteshttps
bigdata-余建新
·
2024-01-14 21:23
大数据
大数据
Linux Git打包部署JAVA项目 shell脚本
/bin/bas
hBASE
_PATH="/root/local"GIT_BASE_PATH="/root/local/publish/my-java-study"SCRIPT_NAME=$(basename
LaLaLa_OvO
·
2024-01-14 16:57
linux
git
运维
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他