E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hbase集群安装
HBase
&Spark集成 -- DataFrame
HBase
&Spark集成–DataFrameApache
HBase
是一个成熟的NoSQL存储系统,已在大规模生产部署中得到证明。
小中.
·
2023-07-23 04:48
HBase
Spark
hbase-spark
hbase
spark
解决
HBase
一个cell存储超10M的异常
解决
Hbase
KeyValuesizetoolarge或Cellwithsize25000046exceedslimitof10485760bytesat的异常。
小中.
·
2023-07-23 04:17
HBase
hbase
hadoop
大数据
Spring Data JPA
SpringData项目所支持NoSQL存储:MongoDB(文档数据库)、Neo4j(图形数据库)、Redis(键/值存储)、
Hbase
(列族数据库)SpringData项目所支持的关系数据存储技术:
然也翰飞
·
2023-07-23 00:03
Go 框架推荐
freecachebigcacheNacos&Vipernacos-sdk-govipernacos-viperGolangWebgingo-zeroRESTclientGoGrpcgo-grocPlugin**go-plugin
HBase
go-
hbase
Postgresqlpgx-ormp
Muroidea
·
2023-07-22 22:32
golang
开发语言
后端
hadoop 3.1.3单机版安装教程
引言公司有搭建大数据平台,为了让java能访问大数据平台,本人先在测试环境上自行搭建了一个单机版的hadoop,研究java和
hbase
之间的jdbc连接。
YukunWen
·
2023-07-22 20:23
【hadoop】hadoop的体系架构
hadoop的体系架构HDFS的体系架构NameNodeedits文件(客户端的操作日志)fsimage文件(元信息文件)DataNodeSecondaryNameNodeYarn的体系架构
HBase
主从架构的单点故障的问题
是我樂樂呀
·
2023-07-22 16:03
hadoop
hadoop
架构
大数据
hive shell中有许多日志信息的解决办法
记录一下解决hiveshell中有许多日志信息的方法首先,我的配置有:hadoop-3.2.1、
hbase
-2.4.13、mysql-5.7.18、hive-3.1.2启动hive后,输入showdatabases
W~J~L
·
2023-07-22 14:25
Big
Data
hive
hadoop
大数据
hbase
hbase
启动失败的解决办法
记录问题,以便于自己加深印象,巩固自己的基础。前一天还可以正常使用,但是第二天就用不了了。开启时会显示如下(记住方框中的报错信息,这就是原因所在):进入shell时会报错如下:shell能进入,但是不可以进行操作,会报错:于是根据报错提示,去查找问题。查看进程:kill掉了一些进程(主要是前面方框中的),因为有些进程不受控制,就将其kill掉。再查看:这下应该可以了,再次启动:启动没问题,OK进入
W~J~L
·
2023-07-22 14:24
Big
Data
hbase
hadoop
Hive和Spark
(当使用hive的
hbase
映射表时,有一定的实时能力;
万里长江横渡
·
2023-07-22 14:22
大数据
hive
脚本调度Kylin之销毁篇
Kylin的内容层级为:projectdatasourcemodelcubejob因为大量的数据是存储在
HBase
之
JackKuang
·
2023-07-22 12:15
Sealos 安装报错问题解决
在Kubernetes集群的第一个节点上运行sealosrun命令,目前集群外的节点不支持
集群安装
。建议使用干净的操作系统来创建集群。不要自己装D
程少亭
·
2023-07-22 11:00
K8s
linux
sealos
故障排查
大数据_
HBase
_
HBase
中的 bloom-filter
参考文章:1.详解布隆过滤器的原理、使用场景和注意事项https://www.jianshu.com/p/2104d11ee0a22.数学之美:布隆过滤器https://zhuanlan.zhihu.com/p/72378274什么是布隆过滤器本质上布隆过滤器是一种数据结构,比较巧妙的概率型数据结构(probabilisticdatastructure),特点是高效地插入和查询,可以用来告诉你“某
高达一号
·
2023-07-22 08:07
大数据
HBase
大数据_面试_OLAP&数据存储
问题列表回答
hbase
memorystoreblockcachehdfs文件的常见压缩算法
hbase
的数据倾斜,rowkey分布导致的
高达一号
·
2023-07-22 08:07
大数据
大数据_面试_ETL组件常见问题_spark&flink
问题列表回答spark与flink的主要区别flinkcdc如何确保幂等与一致性FlinkSQLCDC实践以及一致性分析-阿里云开发者社区spark3.0AQE动态优化
hbase
memorystoreblockcachesparksql
高达一号
·
2023-07-22 08:37
大数据
Spark
Flink
大数据
etl
spark
瀚高数据库安全版V4.5_Repmgr
集群安装
手册(Linux)
目录瀚高数据库安全版V4.5_Repmgr
集群安装
手册(Linux)1.软件安装2.主节点配置2.1配置数据库参数2.2配置数据库文件2.2.1修改pg_hba.conf文件2.2.2配置hg_repmgr.conf
auspicious航
·
2023-07-22 04:09
瀚高数据库学习资料
数据库
oracle
服务器
深入学习Spark SQL :SparkSQL执行流程
主要参考书籍:《SparkSQL内核剖析》(资源见评论)参考博客:http://
hbase
fly.com/2017/03/01/sparksql-catalyst/http://www.uml.org.cn
Icedzzz
·
2023-07-21 23:42
Spark
大数据
spark
sql
centos7启动
hbase
1.1.6后不久Hmaster挂掉
查看日志,得到关键错误信息2021-02-0120:37:33,784FATAL[vm002:16000.activeMasterManager]master.HMaster:Failedtobecomeactivemasterjava.net.ConnectException:CallFromvm002/192.168.11.131tovm002:9000failedonconnectionex
pluo1717
·
2023-07-21 23:27
在Hadoop上搭建Hive
一、概述这是Hadoop之旅的第二站,之前我们已经搭好了Hadoop和
HBase
,今天我们在此基础上建立Hive。我们接着之前的架构图进行补充我们假设只有三台服务器,并且要在三台服务器上做高可用。
若罗
·
2023-07-21 21:07
HBase
作为JanusGraph图数据库存储
这里将介绍运用
HBase
作为JanusGraph的存储数据库。JanusGraph&
HBase
优点能够很好的和ApacheHadoop生态圈进行融合。对强一致性有很好的支持。
娃娃学软件
·
2023-07-21 14:58
Java面试题(Zookeeper)
zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,是googlechubby的开源实现,是hadoop和
hbase
的重要组件。
我最酷_b537
·
2023-07-21 12:18
每天5分钟玩转K8S (看书笔记)
文章目录第3章部署k8s
集群安装
docker安装kubeadm,kubelet,kubectl使用kubeadm创建集群1.kubeadm初始化创建master2.配置kubectl3.安装pod网络4
wayne_H3
·
2023-07-21 08:05
合并日志树——LSM Tree
他在大数据的存储上广泛引用(
HBase
,Kudu,Clickhouse的MergeTree等),它的处理情景是将随机读写操作变成顺序读写操作,从而提高IO
龟速扣代码
·
2023-07-21 02:50
大数据
数据库
数据结构
LSM树
分布式天花板?阿里百万架构师的ZK+Dubbo笔记,颠覆认知
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
的重要组件。
老王420
·
2023-07-21 01:56
启动hive报错:java.net.ConnectException: 拒绝连接;
问题描述完成初始化元数据后,即可启动hive了,但是在启动hive遇到如下情况:[root@centos7hive]$hivewhich:no
hbase
in(/usr/local/java/jdk1.8.0
歪~懒羊羊
·
2023-07-21 00:59
hive
java
数据库
数据分析
hadoop
期末复习-大数据技术原理与应用
大数据的发展进程大数据的4V概念大数据的计算模式云计算HadoopHadoop的生态系统Hadoop安装和使用大数据存储和管理分布式文件系统DFSHDFS数据块计算集群中元数据需要的内存
HBase
shell
coffee_mao
·
2023-07-21 00:27
LeetCode
大数据
hadoop
hdfs
当
HBase
遇上MapReduce头歌答案
文章目录第1关:
HBase
的MapReduce快速入门第2关:
HBase
的MapReduce使用第1关:
HBase
的MapReduce快速入门packagecom.processdata;importjava.io.IOException
随兴随缘
·
2023-07-21 00:27
hadoop
mapreduce
hbase
hadoop
kafka topic 发送消息到
hbase
目录一、配置kafka信息二、配置
hbase
信息,连接
hbase
数据库需要先在
hbase
创建对应的命令空间和tablePut对象,按照不同需求,从文件中截取对应字段三、完整代码一、配置kafka信息Propertiesproperties
Xiayebuliang
·
2023-07-21 00:22
hbase
kafka
大数据
java
大数据技术原理与应用(第3版)期末复习
(单选30判断10简答10操作30编程20)编程掌握:HDFS文件操作MapReduce程序
HBase
数据库命令操作U1大数据的4v特征数据量大、处理快、数据类型多、价值密度低大数据完全颠覆了传统的思维方式
Blancness
·
2023-07-21 00:21
big
data
大数据
数据仓库
HBase
写流程基本概念
在
HBase
写入的过程中,要从client和server端两部分来看。在client端,会将写入的数据添加到本地缓冲区中,符合一定条件就会通过AsyncProcess异步批量提交。
掩流年
·
2023-07-20 20:18
HBase
Client无法连接
HBase
Server
HBase
Client成功与Zookeeper连接,但是无法与
HBase
Server连接问题分析
HBase
启动之后会将Master的信息存储在Zookeeper的/
hbase
/master中,然后
HBase
Client
SolidHeart
·
2023-07-20 17:36
HBase
一
HBase
简介与环境部署1.1
HBase
简介&在Hadoop生态中的地位1.1.1什么是
HBase
HBase
是一个分布式的、面向列的开源数据库
HBase
是GoogleBigTable的开源实现
HBase
Wzideng
·
2023-07-20 15:18
#
hive
#
HBase
hbase
数据库
hive
基于大数据架构实现景点游客数据分析平台,全国景点游客数据管理系统
本次毕业设计景点游客数据分析平台,采用springboot、springcloud,hadoop,
hbase
,es等技
Q计算机程序优异哥_2934918046
·
2023-07-20 12:46
程序设计
大数据
架构
数据分析
K8S 云
集群安装
纯享版 - 傻瓜式一键教程 全自动脚本文件
引言:用的云服务器,整个过程读者还是需要准备些软妹币的…另外众所周知,K8S最难的部分是什么?——是安装。。。目录0.技术选型(:bell:重要!)0.0version0.1云服务器1.容器运行时2.k8s安装前准备2.0网络连接2.1hostname2.2其他配置3安装k8s3.0kubeadmpod-network-cidr3.1calicopod-network-cidr4.成功0.技术选型
Erato Rabbit
·
2023-07-20 11:32
Linux
kubernetes
docker
运维
K8S 安装
k8sKubernetes上安装KubeSphere·语雀有两点需要注意:一是calico版本二是docker.io/calico/cni:v3.20.6无法下载导致calico安装失败,手动安装K8S云
集群安装
纯享版
墨家先生
·
2023-07-20 11:31
云原生
kubernetes
容器
云原生
hbase
中列簇和列_
HBase
表、行与列族
HBase
表
HBase
中表是在schema定义时被预先声明的。可以使用以下的命令来创建一个表,在这里必须指定表名和列族名。
weixin_39983383
·
2023-07-20 08:36
hbase中列簇和列
hbase
java操作api - nameSpace,表,列族,列的操作 代码示例
maven依赖org.apache.
hbase
hbase
-client1.3.1org.apache.hadoophadoop-hdfs2.2.0代码示例有很多的代码是重复的,只是为形成记忆,见谅,另外需要将
小哇666
·
2023-07-20 08:05
#
Hbase
hbase
HBASE
获取表格的所有列族(java API)
前言:安装好
hbase
之后进入其lib文件夹,将所需要的jar包拷贝到web项目的lib文件夹之下,这样就不会出现jar包版本不同导致的相关问题。
行思坐忆,志凌云
·
2023-07-20 08:04
HBase
hbase列族
hbase
表查看列族
hbase
shell表查看列族echo"scan‘p_face_dossier’"|
hbase
shell|awk-F’=’‘{print$2}’|sort|uniq
海水孤独
·
2023-07-20 08:03
Hbase
hbase
大数据
数据库
HBase
API设置列族的VERSION【留给有缘人】
前言关于如何使用
hbase
api去设置
hbase
中数据的version这个问题,本人浏览器都快搜烂了,没找到!无奈只能找找源码,有所得,遂记录,留给有缘人。
清雨夜
·
2023-07-20 08:33
hbase
数据库
VERSION
列族
Column
大数据
api
Centos7手动升级glibc导致系统异常(无法开机)
出现问题原因:在调优
hbase
的时候,查资料发现可以升级hadoop本地库来对
hbase
进行优化处理。
Ramos17
·
2023-07-20 06:01
话单分析之PropertiesUtil
objectPropertiesUtil{valis:InputStream=ClassLoader.getSystemResourceAsStream("
hbase
_consumer.properties
刚入门的程序猿
·
2023-07-19 18:36
【
HBASE
】记一次
HBase
进行数据迁移,重建元数据
记一次
HBase
进行数据迁移,重建元数据前情提要正文数据迁移重建元数据测试查询后续的表修复MultipleregionshavethesamestartkeyRegionnotlistedin
hbase
Meepoljd
·
2023-07-19 17:10
运维
大数据
hbase
big
data
hadoop
【Go】实现一个代理Kerberos环境部分组件控制台的Web服务
实现一个代理Kerberos环境部分组件控制台的Web服务背景安全措施引入的问题SSO单点登录过程整体设计路由反向代理登录会话组件代理Yarn
Hbase
结果背景首先要说明下我们目前有部分集群的环境使用的是
Meepoljd
·
2023-07-19 17:38
大数据
运维
Golang
golang
前端
开发语言
hadoop
后端
运维开发
Scala函数综合练习 - WordCount
期望输出结果:List((Hello,4),(Scala,3),(
Hbase
,2))待处理集合:valstringList=List("HelloScala
Hbase
kafka","HelloScala
Hbase
阿年、嗯啊
·
2023-07-19 17:33
Scala
scala
开发语言
函数练习
WordCount
HBase
过滤器查询
、多过滤器综合查询FilterList1、过滤器过滤器的作用是在服务端判断数据是否满足条件,然后只将满足条件的数据返回给客户端过滤器的类型很多,但是可以分为两大类比较过滤器专用过滤器2、比较过滤器使用
HBase
皮哥四月红
·
2023-07-19 17:10
HBase
hbase
过滤器
filter
OLAP工具Apache Doris或StarRocks
集群安装
StarRocks或Doris
集群安装
下载StarRockes2.0.1版本下载地址https://cdn-release.starrocks.com/StarRocks-2.0.1.tar.gz?
贾斯汀玛尔斯
·
2023-07-19 13:37
Doris
hadoop
StarRocks
Apache
Doris
sqoop实战:sqlserver导入
hbase
命令
sqoop-list-databases--connect'jdbc:sqlserver://192.168.1.107;username=sa;password=********;'sqoop-list-tables--connect'jdbc:sqlserver://192.168.1.107;username=sa;password=*******;database=********;tab
sfrem
·
2023-07-19 11:26
大数据
hadoop
sqoop
Hbase
事务
HBase
提供了各种锁机制和MVCC机制来保证数据的原子性、一致性等特性,其中使用互斥锁实现的行锁保证了行级数据的原子性,使用JDK提供的读写锁实现了Store级别、Region级别的数据一致性,同时使用行锁
青云游子
·
2023-07-19 06:00
大数据
hbase
java
数据库
推荐系统论文阅读(五十)-基于用户检索序列的点击率预估模型
arxiv.org/pdf/2005.14171.pdf之前我们讲过一篇阿里妈妈关于如何从长序列中选取跟target最相关的item的子序列的方法,今天我们就来讲一下另一篇论文UBR4CTR中是如何使用这种searc
hbase
dmethod
推荐系统论文阅读
·
2023-07-19 06:34
k8s
集群安装
目录一主机准备1.1设备配置⚠️注意1⚠️注意21.2环境准备1.3docker安装二安装kubeadm、kubectl、kubelet2.1添加镜像源2.2安装三master节点部署四node节点加入集群五CNI网络插件calico六其他节点使用kubectl1.拷贝文件2.添加到环境变量七节点离开集群一主机准备1.1设备配置内网Ip/外网Name10.1.57.200/12.152.230.2
fooleryang
·
2023-07-19 01:47
kubernetes
kubernetes
java
网络
上一页
43
44
45
46
47
48
49
50
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他