E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hbase分布式数据库
Hadoop+Zookeeper+Spark+
Hbase
集群式部署
前期准备hadoop-2.7.6.tar.gz
hbase
-1.2.6-bin.tar.gzjdk-8u161-linux-x64.tar.gzzookeeper-3.4.10.tar.gzsqoop-1.99.7
Go ku
·
2023-10-26 01:17
Hadoop
Springboot整合ShardingSphere实现分库分表
一、ShardingJDBC简介1.什么是ShardingJDBCShardingSphere是一套开源的
分布式数据库
中间件解决方案组成的生态圈,它由Sharding-JDBC、Sharding-Proxy
Love is beautiful
·
2023-10-26 00:10
springboot
spring
boot
分布式数据库
TiDB应用分析
本文基于TiDB技术架构与功能,以及已有实践,对
分布式数据库
TiDB的应用场景、发展定位及相关问题进行研究分析与探讨,关于TiDB的架构与组件网上已经有很多材料,本文中除了应用探讨中需要的描述外,不对此做专门系统性阐述
石逸凡
·
2023-10-26 00:19
分布式数据库
TiDB
数据库
sql
TiDB x 北京银行丨新一代
分布式数据库
的探索与实践
北京银行作为中国最大的城商行,坚持以数字化转型统领发展模式、业务结构、客户结构、营运能力、管理方式的五大转型,
分布式数据库
建设是北京银行数字化转型的重要组成部分。
科技互联网
·
2023-10-26 00:14
1024程序员节
聊聊主流的
分布式数据库
后来
分布式数据库
逐渐成为解决数据一致性的选择,目前
分布式数据库
产品已经比较成熟,支持ACID事务,本文就来聊一聊分
AAA小肥杨
·
2023-10-25 21:33
数据库
分布式
LSM树原理详解
LSM树(Log-Structured-Merge-Tree)的名字往往会给初识者一个错误的印象,事实上,LSM树并不像B+树、红黑树一样是一颗严格的树状数据结构,它其实是一种存储结构,目前
HBase
,
大隐隐于野
·
2023-10-25 21:32
#
Ceph
Rocksdb专栏
rocksdb
Rocksdb LSM Tree Compaction策略
RocksDB的写缓存(即LSM树的最低一级)名为memtable,对应
HBase
的MemStore;读缓存名为blockcache,对应
HBase
的同名组件。
大隐隐于野
·
2023-10-25 21:32
#
Ceph
Rocksdb专栏
rocksdb
hbase
phoenix异步创建索引报错:ERROR 102 (08001): Malformed connection url
:
hbase
1:2181,
hbase
2:2181,
hbase
3:2181:2181:/
hbase
;a
iTommyChi
·
2023-10-25 20:51
hbase
hbase
phoenix
活动回顾 | MatrixOne 在 SaaS 企服领域的应用解读
通过全新从零自研的统一
分布式数据库
引擎,能够同时灵活支持OLTP、OLAP、Streaming等不同工作负载的数据管理和应用,用户可以在公有云、自建数据中心和边缘节点上
MatrixOrigin
·
2023-10-25 16:25
数据库
云原生
分布式
Hive常见错误
Hive常见错误1.hive启动错误整合
Hbase
和MapReduce时,因为导入环境变量后,导致slf4j版本不同,导致的错误SLF4J:ClasspathcontainsmultipleSLF4Jbindings.SLF4J
Yanko24
·
2023-10-25 15:07
Hive
hive-2.3.6
hive-1.2.1
slfj4
数据挖掘和大数据的区别
往往需要和爬虫技术、分布式计算、
分布式数据库
、分布式存储等技术结合使用。小结大数据和数据挖掘都是为了进行某种目的将特定数据聚集起来,进行数据分析大数据是数据挖掘的子集大数据是数据挖掘
秋不溜啾
·
2023-10-25 12:54
数据库
1024程序员节
大数据
数据挖掘
存储与数据库 | 字节青训营笔记
难道数据库和存储系统不一样吗2、数据库vs经典存储三、主流产品剖析1、单机存储本地文件系统key-value存储2、分布式存储系统分布式文件系统分布式对象存储3、单机数据库关系型数据库非关系型数据库4、
分布式数据库
解决容量问题解决弹性问题解决性价比问题总结一
卒获有所闻
·
2023-10-25 09:57
字节跳动青训营
数据库
缓存
后端
分库分表 - ShardingSphere
1总述Mycat和ShardingSphere(包括Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar3款产品)都是非常流行的开源
分布式数据库
中间件,各自具有一些独特的功能
不努力谁会可怜你?
·
2023-10-25 07:52
数据库
分库分表
Spring Boot 2.x 整合 ShardingSphere 5.x 实现分表
ShardingSphere简介官网:https://shardingsphere.apache.org/index_zh.htmlApacheShardingSphere是一套开源的
分布式数据库
解决方案组成的生态圈
金克丝丶
·
2023-10-25 07:21
分库分表
java
数据库
分布式
Kafka---将kafka中的数据导入
HBase
importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.
hbase
.
HBase
Configuration;importorg.apache.hadoop.
hbase
.HConstants
Shall潇
·
2023-10-25 06:11
kafka
kafka
大数据
hbase
spark读kafka数据
hbase
存储
utilsimportkafka.common.TopicAndPartitionimportkafka.message.MessageAndMetadataimportkafka.serializer.StringDecoderimportkafka.utils.ZkUtilsimportorg.apache.hadoop.
hbase
.client
mllhxn
·
2023-10-25 06:08
spark
kafka、hive、mysql、redis、
hbase
架构笔记
kafka、hive、mysql、redis、
hbase
架构笔记kafka介绍设计特点主题和日志生产者消费者名词hive架构运行机制mysqlmysql逻辑架构redis概念持久化架构
hbase
架构kafka
谁说螺蛳粉臭
·
2023-10-25 06:36
大数据
kafka
Flink实战-(4)Flink Kafka实时同步到
Hbase
1Maven依赖4.0.0org.exampleflink-kafka-
hbase
1.0-SNAPSHOT1.13.62.11mysqlmysql-connector-java5.1.34com.alibabafastjson1.2.28compilecom.google.guavaguava23.0com.google.code.gsongson2.8.5org.apache.httpcompo
CarsonBigData
·
2023-10-25 06:05
大数据
kafka
hbase
flink
java实现
hbase
数据导出
1.
HBase
-client方式实现1.1依赖org.apache.
hbase
hbase
-client1.2.6org.apache.
hbase
hbase
-server1.2.6**1.2配置及代码1.2.1get
蓝色格子
·
2023-10-25 06:35
java
hbase
java
Kafka To
HBase
To Hive
目录1.在
HBase
中创建表2.写入API2.1普通模式写入
hbase
(逐条写入)2.2普通模式写入
hbase
(buffer写入)2.3设计模式写入
hbase
(buffer写入)3.
HBase
表映射至Hive
不吃香菜lw
·
2023-10-25 06:04
1024程序员节
hbase
hive
kafka
大数据
Docker常用镜像,常用容器,以及部署命令
centos7.9容器列表:mysql,redis,mongodb,nacos,zookeeper,dubbo-admin,portainer-ce,rockermq,rabbitmq,elasticsearch,
hbase
七八个星儿
·
2023-10-25 04:10
docker
容器
运维
java
linux
大数据 - (六-2)-
HBase
什么是
HBase
?是⼀个分布式、海量、列式、⾮关系型数据库系统,可以提供超⼤规模数据集的实时随机读写列存储的优点:1)减少存储空间占⽤。
啦啦啦喽啰
·
2023-10-25 04:38
比特币入门基础知识
比特币不依靠特定货币机构发行,它通过特定算法的大量计算产生,比特币经济使用整个P2P网络中众多节点构成的
分布式数据库
来确认并记录所有的交易行为。
无猜123
·
2023-10-25 03:36
Hadoop+Hive+Spark+
Hbase
开发环境练习
1.练习一1.数据准备在hdfs上创建文件夹,上传csv文件[root@kb129~]#hdfsdfs-mkdir-p/app/data/exam查看csv文件行数[root@kb129~]#hdfsdfs-cat/app/data/exam/meituan_waimai_meishi.csv|wc-l2.分别使用RDD和SparkSQL完成以下分析(不用考虑数据去重)开启sparkshell[r
不吃香菜lw
·
2023-10-24 23:45
hadoop
hive
spark
hbase
LDAP注入漏洞
其中目录是一个为查询、浏览和搜索而优化的专业
分布式数据库
,它呈树状结构组织数据,类似于Linux/Unix系统中的文件目录。适合将公用证书、安全密钥以及公司物理设备信息等不经常变更的数据存储于目录中。
测试开发-东方不败之鸭梨
·
2023-10-24 23:40
安全测试
安全性测试
Hadoop伪分布式集群笔记
基本介绍以下是从其他地方抄过来了,目的是对即将要学的东西做一个基本的了解HDFS(分布式文件系统):解决海量数据存储YARN(作业调度和集群资源管理框架):解决资源任务调度MAPREDUCE(分布式运算变成框架):解决海量数据计算
HBASE
爆炒八酱
·
2023-10-24 16:40
hadoop
hadoop
分布式
大数据
向量检索库Milvus架构及数据处理流程
文章目录背景milvus想做的事milvus之前——向量检索的一些基础近似算法欧式距离余弦距离常见向量索引1)FLAT2)Has
hbase
d3)Treebased4)基于聚类的倒排5)NSW(NavigableSmallWorld
曹自标
·
2023-10-24 09:12
milvus
架构
向量数据库
Cloudera Hadoop 5& Hadoop高阶管理及调优课程(CDH5,Hadoop2.0,HA,安全,管理,调优)
:技术版本LinuxCentOS6.5Java1.7Hadoop2.02.6.0Hadoop1.01.2.1Zookeeper3.4.6CDHHadoop5.3.0Vmware10Hive0.13.1
HBase
0.98.6Impala2.1.0Oozie4.0.0Hue3.7.02
weixin_33856370
·
2023-10-24 08:00
大数据
ldap
运维
什么是区块链,什么是挖矿
百度百科给出的结果是,“区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式“很多人看了还是一脸懵,这是个啥呀,还是不懂,下面我们来谈谈从技术及数据结构的层面上来说,区块链是一种特殊的
分布式数据库
5ee7c1b7d94c
·
2023-10-24 07:24
Hbase
原理与实践-1
Hbase
数据模型从逻辑视图来看,
Hbase
的数据是用表形式进行组织的,而且和关系型数据库中的表一样,由列和行构成,从物理视图来看,
hbase
中的数据是一个Map,由键值(k,v)组成,不过与普通Map
颜渊月和F
·
2023-10-24 01:09
大数据
hbase基础
《
Hbase
原理与实践》读书笔记——1.
HBase
概述
1.1
HBase
前世今生Google当年风靡一时的“三篇论文”:GFS->HDFS,Mapreduce->hadoopmapreduce,bigTable->
HBase
。
凯哥多帅哦
·
2023-10-24 01:33
hbase
大数据
hbase
大数据
大数据技术之
HBase
原理与实战归纳分享-下
文章目录整合Phoenix定义为何要使用安装SHELL操作表的映射简易JDBC示例二级索引二级索引配置文件全局索引包含索引本地索引(localindex)
HBase
与Hive的集成使用场景集成方法示例整合已有
IT小神
·
2023-10-24 01:03
大数据
Java
运维
hbase
大数据
Hadoop 系列国内下载地址
hadoophttps://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/
hbase
https://mirrors.tuna.tsinghua.edu.cn/apache
ayt007
·
2023-10-24 01:28
hadoop
hive
hbase
一文读懂
HBase
核心原理与应用场景
HBase
是大数据NoSQL领域里非常重要的分布式KV数据库,是一个高可靠、高性能、高伸缩的分布式存储系统,目前国内知名公司都有在大规模使用,社区也非常活跃。
create17
·
2023-10-24 01:27
分布式
大数据
数据库
java
hadoop
HBase
原理与应用场景
作者:禅与计算机程序设计艺术1.简介Apache
HBase
是ApacheHadoop子项目,是一个高性能、开源的NoSQL数据存储系统。
禅与计算机程序设计艺术
·
2023-10-24 01:56
Python
机器学习
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
ubuntu中redis客户端与服务端命令、redis数据类型、字符串string、哈希hash、列表list、集合set、有序集合zset操作命令
notonlySQL):泛指非关系型数据库,是一类新出现的数据库,不支持SQL语法,其存储的数据都是kv形式,存储结构与关系型数据库中的关系表完全不同NoSQL产品种类:主要有Redis、MongoDB、
HBASE
Hadoop
learning-striving
·
2023-10-23 21:06
redis
redis
数据库
mysql
ubuntu
数据类型
presto
下载相关包2.2.解压下载的tar包2.3.配置文件2.3.1.节点属性2.3.2.JVMConfig2.3.3.配置属性2.3.4.连接目录属性2.4.启动presto2.5.命令行界面3.presto
Hbase
Connector
小傻的风筝树
·
2023-10-23 21:23
工作总结
big
data
hbase
presto
ZooKeeper安装与配置集群
简介:ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Hadoop和
Hbase
的重要组件。
你才是臭弟弟
·
2023-10-23 20:11
ZooKeeper
zookeeper
分布式
NoSQL-lesson13-Redis缓存技术-运维篇
0.NoSQL产品(key-value)RDBMS:MySQL,Oracle,MSSQL,PGNoSQL:Redis,MongoDB,列存储存储相关NewSQL----->
分布式数据库
架构(学习了MongoDB
小一_d28d
·
2023-10-23 16:14
【Hadoop】创建Hadoop集群(3个节点)—— 安装部署一个3个节点构成的
hbase
集群
前言此实验搭建3个虚拟节点,一个mater,一个slave1,一个slave2集群简介HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但在物理上常在一起。HDFS集群负责海量数据的存储,集群中的角色主要有:NameNode、DataNode、SecondaryNodeYARN集群负责海量数据运算时的资源调度,集群中的角色主要有:ResourceManager、No
db_lxm_2072
·
2023-10-23 14:22
hadoop
hdfs
大数据
Spark RDD&算子 基本操作
(2)由外部存储系统的数据集创建,包括本地的文件系统,还有所有Hadoop支持的数据集,比如HDFS、Cassandra、
HBase
等。
傍ྂ离ྂ
·
2023-10-23 14:40
Scala
Spark
spark
scala
docker安装pinpoint1.8.0
/home/pinpoint/
hbase
-./home/pinpoint/zookeeper修改成volumes:-/home/pinpoint/
hbase
-/home/pinpoint/zookee
江南救世
·
2023-10-23 07:25
数据库基础学习笔记——NoSQL介绍、NoSQL和SQL数据库的比较
中存储的数据都是key-value形式;NoSQL的世界中没有一种通用的语言,每种nosql数据库都有自己的API和语法,以及擅长的业务场景;NoSQL中的产品种类很多,如MongoDB、Redis、
Hbase
hadoop
鬼义II虎神
·
2023-10-23 06:20
学习笔记
数据库
[博学谷学习记录] 超强总结,用心分享|Python语法练习_函数式编程
语法练习注:大家觉得博客好的话,别忘了点赞收藏呀,本人每周都会更新关于人工智能和大数据相关的内容,内容多为原创,PythonJavaScalaSQL代码,CVNLP推荐系统等,SparkFlinkKafka
Hbase
HiveFlume
陈万君Allen
·
2023-10-23 02:12
Python基础语法练习
python
开发语言
Sqoop的安装与配置
Sqoop安装准备安装Sqoop的前提是已经具备Java和Hadoop、Hive、ZooKeeper、
HBase
的环境安装步骤上传安装包sqoop-1.4.6-cdh5.14.2.tar.gz到虚拟机中解压
菜鸟也学大数据
·
2023-10-23 00:56
菜鸟也学大数据
sqoop
sqoop
impala+kudu整合(1)
刚接触的时候感觉好神秘的两个组件,心里一直有个疑问为什么要两个结合着用,不太理解,就像刚接触hive+hdfs一样,用了之后才发现kudu确实是一个非常好用的一个实时处理数据的一个数据库,很多人喜欢将kudu跟
hbase
焱行软件科技计算机毕设
·
2023-10-22 20:04
java
【分布式系统】-时钟问题
一、背景
分布式数据库
系统中,为了解决不同集群、节点事件发生的先后顺序问题,时钟同步至关重要。
机智的路易
·
2023-10-22 18:23
分布式系统
分布式
HBase
自定义过滤器
[TOC]任务描述本关任务:相关知识有时候我们可能也想要有自己的,这个时候可以使用自定义过滤器。自定义过滤器定义一个自定义过滤器其实很简单——继承Filter类(之前Filter是一个接口)或者直接继承FilterBase类即可,后者已经为Filter类中的抽象方法提供了默认的实现。Filter类的结构如下,因为代码较多,只展示核心部分:publicabstractclassFilter{publ
MasterXiao
·
2023-10-22 12:37
DataX原理及安装
DataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、
HBase
、TableStore(OTS)
Rudolf_liu
·
2023-10-22 09:11
Hadoop生态上几个技术的关系与区别:hive、pig、
hbase
关系与区别
Hadoop生态上几个技术的关系与区别:hive、pig、
hbase
关系与区别Pig一种操作hadoop的轻量级脚本语言,最初又雅虎公司推出,不过现在正在走下坡路了。
weixin_34290000
·
2023-10-22 06:19
java
ui
数据库
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他