E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HBase、Parrot
nosql一些知识点~mongoDB,redis,
HBase
三种数据库对比
目录Nosql三种数据库对比Redis中操作传统关系数据库与
hbase
分布式数据库区别Nosql三种数据库对比mongoDBredis
HBase
相似性根据CAP分布式理论,三者都是CP型分布式数据库,能够保证数据的强一致性和分区容忍性编写语言
00的小尾巴
·
2023-04-10 20:28
nosql
nosql
mongodb
redis
数据库
java.lang.IllegalArgumentException: Can not create a Path from a null string
在使用setAsNewAPIHadoopDataset写数据到
Hbase
时发生如下错误:java.lang.IllegalArgumentException:CannotcreateaPathfromanullstringatorg.apache.hadoop.fs.Path.checkPathArg
走向自由
·
2023-04-10 18:29
spark
spark
hbase
翻译: How-to: Enable User Authentication and Authorization in Apache
HBase
原文:ByMatteoBertozzi使用默认的Apache
HBase
配置,每个人都可以读取和写入系统中所有可用的表。对于很多企业机构来说,这种策略是不能接受的。
掩流年
·
2023-04-10 15:24
Java开发校招面经
面试当前面经欠缺:docker,k8s容器,spark,flink,
hbase
,hive,java网络编程(netty)一,JAVA重写和重载重写:方法签名要完全相同(方法签名就是参数列表和返回类型)重载
菩提树下的呆子
·
2023-04-10 10:50
实用技巧
java
java
开发语言
后端
hive启动的两种方式
一、hive[root@mihaoyu151conf]#hivewhich:no
hbase
in(/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root
honconM
·
2023-04-10 01:40
hive
hadoop
数据仓库
大数据组件安装过程
zookeeper安装的三种模式-jxwch-博客园1、搭建
HBase
完全分布式集群-365upit-博客园Hadoop集群安装配置教程_Hadoop2.6.0_Ubuntu/CentOS_给力星Storm
Oran_5590
·
2023-04-09 23:45
自学大数据第13天~
Hbase
数据库操作
前面学习了
Hbase
的安装与简单的使用(shell命令),今天首先复习一下
Hbase
的简单命令:启动
Hbase
,创建表,插入数据:可以看到,一次只能插入一列,不能插入多个列插入数据,然后查看这里可以看到每个数据都带有时间戳
CodeMartain
·
2023-04-09 17:38
大数据
hbase
大数据
hadoop
分布式情况下启动
hbase
regionserver失败的解决方案
hmaster启动了但是regonserver没有启动的情况;查看日志也没有报错,这是因为我们没有配置regionserver文件:将相应节点配置到该文件下:然后重启habse注:之前已经能够正常启动
hbase
start-
hbase
.sh
CodeMartain
·
2023-04-09 17:07
大数据
分布式
hbase
大数据
《
HBase
不睡觉书》——客户端API(基础版)
HBase
Maven依赖UTF-81.3.5org.apache.
hbase
hbase
-client${
hbase
.version}配置文件把
HBase
配置文件夹中的
hbase
-site.xml和Hadoop
Sky梦启
·
2023-04-09 17:55
如何在千万级数据中查询 10W 的数据并排序
下面对该业务诉求的实现,设计思路和方案优化进行介绍,对「千万量级数据中查询10W量级的数据」设计了如下方案多线程+CK翻页方案ESscrollscan深翻页方案ES+
Hbase
组合方案RediSearch
我叫陈晨晨啊
·
2023-04-09 16:05
hive
hadoop
数据仓库
面试题刷题9-18
3)
Hbase
架构,原理。4)为什么实习技术选型用druid,特点和优势在哪里,怎么实现的。手撕代码:1)sql求员工工资高于manager的人数。
wwxy261
·
2023-04-09 14:25
算法
Storm安装教程
1.安装Zookeeper,可参考从零搭建Hadoop+Zookeeper+
HBase
完全分布式集群2.下载Storm压缩包,下载地址。3.解压。
复旦猿
·
2023-04-09 12:35
Hadoop
Hbase
HA高可用集群搭建
本文用以记录Hadoop、
Hbase
HA高可用集群搭建基础环境准备根据前面hadoop集群搭建、
hbase
集群搭建添加外部zookeeper集群下载zookeeper:zookeeper-3.4.13zookeeper
Saxon_323e
·
2023-04-09 11:47
Hbase
- 预分区的技巧
>可以用两行代码搞定
Hbase
的预分区设计,我们在新建一张表的时候有没有发现,做预分区其实也是要计算的,如果没有写上工具类那可惨了,需要自己用手指头算了,在这给大家提供了一个10进制跟16进制的版本,会根据
kikiki5
·
2023-04-09 10:52
centos7搭建kylin3.1.0
apache-livy-0.6.0-incubating-binhadoop-2.7.0jdk1.8.0_141spark-2.3.1-bin-hadoop2.6apache-kylin-3.1.0-bin-
hbase
1xapache-maven
bluesky2004
·
2023-04-09 08:59
datax-web在windows上环境搭建及同步数据测试
WeiYe-Jing/datax-webDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、
HBase
BellCalderon
·
2023-04-09 08:51
datax-web
datax
Datax3.0+DataX-Web打造分布式可视化ETL系统
DataX致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、
HBase
、FTP等各种异构数据源(即不同的数据库)间稳定高效的数据同步功能。
无精疯
·
2023-04-09 08:42
数据库
大数据
python
linux
mysql
Hbase
1.4.12安装配置
hbase
1.4.12高可用配置
hbase
-env.sh文件配置exportJAVA_HOME=/java/jdk1.8.0_161#不使用
Hbase
的zookeeperexport
HBASE
_MANAGES_ZK
陈文瑜
·
2023-04-09 07:39
Mysql数据导出到
Hbase
Mysql表center_pub_merchant数据导出为center_pub_merchant.tsvmysql-h172.xx.x.175-P3307-uUSER-pPASSWORD-e"SELECTconcat('merchant:',id),parentId,id,cascade_labelAScascadeLabel,cascade_levelAScascadeLevel,accoun
gofun
·
2023-04-09 02:45
bulkload导致性能变慢
HBase
支持使用bulkload和put方式加载数据,在大部分场景下bulkload提供了更快的数据加载速度,但bulkload并不是没有缺点的,在使用时需要关注bulkload和put适合在哪些场景使用
半_调_子
·
2023-04-08 22:05
大数据生态
大数据
hbase
2021-05-15 Elasticsearch面试题 如何监控 Elasticsearch 集群状态?
数据结构优缺点Array/List使用二分法查找,不平衡HashMap/TreeMap性能高,内存消耗大,几乎是原始数据的三倍SkipList跳跃表,可快速查找词语,在lucene,redis,
HBase
微软MVP Eleven
·
2023-04-08 22:41
#
搭建
HBase
+ Phoenix大数据平台
一、介绍因为代驾过程中,需要保存驾驶途中的GPS定位,将来计算代驾真实里程的时候,就需要用到这些坐标点。那么这些定位点保存在MySQL中可以吗?当然不行,MySQL单表记录超过两千万就卡的不行。那么保存在MongoDB中可以吗?也不行,因为MongoDB里面的条件查询真的是超级蹩脚,所以想要用复杂条件检索数据,还是打消用MongoDB的念头吧。除了GPS定位数据之外,还要把代驾过程中的聊天对话的文
chengbo_eva
·
2023-04-08 19:33
多端全栈代驾项目技术栈
大数据
hbase
mongodb
Java代码实现对dubbo服务的查询压力测试(
Hbase
数据库)
测试简介底层数据库采用
Hbase
,可视化工具使用的是Phoenix。
小白中的小小白啊
·
2023-04-08 11:45
dubbo服务
大数据
hbase
压力测试
datax3.0 mysql mysql_DataX3.0介绍
概览datax是一个异构数据源离线同步工具,主要实现包括关系型数据库(MySQL、Oracle等)、MongoDB、Hive、
HBase
、FTP等各种异构数据源之间稳定高效的数据同步功能。
Asama浅间
·
2023-04-08 09:56
datax3.0
mysql
mysql
DataX的简介与使用
HDFS案例同步HDFS数据到MySQL案例一、DataX的简介DataX是阿里巴巴开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、
HBase
勤奋的ls丶
·
2023-04-08 09:21
DataX
big
data
HBASE
RPC 源码实现及解析
HBASE
RPC详细解析注:下面的图是作者随便画的,不怎么严格,大家能看懂就好。
roger_han
·
2023-04-08 09:53
hbase
hbase
源码
Hbase
高手之路 -- 第一章 --
Hbase
简介
Hbase
高手之路–第一章–
Hbase
简介一、Hadoop从1970年开始,大多数的公司数据存储和维护使用的是关系型数据库大数据技术出现后,很多拥有海量数据的公司开始选择像Hadoop的方式来存储海量数据
落空空。
·
2023-04-08 09:16
hadoop
hbase
hbase
HBASE
应用场景
1、用户画像比如大型的视频网站,电商平台产生的用户点击行为、浏览行为等等存储在
HBase
中为后续的智能推荐做数据支撑。
夏洛克fms
·
2023-04-08 08:06
1-3 交互式查询工具Impala
一、Impala概述1.1什么是ImpalaImpala是Cloudera提供的一款开源的针对HDFS和
HBASE
中PB级别数据进行交互式实时查询(Impala速度快),Impala是参照谷歌中新三篇论文中
小羊and阿童木
·
2023-04-08 07:48
大数据
impala
交互式查询工具Impala
第1部分Impala概述1.1Impala是什什么Impala是Cloudera提供的⼀一款开源的针对HDFS和
HBASE
中的PB级别数据进⾏行行交互式实时查询(Impala速度快),Impala是参照
猿大山
·
2023-04-08 07:46
Hadoop
impala
Impala:大数据交互查询工具
impala的介绍Impala是由Cloudera公司开发的一款开源的大数据交互查询工具,能够对存储在HDFS、
HBase
上的数据进行快速的交互式SQL查询。
健鑫.
·
2023-04-08 07:46
大数据
hadoop
hive
大数据,头歌,
Hbase
的配置
Hbase
的配置第一关#创建app目录mkdir/app#进入/opt目录下cd/opt#解压
Hbase
压缩包tar-zxvf
hbase
-2.1.1-bin.tar.gz-C/app#编辑
hbase
-env.sh
Closer9
·
2023-04-08 06:50
大数据
大数据
堪称最完整的Java知识笔记(基础+进阶+架构+算法+网络)
开发知识笔记)将每个知识点细分成29个章节JVM、JAVA集合、JAVA多线程并发、JAVA基础、Spring原理、微服务Netty与RPC、网络、日志、Zookeeper、Kafka、RabbitMQ
Hbase
java梦想口服液
·
2023-04-08 05:59
算法
数据结构
数据库
分布式
java
数据仓库电商项目-整体架构
任务调度:azkaban/oozie、informatica元数据管理:atlas(或自研系统)OLAP引擎:即席查询kylin/impala前端界面:superset(或自研javaweb系统)产出存储(
hbase
四月天03
·
2023-04-08 05:50
数仓电商项目
big
data
大数据
Lucene搜索
Lucene搜索架构图搜索的过程:用户输入、分词、索引搜索、评分(相关性计算)排序,输出列表Lucene搜索APILucene搜索代码示例publicclassSearc
hBase
Flow{publicstaticvoidmain
WinnXUDONG
·
2023-04-08 03:28
Zookeeper集群安装部署(超详细操作演示)—— Linux
Zookeeper集群安装部署(超详细操作演示)——Linux简介安装测试简介ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Hadoop和
Hbase
的重要组件。
期望上岸的鱼
·
2023-04-08 03:30
Linux
zookeeper
大数据
hbase
下秒数据李元佳:湖仓一体带来现代数据栈变革
数据集成部分主要是采用Oracle及
HBase
等做OD
CSDN云原生
·
2023-04-08 01:36
大数据
云原生
数据架构
湖仓一体
现代数据栈
基于idea操作
hbase
数据库并映射到hive表
目录一:先关闭所有服务二:配置文件三:启动服务依赖条件:需要有Hadoop,hive,zookeeper,
hbase
环境映射:每一个在Hive表中的域都存在于
HBase
中,而在Hive表中不需要包含所有
·
2023-04-08 01:39
大数据训练营课程大纲&项目简介
文章目录课程大纲模块一:大数据的“三驾马车”:HDFS、MapReduce/YARN、
HBase
模块二:大数据时代数据仓库实践:Hive模块三:更快的数据处理引擎:Spark模块四:重构现代化数据仓库:
greedy-hat
·
2023-04-07 21:45
大数据
大数据
【学习历程】21
HBase
表的热点
当大量的client访问
hbase
集群的一个或少数几个节点,造成少数regionserver的读/写请求过多、负载过大,而其他regionserver负载却很小,就造成了“热点”现象。
LALALAND__
·
2023-04-07 17:19
BigData大数据
hbase
HBase
权威指南(二)客户端API基础
1、概述
HBase
的主要客户端接口是由org.apache.hadoop.
hbase
.client包中的HTable类提供所有修改数据的操作都保证了行级别的原子性,要么读到最新的修改,要么等待系统允许写入该行修改尽量使用批量处理更新来减少单独操作同一行数据的次数创建
kaiker
·
2023-04-07 16:35
新手入门大数据,认识大数据学习路线
一、数据采集与预处理FlumeNGNDCLogstashSqoop流式计算Zookeeper二、数据存储
HBase
PhoenixYarnMesosRedisAtlasKudu三、数据清洗OozieAzkaban
金光闪闪耶
·
2023-04-07 13:48
六阶段大数据--day03--hadoop分布式文件系统HDFS/ MapReduce介绍/ Yarn资源调度
:HadoopDistributedFilesystem(hadoop分布式文件系统)HDFS起源于Google的GFS论文(GFS,Mapreduce,BigTable为google的旧的三驾马车)
HBASE
心猿意码~~
·
2023-04-07 08:34
hadoop
big
data
mapreduce
Pyspark基础入门5_RDD的持久化方法
Pyspark注:大家觉得博客好的话,别忘了点赞收藏呀,本人每周都会更新关于人工智能和大数据相关的内容,内容多为原创,PythonJavaScalaSQL代码,CVNLP推荐系统等,SparkFlinkKafka
Hbase
HiveFlume
陈万君Allen
·
2023-04-07 05:47
Pyspark系列
大数据
spark
分布式
Pyspark基础入门6_RDD的共享变量
Pyspark注:大家觉得博客好的话,别忘了点赞收藏呀,本人每周都会更新关于人工智能和大数据相关的内容,内容多为原创,PythonJavaScalaSQL代码,CVNLP推荐系统等,SparkFlinkKafka
Hbase
HiveFlume
陈万君Allen
·
2023-04-07 05:16
Pyspark系列
大数据
存储系统 - noSql一般概念
一、noSQL定义notonlysql二、noSql分类(1)kv存储典型:redis优点:查询速度快缺点:数据缺乏结构化组织(2)列式存储典型:
hbase
,Cassandra优点:查询速度快,同列数据相似度搞
yi_wen
·
2023-04-07 04:44
存储系统
nosql
数据库
database
分布式NoSQL数据库
HBase
实践与原理剖析(二)
title:
HBase
系列第五章
HBase
核心原理5.1系统架构注意,其实上图中的HLog应该在HRegionServer里面,而不是在HRegion里面。所以图有点点问题。
落叶飘雪2014
·
2023-04-07 04:05
HBase
HBase
大数据
数据库
spark读写
hbase
基本操作
依赖包:org.apache.sparkspark-sql_2.112.1.1org.apache.sparkspark-core_2.112.1.1org.apache.
hbase
hbase
-server1.2.1
会飞的蜗牛66666
·
2023-04-06 23:07
Hbase
2.1 集群搭建
>
Hbase
在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4
·
2023-04-06 20:46
hbase
踩坑记---HMaster启动后不久就消失(
hbase
-2.2.4版本)
版本介绍:hadoop-3.1.3
hbase
-2.2.4问题简述:在学习
HBase
的过程中,安装后启动,开始是可以看见HMaster进程的,但是几秒后就消失了,反复尝试了几次,都是同样的情况,也就是启动失败
十八画_生
·
2023-04-06 19:46
分布式
hbase
hadoop
hdfs
分布式
big
data
上一页
46
47
48
49
50
51
52
53
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他