【hbase】

HBase分布式安装配置

本环节需要使用root用户完成相关配置，安装HBase需要配置前置环境。
HaveAGoodDay.·2023-06-22 08:58

Hive HBase 整合

hivehbase整合，要求比较多，1.hive的得是0.6.02.hive本身要求hadoop的最高版本是hadoop-0.20.23.要求hbase的版本是0.20.3，其他版本需要重新编译hive_hbase-handler
小小哭包·2023-06-22 07:24

hbase-BucketCache剖析

虽说hbase适合写多读少，但是hbase的读性能也是非常强悍的，hbase有如此好的读性能其中少不了BlockCache。
Demo_zfs·2023-06-22 06:36

Hbase伪分布安装配置

Hbase安装配置文章目录Hbase安装配置Hbase安装前提下载Hbase压缩包软件版本兼容性Hadoop和HbaseHbase和JDK软件安装软件位置创建数据保存和日志保存文件夹修改配置文件修改`hbase-site.xml
Every DAV inci·2023-06-22 04:15

HBase入门(一)

第1章HBase简介1.1HBase定义HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。
molecule_jp·2023-06-22 03:24

Spark RDD 文件读取与保存（text、sequence、object）

文件格式分为：text文件、csv文件、sequence文件以及Object文件；文件系统分为：本地文件系统、HDFS、HBASE以及数据库。
房石阳明i·2023-06-22 01:36

数据库的数据结构（3）——LSM-Tree与B-Tree.md

使用相关算法的数据库：LevelDB、RocksDB、Cassandra、HBase等log写入（追加写入）时，将其添加到内存中的平衡树（内存表）数据结构中。
林间白泽·2023-06-21 23:01

zookeeper、hadoop、hbase单机伪分布式环境搭建(虚拟机vmware)

zookeeper单机多实例其实就是跑多个zk服务，以zkServer1为例，配置如下：其中192.168.29.128为虚拟机ip很重要dataDir=/virgil/zooserver/server1/datadataLogDir=/virgil/zooserver/server1/logsclientPort=2181server.1=192.168.29.128:2888:3888serv
·2023-06-21 22:38

再谈全局网HBase八大应用场景

摘要：HBase可以说是一个数据库，也可以说是一个存储。拥有双重属性的HBase天生就具备广阔的应用场景。在2.0中，引入了OffHeap降低了延迟，可以满足在线的需求。
·2023-06-21 20:57

【大数据分析】Hbase的基本原理

目录Hbase架构ClientZooKeeperMasterRegionServerHRegionStoreMemStoreStoreFileHFileHLogHbase数据模型关于数据模型的其他概念NameSpaceTableRowColumnTimeStampCellHbase
sword_csdn·2023-06-21 19:21

mysql执行流程

个人对数据库的定义是对数据进行中转或存储的组件都可以称之为数据库；熟悉的非关系型数据库nosql：mongdb、redis、hbase等，关系型数据库：mysql，oracle等。
小鸡在路上·2023-06-21 13:58

【云计算】HBase表操作

文章目录前言一、shell创建二、操作前言HBase是一个分布式、可扩展的、非关系型的NoSQL数据库。它是建立在HadoopHDFS上的一个开源的数据库管理系统。
julien_qiao·2023-06-21 13:42

hbase 环境搭建：单机版、远程访问

1.环境mac或者linux1台；客户端电脑(windows、mac、linux)1台jdk1.8.xhbase2.2.2下载：ApacheHBase–ApacheHBaseDownloadshdaoop3.2.1
DevinShuai·2023-06-21 12:22

bert-serving-server 启动失败 Failed to initialize NVML: Invalid Argument

ValueError:invalidliteralforint()withbase10:‘FailedtoinitializeNVML:InvalidArgument’解决方法：将启动命令最后的-num_worker
马良神笔·2023-06-21 10:50

spark 基于物理机centos7环境搭建分布式集群

集群环境配置：主机名称/IPsparkhadoopmysqlhbasehivezookeeperflumekafkaredislinux01.pub/192.168.10.1011111linux02.
jerry-89·2023-06-21 10:42

大数据相关常用软件下载地址集锦

  由于大数据开发中经常需要用到Zookeeper、Hadoop、Spark、HBase、Kafka、Flume、Redis、Hive等软件，安装的时候需要它们的下载地址，这里就汇总一下，方便同学们查找
想你依然心痛·2023-06-21 09:10

Java操作HBase时报NotServingRegionException异常

目前开始学习Hbase，通过API在HBase中建表，代码如下：Configurationconf=HBaseConfiguration.create();conf.set("hbase.zookeeper.quorum
shining_yyds·2023-06-21 04:18

史上最便捷搭建Zookeeper服务器的方法

由于ZooKeeper便捷的使用方式、卓越的性能和良好的稳定性，被广泛地应用于诸如Hadoop、HBase、Kafka和Dubbo等大型分布式系统中。Zookeeper有三种运行模式
不学无数的程序员·2023-06-21 01:23

大数据开源框架环境搭建(五)——Hbase完全分布式集群的安装部署

目录实验环境：实验步骤：〇、Zookeeper安装配置：一、安装前注意事项二、HBase安装三、Hbase集群配置1.配置hbase-env.sh文件，位于Hbase安装目录/conf/2.配置hbase-site.xml
木子一个Lee·2023-06-20 18:09

用Phoenix / PQS 访问HBase

ApachePhoenixisanopen-sourceSQLskinforApacheHBasethatmakesiteasiertoconnecttoyourHBasedatathroughstandardJDBCandSQLinterfaces.Thisarticledescribeshowtobuildanenvironmentforaccessinghbasethroughphoenix
sun_xo·2023-06-20 18:09

Hbase伪分布式搭建

Hbase伪分布式搭建教程分析:1.配置好IP2.修改好主机名3.配置好IP映射4.关闭防火墙5.SSH免密登入6.Java安装7.Hadoop安装(伪分布式就可)8.使用HadoopHDFS搭建Hbase
明天要开心·2023-06-20 18:39

搭建HBase伪分布式集群

1.Installzookeeper1)downloadzookeeperfromhttps://zookeeper.apache.org/releases.html#download2)extractbinary$tarxvfapache-zookeeper-3.8.1-bin.tar.gz-C~/bigdata/3)configuratezoo.cfg$cd~/bigdata/zookeepe
sun_xo·2023-06-20 18:38

Phoenix安装使用及使用 SQuirrel客户端连接操作Hbase

Hbase的脚本语法对于用惯了关系型数据库的程序员来讲很不爽，而使用Phoenix结合SQuirrel可以实现在Windows下，使用界面化的方式通过正常SQL语法操作Hbase，具体PHoenix和SQuirrel
码道功成·2023-06-20 16:37

来聊一聊Zookeeper吧

根据MapReduce，于是我们有了Hadoop；根据GFS，于是我们有HDFS；根据BigTable，于是我们有了HBase。
程序源monster·2023-06-20 01:39

Kafka 与 Flume

一、Kafka与Flume比较1、Flume主要是为了发送数据给HDFS和HBase用的工具。Flume集成了Hadoop的安全体系。如果数据将被多个系统所消费，那么采用Kafka。
开着奥迪卖小猪·2023-06-20 00:47

Kafka 与 Flume 对比

相比之下,Flume是一个专用工具被设计为旨在往HDFS,HBase发送数据。它对HDFS有特殊的优化，并且集成
allthesametome·2023-06-20 00:46

基于Elasticsearch与Hbase组合框架的大数据搜索引擎

本项目为学校大数据工程实训项目，共开发4周，答辩成绩不错。代码仓库放文章尾，写的不好，代码仅供参考。搜索对于结构化数据，因为它们具有特定的结构，所以我们一般都是可以通过关系型数据库（MySQL，Oracle等）的二维表（Table）的方式存储和搜索，也可以建立索引。对于非结构化数据，也即对全文数据的搜索主要有两种方法：顺序扫描全文检索（1）顺序扫描：通过文字名称也可了解到它的大概搜索方式，即按照顺
瞧屁屁·2023-06-19 22:51

HBase写入性能太低

Flink数据写HBase消费出2亿数据,同样的逻辑写hdfs能消费出10亿数据,集群资源够用,请问是什么原因造成的可能的原因有很多，以下列举一些常见的问题和解决方案：HBase的写入性能不够高。
SparkSql·2023-06-19 18:17

项目难点攻破

一、Flink数据倾斜，分流，二次聚合，时间窗口，自定义聚合函数二、HBase数据倾斜及查询效率问题，Phoenix应用三、数据入库效率问题，hdfs及HBase分析，批量写入优化四、CheckPoint
SparkSql·2023-06-19 18:45

《大数据分析-Hive》

Hive是大数据（hadoop）生态系统非常重要的一个工具，它提供了一种类SQL的语言，可以查询存储在Hadoop分布式文件系统（HDFS）中的数据，也可以查询Hadoop数据库（Hbase）中的数据，
数据分析杂杂念·2023-06-19 18:53

数仓架构“瘦身”，Hologres 5000CU时免费试用

Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库/Serving系统（HBase、Redis
·2023-06-19 17:38

基于搜索的软件工程(SBSE)

1.SBSE基于搜索的软件工程(SearchBasedSoftwareEngineering,SBSE)，该领域主要采用元启发式搜索的技术，从问题的解空间出发来解决软件工程的问题，即将软件工程问题转化为搜索问题
Tancenter·2023-06-19 15:02

Spark01-Spark快速上手、运行模式、运行框架、核心概念

1概述Spark和HadoopHadoopHDFS(GFS:TheGoogleFileSystem)MapReduce总结：性能横向扩展变得容易，横向拓展:增加更多的计算节点来扩展系统的处理能力Hbase
:Concerto·2023-06-19 14:49

大数据治理.数据采集/归集技术

第一部分阿里巴巴DATAxDataX是阿里开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能
908486905·2023-06-19 09:38

HBase基本概念

简介本文将介绍HBase的基本概念，各个组件的组成元素以及客户端与HBase服务端交互的过程HBase的组成元素HBase的特点是依靠HDFS文件系统，做到能够存储巨大容量的数据库。
SolidHeart·2023-06-19 08:59

一、API使用

1、mavenorg.apache.hbasehbase-server1.3.1org.apache.hbasehbase-client1.3.12、代码publicclassHBaseDemo{publicstaticConfigurationconf
小逸ing·2023-06-18 23:02

大数据hadoop生态技术简介

暂时将其核心技术分为9类：数据采集技术框架：Flume、Logstash、FileBeat；Sqoop和Datax；Cannal和Maxwell数据存储技术框架：HDFS、HBase、Kudu、Kafka
三水写代码·2023-06-18 22:05

Kafka架构

你可以理解为数据库中“表”的概念；比如，将app端日志、微信小程序端日志、业务库订单表数据分别放入不同的topicpartition分区（提升kafka吞吐量）topic中数据的具体管理单元；（你可以理解为hbase
All996·2023-06-18 22:56

生成HFile以及入库到HBase

文章目录一、MR生成HFile文件二、HFile入库到HBase一、MR生成HFile文件[hadoop@h71hui]$viTestHFileToHBase.javaimportjava.io.IOException
小强签名设计·2023-06-18 21:27

Hbase的bulkload流程与实践

文章目录一、前言二、Bulkload流程与实践1.案例一：（1）说明与注意事项（2）自我实践2.案例二：（1）MR生成HFile文件（2）HFile入库到HBase3.案例三：用Scala程序通过Spark
小强签名设计·2023-06-18 21:56

Hbase

1HBase1.1HBase架构HBase（HadoopDataBase），是一种非关系型分布式数据库（NoSQL），支持海量数据存储（官方：单表支持百亿行百万列）。
tz986548749·2023-06-18 21:52

SpringBoot 中项目中使用Habse

引入POMorg.apache.hbasehbase-client1.1.3org.slf4jslf4j-log4j12org.mortbay.jettyservlet-api-2.5org.mortbay.jettyservlet-api
Gxgeek·2023-06-18 20:16

bigdata.com《大数据计算框架》样题

HBase、Redis和M
亖嘁·2023-06-18 17:13

Python使用多线程操作tif影像和HBase数据库

本文介绍使用Python的多线程技术，提高happybase模块和gdal模块的效率，从tif格式的影像文件中读取数据，并将其存储到HBase数据库中。
runepic·2023-06-18 11:34

【大数据】一篇文章带你入门HBase

本文已收录至Github，推荐阅读Java随想录文章目录HBase特性Hadoop的限制基本概念NameSpaceTableRowKeyColumnTimeStampCell存储结构HBase数据访问形式架构体系
码农BookSea·2023-06-18 10:32

分布式存储与并行处理环境配置：Hadoop、HBase和Spark等

本文介绍Linux系统中配置Hadoop、HBase和Spark环境，包括安装Java运行环境、下载安装包、进行配置和测试。通过这种方式，可以搭建一个强大的分布式计算环境，用于处理大规模数据集。
runepic·2023-06-18 08:50

Hbase启动没有HMaster进程问题解决

安装好hbase1.4.1后启动找不到hmaster进程，已确认没有版本冲突。但能启动HRegionServer进程。然后ip:16010/master-status访问根本拒绝访问。2.解决2
mizuhokaga·2023-06-18 07:30

Python使用happybase写入HBase

HBase是一个分布式的、面向列的NoSQL数据库，可以存储大量的非结构化或半结构化的数据。tif是一种常见的影像文件格式，可以存储多波段的栅格数据。
runepic·2023-06-18 06:44

day14 - 异常捕获

IndexError叫异常类型名当程序出现异常的时候程序会直接结束，不会继续执行后续的代码#print(int('abc'))#ValueError:invalidliteralforint()withbase10
臨時人間·2023-06-18 02:36

ETL系列：一、DataX的安装与使用

DataX实现了包括MySQL、Oracle、HDFS、Hive、HBase等各种异构数据源之间高效的数据同步功能。
幽幽之心·2023-06-18 00:59
上一页 38 39 40 41 42 43 44 45 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他