HBase开发实践

zookeeper+KAFKA 集群搭建

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
懵逼的运维弟弟·2024-08-26 16:28

Kylin系列-入门

它基于Hadoop和HBase构建，通过预计算数据立方体（Cube）来加速查询，使得复杂查询可以在亚
Dingdangr·2024-08-26 13:34

创业生态报告：中国崛起美国衰退

今年，该组织在CrunchBase和Dealroom等合
飞猪share·2024-08-26 07:01

HBase数据访问的几种方式

1Python访问HBaseRestServerHBaseRestServerHBaseRESTServer是ApacheHBase提供的一个RESTful接口，用于通过HTTP协议与HBase进行交互
木亦汐丫·2024-08-26 00:45

从零到一建设数据中台 - 关键技术汇总

kettle数据分布式存储：HadoopHDFS离线批处理计算：MapReduce、Spark、Flink实时流式计算：Storm/SparkStreaming、Flink批处理消息队列：Kafka查询分析：Hbase
我码玄黄·2024-08-24 12:09

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki2·2024-08-24 09:57

大数据技术--实验03-HBase的安装与使用【实测可行】

虚拟机配置好后，配置Hbase参考下表的服务分配来配置HBase。
doublexiao79·2024-08-24 08:08

软考高级第四版备考---第四十二天（软件工程-部署交付）

其中软件配置过程极大地影响着软件的部署结果的正确性，应用系统的配置是整个部署过程中的主要错误来源二、持续交付：持续交付是一系列开发实践方法，用来确保让代码能够快速、安全部署到生产环境中。
灬拂尘灬·2024-08-23 08:39

基于Hadoop平台的电信客服数据的处理与分析④项目实现：任务16：数据采集/消费/存储

接下来，我们需要将这些实时的数据通过Flume采集到Kafka集群中，然后提供给HBase消费。
我非夏日·2024-08-23 06:28

Java项目中的持续集成与持续部署（CI/CD）策略

一、持续集成（CI）概述持续集成（CI）是一种软件开发实践，指的是开发者频繁地将
省赚客app开发者·2024-08-23 05:19

autodeploy.sh- 一个简单的shell脚本

/bin/bashBASE_DIR='/opt/basedir'DEPLOY_DIR='/opt/upay/deploydir'echo"开始创建本地文件系统..."
ouanui·2024-08-22 22:35

《Linux运维总结：基于银河麒麟V10+ARM64架构CPU部署zookeeper 3.8.4二进制分布式集群》

它是Google的Chubby项目的开源实现之一，并且是Hadoop和HBase等项目的重要组成部分。ZooKeeper提供的功能包括配置维护
东城绝神·2024-08-22 16:35

HBase入门教程

1.1Hbase概念术语1、行键RowKey：主键是用来检索记录的主键，访问hbasetable中的行。
xmvip01·2024-08-22 10:08

关于HDP的20道高级运维面试题

HDP（HortonworksDataPlatform）的主要组件包括Hadoop框架、HDFS、MapReduce、YARN以及Hadoop生态系统中的其他关键工具，如Spark、Flink、Hive、HBase
编织幻境的妖·2024-03-26 15:34

HBase入门教程

1.1Hbase概念术语1、行键RowKey：主键是用来检索记录的主键，访问hbasetable中的行。
xmvip01·2024-03-26 03:04

HBase常用命令

简介：HBaseShell是一种操作HBase的交互模式，支持完整的HBase命令集。
叶域·2024-03-18 23:35

Flink异步io关联Hbase

主程序publicstaticvoidmain(String[]args)throwsException{//1.获取流执行环境StreamExecutionEnvironmentenv=StreamExecutionEnvironment.getExecutionEnvironment();env.setParallelism(1);SimpleDateFormatformatter=newSi
//承续缘_纪录片·2024-03-16 05:06

Hbase集群搭建超详细教程

Hbase集群搭建前言详细步骤1、下载安装包2、解压3、修改配置文件3.1修改hbase-env.sh文件3.2修改hbase-site.xml3.3修改regionservers文件4、分发hbase
笑看风云路·2024-03-13 09:02

基于HBase和Spark构建企业级数据处理平台

摘要：在中国HBase技术社区第十届Meetup杭州站上，阿里云数据库技术专家李伟为大家分享了如何基于当下流行的HBase和Spark体系构建企业级数据处理平台，并且针对于一些具体落地场景进行了介绍。
weixin_34071713·2024-03-12 22:44

大数据开发（Hadoop面试真题-卷九）

2、既然HBase底层数据是存储在HDFS上，为什么不直接使用HDFS，而还要用HBase?3、Sparkmapjoin的实现原理？4、Spark的stage如何划分？
Key-Key·2024-03-09 10:06

基于ERNIR3.0文本分类的开发实践

参考：基于ERNIR3.0文本分类：(KUAKE-QIC)意图识别多分类(单标签)-飞桨AIStudio星河社区(baidu.com)https://zhuanlan.zhihu.com/p/574666812?utm_id=0遇到的问题：如下采用paddleNLP下文本分类实例进行分类训练后发现生成的模型分类不准。打算自己开发脚本进行分类计算再进行服务化部署。基于ERNIR3.0文本分类任务模型
wangqiaowq·2024-03-07 03:54

从入门到精通：Elasticsearch开发实践教程

Elasticsearch是一款开源的搜索引擎，它使用Lucene搜索库作为其核心搜索引擎。Elasticsearch使用RESTfulAPI进行交互，并支持多种数据类型的搜索和聚合。本教程将介绍Elasticsearch的基本原理，如何开发，以及如何在SpringBoot中使用Elasticsearch。Elasticsearch的原理Elasticsearch是一个分布式的文档存储和搜索引擎。
青年老年程序员·2024-03-05 19:14

hbase、hive、clickhouse对比

概念架构hbasemaster存储元数据、regionServer实际控制表数据，存储单位是Region，底层数据存储使用HDFShive通过driver将sql分解成mapreduce任务元数据需要单独存储到一个关系型数据库
freshrookie·2024-03-05 16:40

openeuler20.03在线安装docker最新版

Docker的官方仓库源：sudotee/etc/yum.repos.d/docker-ce.repo<hbaseurl
·2024-02-27 20:48

什么是编程领域的 managed 特性

Managed特性背景在早期的软件开发实践中，开发者需要直接管理所有资源，包括内存的分配与释放、硬件的直接控制等。这种方式虽然能充分利用硬件性能，但同时也带来了
·2024-02-25 02:35

Kafka痛点与Puslar介绍

隔离,写高了读不动,读高了写不动没有多租户IO模型过于简单,面对大量topic时性能下降严重消费模型有限,无法利用部分业务可以接受消息无序的特点Puslar是一个非常优秀的开源系统，它的整体框架偏向于HBase
weidajiangjiang·2024-02-20 19:34

Hadoop生态圈

生态圈1.HBase的数据存储在HDFS里2.MapReduce可以计算HBase里的数据，也可以计算HDFS里的数据3.Hive是数据分析数据引擎，也是MapReduce模型，支持SQL4.Pig也是一个数据分析引擎
陈超Terry的技术屋·2024-02-20 19:47

SQL学习笔记----第二天（学生信息表自增字段的使用）

学生信息表自增字段的使用--目录前言一、MySQL中使用自增字段二、SqlServer中使用自增字段三、Oracle中使用自增字段总结前言我们在设计数据表时，使用自动增长字段可以简化子弹数据的生成，在开发实践中
春眠不觉晓♞·2024-02-20 15:54

HBase 进阶

参考来源:B站尚硅谷HBase2.x目录Master架构RegionServer架构写流程MemStoreFlush读流程HFile结构读流程合并读取数据优化StoreFileCompactionRegionSplit
魅美·2024-02-20 08:11

HbaseAPI

hbaseAPI方法：API本质就是调用对象的方法去实现的。ddl的概念是对表的操作和对外面的大的操作，ddl都是去调用admin对象的方法实现的admin对象通过连接.getAdmin获取。
astudybear·2024-02-20 08:40

01 Qt自定义风格控件的基本原则

目录1.继承原生控件2.组合原生控件3.仿写原生控件PS:后续将继续分享开发实践中各类自定义控件的方法、思路以及组件库1.继承原生控件关键字：继承、paintEvent这里想说的是，Qt的Gui框架在封装原生控件的同时
峭桑岱司·2024-02-20 08:39

HBase API

参考来源:B站尚硅谷HBase2.x环境准备新建Maven项目后在pom.xml中添加依赖：注意：会报错javax.el包不存在，是一个测试用的依赖，不影响使用org.apache.hbasehbase-server2.4.11org.glassfishjavax.elorg.glassfishjavax.el3.0.1
魅美·2024-02-20 08:37

Hbase - 自定义Rowkey规则

>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制`TableInputFormat`来实现我们的需求了，我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5·2024-02-20 07:17

探索海洋世界，基于DETR(DEtection TRansformer)模型开发构建海洋场景下海洋生物检测识别分析系统

前面的博文中，开发实践过海底相关生物检测识别的项目，对于海洋场景下的海洋生物检测则很少有所涉及，这里本文的主要目的就是想要开发构建基于DETR的海洋场景下的海洋生物检测识别系统。
Together_CZ·2024-02-20 06:20

HBase——基础概念介绍

一、初识HBaseHBase是一个面向列式存储的分布式数据库，其设计思想来源于Google的BigTable论文。HBase底层存储基于HDFS实现，集群的管理基于ZooKeeper实现。
zhanglf1016·2024-02-20 04:43

探索设计模式的魅力：创建型设计模式的比较与决策

它们是在多年软件开发实践中总结出来的最佳实
danci_btq·2024-02-19 20:46

【前端工程化面试题】什么是 CI/CD

持续集成(ContinuousIntegration,CI)：持续集成是一种软件开发实践，通过将代码频繁地集成到共享存储库（如版本控制系统）中，并自动运行测试来验证新代码的正确性。主要目标是尽早地
我有一棵树·2024-02-19 19:33

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
kikiki2·2024-02-15 06:39

助力工业生产质检，基于轻量级yolov8-seg开发构建工业场景下滚珠丝杠传动表面缺陷分割检测系统

AI赋能工业生产是一个强有力的方式，在我们之前的系列博文中也有很多相应的开发实践，感兴趣的胡都可以自行移步阅读，本文的核心思想就是想要基于轻量级的实例分割模型来开发构建工业场景下的滚珠丝杠传动表面缺陷分割检测系统
Together_CZ·2024-02-15 02:40

助力智能化农田作物除草，基于轻量级YOLOv8n开发构建农田作物场景下玉米苗、杂草检测识别分析系统

在我们前面的系列博文中，关于田间作物场景下的作物、杂草检测已经有过相关的开发实践了，结合智能化的设备可以实现只能除草等操作，玉米作物场景下的杂草检测我们则少有涉及，这里本文的主要目的就是想要基于最新的YOLOv8
Together_CZ·2024-02-14 07:13

Android WiFi P2P开发实践笔记

WifiDirect功能早在Android4.0就以经加入Android系统了，但是一直没有很好的被支持，主要原因是比较耗电而且连接并不是很稳定。但是也有很大的好处，就是范围广而且速度快，适合设备间在无网络的情况下进行大文件传输。目前Android系统中只是内置了设备的搜索和链接功能，并没有像蓝牙那样有许多应用。有关WiFiP2P的相关API都在android.net.wifi.p2p下，类并不多
留给时光吧·2024-02-14 05:23

大数据开发之Sqoop详细介绍

用户可以在Sqoop的帮助下，轻松地把关系型数据库的数据导入到Hadoop与其相关的系统(如HBase和Hive)中；同时也可以把数据从Hadoop系统里抽取并导出到关系型数据库里。
只是甲·2024-02-14 01:17

Ubuntu16.04下HBase安装笔记

基础准备JDKHadoopSSHServer下载HBasehttps://hbase.apache.org/tar-zxvfhbase-1.4.2-bin.tar.gzsudomvhbase-1.4.2
bluexiii·2024-02-13 22:48

HBase过滤器

HBase过滤器Get和Scan都支持过滤器，这些类提供的接口不能对行键、列名和列值进行过滤，但过滤器可以实现。过滤器的接口为Filter。
橙汁啤酒厂·2024-02-13 16:28

HBase Shell操作命令

一、general操作1.1获取帮助#引号不能省略help'status'1.2查询服务器状态1.statushbase(main):002:0>status1activemaster,0backupmasters
橙汁啤酒厂·2024-02-13 16:58

学习笔记12-zookeeper

提供一种集中式信息存储服务特点:数据存在内存中,类似文件系统的树形结构(文件和目录),高吞吐和低延迟,集群高可靠作用:基于zookeeper可以实现分布式统一配置中心,服务注册中心,分布式锁等功能1.zookeeper的应用案例Hbase
在知识的海洋里遨游·2024-02-12 19:09

Hbase - 迁移数据[导出,导入]

>有没有这样一样情况，把一个集群中的某个表导到另一个群集中，或者hbase的表结构发生了更改，但是数据还要，比如预分区没做，导致某台RegionServer很吃紧，Hbase的导出导出都可以很快的完成这些操作
kikiki5·2024-02-12 16:55

Lan分享岗位信息（前端）

电商核心业务（现金流来源）前端leader，带5人，汇报CTO前端专家/Leader1、负责蚂蜂窝旅游电商平台业务线相关产品的前端开发工作，为用户提供更好的前端体验，提供前端解决方案2、为团队积累和分享最佳开发实践
TonyLan·2024-02-12 15:06

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
大猪大猪·2024-02-12 15:45

zk01

zookeeper基础ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop和Hbase的重要组件。提供的功能包括：命名服务、配置管理、集群管理、分布式锁、队列管理。
矮肥·2024-02-12 11:41
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他