HBase开发实践

HBASE学习四：常用命令汇总梳理

1、服务状态2、问题排查3、运维操作、命令积累#基础判断业务状态命令#自动均衡region命令
Studying！！！·2024-01-17 05:59

kylin集群负载均衡(kylin3,hbaseRIF问题)

hbase历险记目录hbase历险记寻找问题分析原因解决方案方案1（资源问题、失败）方案2（成功）寻找问题不知道你是不是有这样的疑惑。
向他一样rap·2024-01-17 05:52

HBase 基础

HBase基础HBase1.HBase简介1.1HBase定义1.2HBase数据模型1.2.1HBase逻辑结构1.2.2HBase物理存储结构1.2.3数据模型1.3HBase基本架构2.HBase
奇妙的代码·2024-01-17 05:21

HBase集群写入出现大量毛刺排查

一名10年以上大数据架构&研发经验从业者，目前主要从事云原生大数据方向设计，擅长云原生技术、数据架构、数据平台构建、大数据组件性能调优问题现象查看监控，业务请求量正常，但是server端毛刺严重近期在HBase
KubeData·2024-01-17 02:12

00-初识MySQL

非关系型数据库：MongoDB，Redis，HBase等。MySQL是一个关系型数据库管理系统，是IT界使用
绿色的小苹果·2024-01-16 21:51

HBase实践 | HBase TB级数据规模不停机迁移最佳实践

背景有关HBase集群如何做不停服的数据迁移一直都是云HBase被问的比较多的一个问题，目前有许多开源的工具或者HBase本身集成的方案在性能、稳定性、使用体验上都不是很好，因此阿里云提供了BDS迁移服务
王知无(import_bigdata)·2024-01-16 16:38

HBase集群管理

通过之前文章的描述，我们已经有能力设计并部署搭建HBase集群了当我们的HBase集群开始运行的时候，新的挑战又来了例如，我们可能会遇到在集群运行的时候添加或者删除节点又或者需要拷贝/备份整个集群的数据等等如何在集群运行的时候以最小的代价来执行这些操作呢
xiaohei.info·2024-01-16 16:08

DataX&数据同步（全量）

1.DataX简介1.1DataX概述  DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP
韩顺平的小迷弟·2024-01-16 11:29

Hbase用法总结

Hbase用法总结一、Hbase命令进入hbase命令行在hbase的安装目录下bin/hbaseshell虽然类似sql命令，但所有执行都不需要加分号结束，有SQL编写强迫症的需要注意适应1、DDL操作
天选之子123·2024-01-16 10:53

大数据技术原理与应用 第三版 林子雨 期末复习（二） Hadoop HDFS HBase

大数据技术原理与应用第三版林子雨期末复习（二）HadoopHDFSHBaseHadoop生态系统HDFSHDFS结构块NameNode与SecondNameNode与DataNode数据冗余存储HDFS
头发多多，肆意生长·2024-01-16 05:21

大数据技术原理与应用期末复习（林子雨）

大数据技术原理与应用期末复习（林子雨）Hadoop的特性HBase编程实践NoSQL的四大类型键值数据库优点：缺点：列族数据库优点：缺点：文档数据库优点：缺点：图数据库优点：缺点：NoSQL的三大基石CAP
laowang357·2024-01-16 05:50

OAuth2.0 实践 Spring Authorization Server 搭建授权服务器 + Resource + Client

SpringAuthorizationServer搭建授权服务器+Resource+Clientdate:2023-03-2701:41:26tags:OAuth2.0SpringAuthorizationServercategories:开发实践
Fan ·2024-01-16 04:19

Picturesocial | 开发实践：如何在15分钟内将应用容器化

在常见的软件架构体系中，容器无疑是一个技术热点。有些开发者在工作中熟练使用容器技术，有些可能刚刚开始容器之旅。面对容器使用经验不同的各类开发者，我们希望通过这个系列文章，由浅入深地介绍如何使用容器技术来构建，运维我们的软件应用程序。贯穿整个系列，我们将持续构建一个名为Picturesocial的应用。它是一个可以分享照片的社交媒体平台。通过Picturesocial应用的构建过程，我们将和开发者分
亚马逊云开发者·2024-01-16 01:56

全民直播时代——基于WebRTC开发实时通信服务

内容来源：2017年7月8日，又拍云多媒体开发资深工程师刘博在“不止云计算，云时代还有哪些宝典”进行《云通信-基于WebRTC技术的实时通信服务开发实践》演讲分享。
IT大咖说·2024-01-16 00:57

k8s 部署 Atlas

编译Atlasmvncleanpackage-DskipTests-Dfast-Drat.skip=true-Pdist,embedded-hbase-solrAtlas内嵌hbasesolr先启动hbase
胖胖胖胖胖虎·2024-01-15 22:07

GitLab CI 实现项目A更新代码自动触发项目B更新错误码文档

这两个概念通常一起使用，但有些时候它们也会被区分开来：持续集成(CI-ContinuousIntegration):持续集成是一种开发实践，旨在通过频繁地集成和验证代码，确保
三水木_·2024-01-15 16:01

Zookeeper使用详解

介绍ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
有梦想的攻城狮·2024-01-15 09:25

分布式计算平台 Hadoop 简介

其主要采用MapReduce分布式计算框架，包括根据GFS原理开发的分布式文件系统HDFS、根据BigTable原理开发的数据存储系统HBase以及资源管理系统YARN。
rookiexiong·2024-01-15 08:19

开发实践3_反向解析/^URL

以下学习朔宁夫开发课。（Python）pre“反向解析”：动态获取URL的一种方式。避免在模板和视图函数中硬编码路径，易于扩展和维护。使用：①设置命名空间，解析第一部分URL②子路由中设置参数指定名称，解析第二部分URL③在子路由设置app_name④模板中使用{%url'namespace:name'param1param2...%}⑤视图函数中使用reverse()函数reverse("nam
even_123·2024-01-15 06:46

开发实践_阶段一

最终实现效果演示p.s.其中莫名其妙的参数都是debug过程加的flag。1/6注册2/6注册后跳转到登陆3/6登录失败提示’wronginfo.‘,登录成功A未选课则显示课程列表，点击实现选课+查询B检测到已选课则只可查询该课程，后续可见4/6点击选课，自动记录选课数据，并跳转到相关查询结果页5/6选课后再次登录，则只能做相应的查询操作6/6查询结果实现具体内容：pythonmanage.pys
even_123·2024-01-15 06:46

开发实践5_project

要求：（对作业要求的"Student"稍作了变换，表单名称为“Index”。）获得后台Index数据，作展示，要求使用分页器，包含上一页、下一页、当前页/总页。结果：①preparation(创建用户、app、注册、链接总路由等)//创建超级用户terminalpythonmanage.pycreatesuperuser//8000端口adminsuperuserlogin(Createnewap
even_123·2024-01-15 06:46

开发实践4_project

要求：将app下的static提出至proj.root目录，不能影响STATICRESOURCES探测器的工作。“一个project由多个app分别维护用户、业务等等······”将static_app下的static文件夹直接拖动到project层级，确认refactor；setting//STATICFILES_DIRS=[os.path.join(BASE_DIR,'static'),#即.
even_123·2024-01-15 06:16

开发实践0

2023-11-30以下学习朔宁夫课程。（Python）记点废话：“实现所想”。路径①基础：设计模式视图模型模板跳转②进阶：静态资源CSRFWeb状态后台管理分页缓存中间件RESTfull③实践：编码GIT协作上线部署认真摄入。多动手。//术语架构：CS（Client/Server客户端-服务端架构缺点：不同系统要研发不同版本的客户端；对客户端的硬件有要求）BS（Browser/Server浏览器
even_123·2024-01-15 06:46

开发实践0_project

要求：oneapp后据参数返回两种页面，无参返回某页面。一、httpresponse1.newproject:dev0_pro2.pipinstalldjango3.//setting.pyDEBUG=FalseALLOWED_HOSTS=["*"]4.//oneappviewsfromdjango.httpimportHttpResponsedefwhaaat(request,para=None
even_123·2024-01-15 06:46

开发实践5_后台管理^/ 分_页&器

以下学习朔宁夫开发课。（Python）一基本使用创建超级用户terminal//pythonmanage.pycreatesuperuser访问地址//Login|Djangositeadminhttp://127.0.0.1:8000/admin/login/?next=/admin/superuserrlogindjango自带admin功能。其中group与permission可见是两张ma
even_123·2024-01-15 06:07

架构设计：远程调用服务架构设计及zookeeper技术详解

当我研究学习hadoop的相关技术时候，有两块知识曾经让我十分的困惑，一个是hbase，一个就是zookeeper。
Java圈子·2024-01-15 01:15

Building online HBase cluster of Zhihu based on Kubernetes

BuildingonlineHBaseclusterofZhihubasedonKubernetes采用Kubernetes进行hbase部署，扩展性大大增强。
mtj66·2024-01-14 21:24

大数据容器化

记录知乎容器平台演进及与大数据融合实践http://www.sykv.cn/cat/bigdata/4140.htmlBuildingonlineHBaseclusterofZhihubasedonKuberneteshttps
bigdata-余建新·2024-01-14 21:23

Linux Git打包部署JAVA项目 shell脚本

/bin/bashBASE_PATH="/root/local"GIT_BASE_PATH="/root/local/publish/my-java-study"SCRIPT_NAME=$(basename
LaLaLa_OvO·2024-01-14 16:57

Hbase shell常见命令

在hbase安装目录下，输入hbaseshell，进入到hbaseshell模式，常见的基本命令如下：1.create建表，alter建立列族create'test','cf'//建立一个叫test的表
analanxingde·2024-01-14 14:07

人机对话：程序设计，学哪种语言好？

编程语言：前端开发技术：后端开发技术：移动网络技术：本地存储与数据管理：性能优化：安全开发实践：测试技术：那是学的范围广一些好呢，还是专门钻研一种技术呢？就目前来说，哪种技术更好价值？
明月看潮生·2024-01-14 12:57

error: KeeperErrorCode = NoNode for /hbase/master

错误2：搭建完集群之后，在hbaseshell中查看表，出现error:KeeperErrorCode=NoNodefor/hbase/master1.查看日志，是因为zookeeper启动后又自动关闭了
Miss_Bueno·2024-01-14 09:36

Spark-累加器

,要是发送错误,放回到尾部顺序就错了所以叫累加器不是很准确,叫采集器importorg.apache.hadoop.conf.Configurationimportorg.apache.hadoop.hbase
疯子@123·2024-01-14 09:00

单机物理机部署Datax

一、概述DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能
DIY……·2024-01-14 07:34

Hbase提高读取速度Memstore＆BlockCache

BlockCache其中InMemory队列用于保存HBaseMeta表元数据信息，因此如果将数据量很大的用户表设置为InMemory的话，可能会导致Meta表缓存失效，进而对整个集群的性能产生影响。
明明德撩码·2024-01-14 07:49

HBase单机模式安装趟坑

今天在本地虚拟机环境上，安装了Hbase的单机模式，期间遇到几个异常情况，现记录下遇到的异常及解决办法：1.本地单机部署hbase,想要使用独立zookeeper,不使用自带的把hbase.cluster.distributed
JeffCode·2024-01-14 07:37

gitlab CI && Runners使用

一、持续集成（ContinuousIntegration）软件集成:软件开发过程中的一个环节，包括以下流程：合并代码---->安装依赖---->编译---->测试---->发布持续集成是一种软件开发实践
夏慕春·2024-01-14 06:19

Hbase 的复制

HBase默认采用异步复制的方式同步数据，即客户端执行完put之后，RegionServer的后台线程不断地推送HLog的Entry到Peer集群。
晓之以理的喵~~·2024-01-14 06:45

hbase集群之间数据迁移_HBase集群数据迁移方案

一、静态迁移方案1、在Hbase停止的状态下进行数据的迁移。2、采用Hadoopdistcp方式，将以上目录的内容，迁移到另一个集群。使用add_table.rb进行恢复。
无畏道人·2024-01-14 06:14

Hbase跨集群迁移

一、Hbase跨集群迁移方式##标题Hbase跨集群迁移的方式：copyTable、distcp、export/import、snapshot。备注：新集群Hbase版本cdh2.1.0。
喧嚣已默，往事非昨·2024-01-14 06:14

一种HBase数据备份及恢复方法

目录0.引言1.备份方法2.脚本的使用方法3获取HDFS文件到本地系统4数据恢复方法4.1将将备份文件添加到hdfs中4.2导入数据到HBase集群5.小结0.引言HBase在大数据处理中地位至关重要，
莫叫石榴姐·2024-01-14 06:42

mac上部署单体hbase

1.简介HBase是一个开源的、分布式的、版本化的典型非关系型数据库。它是GoogleBigTable的开源实现，并且是Apache基金会的Hadoop项目的一部分1。
寂夜了无痕·2024-01-14 05:15

java开发，年薪15W的和年薪50W的差距

在这个IT系统动辄就是上亿流量的时代，Java作为大数据时代应用最广泛的语言，诞生了一批又一批的新技术，包括HBase、Hadoop、MQ、Netty、SpringCloud等等。
墨雨轩夏·2024-01-14 02:57

HBase的Region定位

本文转载自：https://blog.csdn.net/mingyuezh/article/details/80844925早期HBase版本的Region定位系统如何找到某个rowkey(或者某个rowkeyrange
博弈史密斯·2024-01-13 20:36

Hbase服务故障恢复后快速解决region负载不均衡的问题

此解决方案的适用场景：hbase故障前region平均的分布在所有的regionserver上面，故障发生后，HbaseMaster挂掉，部分或全部regionserver挂掉，当hbase个组件都恢复后
非著名程序猿·2024-01-13 20:02

HBase 四种数据迁移方案

本文原文：http://ballwql.cnblogs.com/一、前言HBase数据迁移是很常见的操作，目前业界主要的迁移方式主要分为以下几类：图1.HBase数据迁移方案从上面图中可看出，目前的方案主要有四类
过往记忆·2024-01-13 18:21

HBase 复制、备份、迁移

HBase集群间数据迁移参考https://blog.csdn.net/qq_26442553/article/details/134282334https://blog.csdn.net/wypblog
bigdata-余建新·2024-01-13 18:43

Flume命令

它将数据从各种源（例如日志文件、消息队列、网络流等）采集到目标位置（例如Hadoop、HBase、Kafka等）。
思旭�·2024-01-13 13:02

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki1·2024-01-13 12:43

JUST技术：JUST高效时空索引揭秘及使用指南

HBase等具有高可扩展性的分布式数据库又不能直接管理时空数据。为此，GeoMesa提供了大量的时空索引工具管理时空数据。但是，它支持的时空类型不够
JUST极客·2024-01-13 10:27
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他