hbase调优

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki2·2024-01-29 12:32

HbaseAPI语句小记

1.创建单例连接因为hbase的连接是一个重量级的，所以为了优化时间我们尽量使用一次连接，多次使用，也就是创建一次连接后，往后的每次使用都使用之前创建的连接，而不创建新的连接，也就是单例连接。
望 望·2024-01-29 12:24

基于大数据平台的kylin安装部署手册

目录一.单例Kylin部署1.环境准备1.1软件要求1.2硬件要求1.3Hadoop环境1.4安装前环境检查1.4.1开启时钟同步1.4.2安装net-tools1.4.3检查hbase是否可用1.4.4
猿来孺词·2024-01-29 10:26

Hbase BulkLoad用法

MR考查了Hbase的各种MR，没有发现哪一个是能实现的，如果有请通知我，我给他发红包。所以我们只能自己来写一个MR了，编写一个Hbase的MR，官方文档上也有相应的例子。
kikiki1·2024-01-29 10:34

Redis学习——高级篇②

==========Redis7高级之BigKey（二）==========1.MoreKey案例2.BigKey案例2.1多大算BigKey以及它的危害2.2如何产生、发现、删除3.bigKey生产调优
_Matthew·2024-01-29 08:22

BAT面试需要什么样的程序员？阿里七年经验面试官现身说法；

一、性能调优几乎每个JAVA后端开发程序员，都会在面试时碰到诸如如何性能调优的问题，如何回答好这个问题，不
风平浪静如码·2024-01-29 05:16

iOS js与原生交互图片base64解码问题

解决思路正常解码思路///base64字符串转图片///@parambase64String图片base64字符串-(UIImage*)imageWithBase64String:(NSString*)
__Mr_Xie__·2024-01-29 00:14

Spark | 记录下Spark作业执行时常见的参数属性配置

理解作业基本原理，是进行Spark作业资源参数调优的基本前提。
点滴笔记·2024-01-28 23:11

24件反人类服装设计，没有一件你能看懂

服装设计既要有很强的审美观和价值观，既然设计出来的衣服是要在生活中穿的，既要美观时尚，又要低调优雅，使服装永远不会落后，所以一个设计师在设计服装的过程中要忘掉自己是自
创意生活趣事·2024-01-28 21:30

剖析线程池ThreadPoolExecutor

文章目录线程池一、线程池概述二、ThreadPoolExecutor类详解三、线程池参数配置与优化四、线程池监控与调优五、线程池与其他并发工具比较六、线程池在实际应用中的案例分析案例背景线程池的配置配置线程池参数
小阳小朋友·2024-01-28 20:46

关于NoSQL的基本内容

4种类型键值(key-value)存储数据库列存储数据库：键仍然存在，但是指向了多个列，HBase(eg：博客平台(标签和文章)，日志)文档型数据库MongoDb(eg：淘宝商品的评价)
心诚则灵＇·2024-01-28 17:14

【JVM故障问题排查心得】「Java技术体系方向」Java虚拟机内存优化之虚拟机参数调优原理介绍

Java技术体系方向-JVM虚拟机参数调优原理内容简介栈上分配与逃逸分析逃逸分析(EscapeAnalysis)栈上分配基本思想使用场景线程私有对象虚拟机内存逻辑图JVM内存分配源码：代码总体逻辑在某些场景使用栈上分配设置
洛神灬殇·2024-01-28 16:00

【字节跳动】资深后端开发工程师-平台应用服务

职位描述负责商业化基础服务系统能力建设，参与千亿级广告基础数据服务研发和优化，参与广告平台通用组件的设计和实现；负责多样化的商业平台应用服务研发，为客户提供智能、高效的营销能力；负责服务端系统架构设计研发、调优
探小虎·2024-01-28 12:48

oracle数据同步开源,阿里开源数据同步工具--DataX

：能够将MySQLsqlServerOracleHiveHBaseFTP之间进行稳定高效的数据同步。设计思路：网状连接-》星型连接看图：目前支持哪些数据同步？
海纳易拓·2024-01-28 12:09

mysql 同步 工具 开源_开源数据同步工具——datax

开源数据同步工具——dataxDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、
weixin_39942572·2024-01-28 12:08

HBase Snapshot解析

HBase可以对某个时刻的表建立snapshot，过后可以恢复到该snapshot的状态，也可以用snapshot建立一个新的表等等。
stiga-huang·2024-01-28 12:08

开源数据同步工具DataX

DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS
快乐江小鱼·2024-01-28 12:34

Linux 磁盘IO

原文：MySQL调优基础(四)Linux磁盘IO-IT--小哥的个人空间-OSCHINA-中文开源技术交流社区一、IO处理过程磁盘IO经常会成为系统的一个瓶颈，特别是对于运行数据库的系统而言。
祁小彬·2024-01-28 12:51

Netty 参数调优

文章目录一、CONNECT_TIMEOUT_MILLIS二、SO_BACKLOG三、TCP_NODELAY四、SO_SNDBUF&SO_RCVBUF五、ALLOCATOR六、RCVBUF_ALLOCATOR一、CONNECT_TIMEOUT_MILLIS属于SocketChannal的参数用在客户端建立连接时，如果在指定毫秒内无法连接，会抛出timeout异常注意：Netty中不要用成了SO_TI
A.iguodala·2024-01-28 11:27

netty 性能调优

netty性能调优文件句柄一个tcp连接占用一个文件句柄，可调大服务器文件句柄限制，让netty服务端处理更多连接************进程文件句柄查看句柄限制：ulimit-u#centosroot
o_瓜田李下_o·2024-01-28 11:56

前传04 | Netty性能调优

前传04|Netty性能调优一、操作系统参数调试01文件描述符1）最大文件句柄数2）单进程打开的最大句柄数ulimit-n3）并发接入的TCP连接数02TCP/IP相关参数03多网卡队列和软中断二、Netty
天罚神·2024-01-28 11:26

netty性能调优

转载自STEPHEN的博客调优思路关于netty的学习和介绍，可以去github看官方文档，这里良心推荐《netty实战》和《netty权威指南》两本书，前者对于新手更友好，原理和应用都有讲到，多读读会发现很多高性能的优化点
tinysakurac·2024-01-28 11:54

前传05 | Netty安全调优

前传05|Netty安全调优01DDOS攻击01DDOS攻击根据三次握手原理，产生一种对服务器的攻击方式：DDOS攻击。
天罚神·2024-01-28 11:23

浅谈Hive和HBase有哪些区别与联系及适用场景

在学大数据分析的过程中，Hive和HBase是两个非常重要的内容，对于初学者而言容易混淆。所以比较两者的联系与差别，能够帮助我们对这两个组件有一个清晰的认识和定位。
尚学先生·2024-01-28 11:19

HBase入门、基础原理介绍

HBase入门、基础原理介绍一、HBase介绍1.1HBase特点1.2HBase架构二、HBase的读写删流程2.1HBase的写入流程2.2HBase的读流程2.3HBase的数据删除一、HBase
幸福右手牵·2024-01-28 09:07

HBase入门：运行机制

文章目录HBase系统架构客户端ZooKeeper服务器Master主服务器Region服务器Region服务器工作原理用户读写数据的过程缓存的刷新StoreFile合并Store的工作原理HLog的工作原理
缘友一世·2024-01-28 09:07

mac上搭建hbase伪集群

1.前言之前我们已经搭建过了hbase单点环境，(单机版搭建参见：https://blog.csdn.net/a15835774652/article/details/135569456)但是为了模拟一把集群环境我们还是尝试搭建一个伪集群版
寂夜了无痕·2024-01-28 08:15

一波三折：一次CPU使用率过高故障分析SQL优化解决过程

关注我们获得更多内容作者|罗贵林：云和恩墨技术工程师，具有8年以上的Oracle数据库工作经验，曾任职于大型的国家电信、省级财政、省级公安的维护，性能调优等。
数据和云·2024-01-28 08:15

自动驾驶代客泊车AVP决策规划详细设计

为了打磨巡航规划的能力，算法架构应当设计的更为灵活，可以针对使用场景迁入更为先进有效的算法，同时也可以更好的结合现有成熟的仿真平台进行算法的离线调优；此外考虑到产品的设计需求以及硬件算力的限制，算法性能的优化也是十分重要的课题
电气_空空·2024-01-28 07:35

借助arthas 性能调优全过程

使用arthas的trace命令分析方法耗时瓶颈：可以看出bindReloadZoneTimeLimite耗时最久，通过分析Bind底层，将业务粒度进行拆分，加入并发执行再次使用arthas追踪单个方法耗时时间：核心耗时方法，速度优化将近4倍，总方法耗时优化1.5倍
CodingPeppa·2024-01-28 04:44

项目优化之Redis调优

公司项目使用的Redis调优1.最大物理内存2.键名简短(存储key)3.请求超时时间4.数据持久化策略5.优化AOF和RDB6.监控客户端的连接7.限制客户端连接数8.Redis的key过期策略以及内存淘汰机制
一只Black·2024-01-28 01:52

MySQL使用show profile调优

showprofile调优有时候使用explain执行计划发现其实是命中了索引的，但是还是很慢，此时可以使用profile功能，showprofile是mysql提供的可以用来分析当前会话中语句执行的资源消耗情况
拾光师·2024-01-27 21:28

JVM-G1 性能调优思路与实战

现在大多数公司的Java生产版本都是再JDK8，所以本次性能调优主要针对G1来展开GC的主要回收区域就是年轻代(younggen)、老年代(tenuredgen)、持久区（permgen）,在jdk8之后
菠萝-琪琪·2024-01-27 21:53

备战面试日记（2.6） - （JVM.JVM调优）

文章目录JVM-JVM调优JVM参数JVM参数设置方法JVM调优工具JPS、JMAP、JSTACKjconsolejvisualvm使用方式JVM调优方案调优原则调优目的从应用层面来说从虚拟机层面来说调优方案调
舍其小伙伴·2024-01-27 21:23

JVM系列之故障排查与性能调优（重点）

1、故障排查与性能调优1.1、概述1.1.1、生产环境中的问题？生产环境发生了OOM，该如何处理？如何判断是否是内存泄漏导致的？生产环境应该给Java进程分配多少内存？生产环境应该如何选择垃圾收集器？
后端技术那点事·2024-01-27 21:52

JVM性能调优详解（值得收藏）

JVM性能调优详解前面我们学习了整个JVM系列，最终目标的不仅仅是了解JVM的基础知识，也是为了进行JVM性能调优做准备。这篇文章带领大家学习JVM性能调优的知识。
java领域·2024-01-27 21:20

JVM系列-9.性能调优

原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成2023计划中：源码溯源，一探究竟联系方式：nhs19990716，加我进群，大家一起学习，一起进步，一起对抗互联网寒冬文章目录性能调优性能调优解决的问题性能调
爱吃芝士的土豆倪·2024-01-27 21:19

HBase基础知识与架构概述

1.背景介绍HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable论文设计，并作为Hadoop生态系统的一部分。
OpenChat·2024-01-27 17:31

性能测试准备方案

性能测试目的性能调优开发人员对系统调优后，需要测试人员配合去做性能测试，验证这次优化是否有效果。如果性能指标相比较之前的性能指标更好了，说明系统优化的有效果。
美团程序员·2024-01-27 17:57

粒子群算法pos优化transformer 时间序列预测

对于Transformer模型，使用粒子群优化（ParticleSwarmOptimization,PSO）进行参数调优是一种策略。
mqdlff_python·2024-01-27 16:40

(lvs)高性能Linux服务器构建实战：运维监控、性能调优与集群应用

LVS三种模式：NAT，TUN,DR调度算法：rrwrrlcwlclblclblcrdhshLVS查看哪些IP连接过来：ipvsadm-LncLVS+keepalivedLVS+heartbeatLVS+piranha
SkTj·2024-01-27 15:19

架构：HBase的核心组件和架构设计

HBase作为一种高性能、可扩展的列式存储系统，已经成为了许多企业和组织的首选。在本文中，我们将深入了解HBase的核心组件和架构设计，为读者提供一个全面的了解。
OpenChat·2024-01-27 14:02

JVM调优

JVM调优-VisualVmVisualVm/Jconsule远程连接第一种方式第二种方式：java11开启远程GC连接(jstatd配置开启)如果还连不上考虑防火墙拦截了端口，firewall-cmd
程序员不是狗·2024-01-27 13:48

1.HBase 结构概述

一、HBase逻辑结构HBase逻辑结构.png二、HBase物理存储结构HBase物理存储结构.png三、数据模型名称作用NameSpace命名空间，类似于关系型数据库的DatabBase概念，每个命名空间下有多个表
chongweiLin·2024-01-27 12:20

Java 自带的性能调优神器！！你还没用过吗？

VisualVM是Netbeans的profile子项目，已在JDK6.0update7中自带，能够监控线程，内存情况，查看方法的CPU时间和内存中的对象，已被GC的对象，反向查看分配的堆栈(如100个String对象分别由哪几个对象分配出来的)。在JDK_HOME/bin(默认是C:\ProgramFiles\Java\jdk1.6.0_13\bin)目录下面，有一个jvisualvm.exe文
就要学Java·2024-01-27 12:55

基于springboot和bootstrap的开源运维监控工具

如果做一些调优和加强，可支持5000+节点监控2.CPU监控，内存监控，系
王逅逅_f6c0·2024-01-27 11:57

查看oracle服务器信息,查看本地oracle数据库的服务器名

查看本地oracle数据库的服务器名内容精选换一换该任务指导用户使用Loader将数据从关系型数据库导入到HBase。创建或获取该任务中创建Loader作业的业务用户和密码。
方焉识·2024-01-27 10:21

java.util.List和java.util.Set区别

最近有个需求要求查询按照单号查询顺序，数据库是hbase,我看了之前代码没有通过查hbase进行排序，就问了前端看是否前端可以排序，答案是前端不会做排序；有2个接口其中之前的接口就是这样排序的，于是我就按个排查看不同之处
qq_1411·2024-01-27 10:19

2021-03-07

MapReduce=====>解决计算问题·Yarn=====>资源协调者·Zookeeper=====>分布式应用程序协调服务·Flume=====>日志收集系统·Hive=====>基于Hadoop的数仓工具·HBase
残月冷无声·2024-01-27 10:39

easy-upsert-starter 轻量级数据转换存储服务-MySQL使用(二)

easy-upsert-starter轻量级数据转换存储服务简介：针对轻量级数据(单次包数据量10万)处理，提供数据转移存储到MySQL、Kafka、ES、HBase、Redis配置相应的数据源，注入IUpser
还在忙碌的吴小二·2024-01-27 09:46
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他