Hive常用命令

学习笔记：云原生容器化技术——Docker

Docker安装2.1Docker的基本组成2.2Docker安装2.3阿里云镜像加速2.4dockerrun的执行流程2.5Docker工作原理三、Docker命令3.1镜像命令3.2容器命令3.3其他常用命令
自传丶·2024-02-19 18:19

centos 安装 maven

wgethttps://archive.apache.org/dist/maven/maven-3/3.8.6/binaries/apache-maven-3.8.6-bin.tar.gz解压文件：使用
iteye_10392·2024-02-19 16:15

docker ubuntu tomcat 换源 安装软件

第一种办法参考docker中ubuntu容器更换apt源_ubuntu更改apt源withdockerfile-CSDN博客sed-is@/archive.ubuntu.com/@/mirrors.aliyun.com
linux实践操作记录·2024-02-19 16:36

docker的常用命令有哪些？

Docker是一种容器化平台，用于构建、部署和运行应用程序。下面是一些常用的Docker命令：镜像相关命令：dockerimages：列出本地的镜像。dockerpull：从Docker仓库中拉取镜像。dockerbuild-t：根据Dockerfile构建镜像。dockerpush：将镜像推送到Docker仓库。容器相关命令：dockerps：列出运行中的容器。dockerrun：创建并运行一个
元芳Q代码·2024-02-19 16:01

git的常用命令有哪些？

Git是一个流行的分布式版本控制系统，用于跟踪文件的变化、协作开发和管理代码。以下是一些常用的Git命令：创建和克隆仓库：gitinit：在当前目录初始化一个新的Git仓库。gitclone：克隆一个远程仓库到本地。添加和提交文件：gitadd：将文件添加到暂存区。gitadd.：将所有修改过的文件添加到暂存区。gitcommit-m"提交信息"：提交暂存区的文件到本地仓库。分支操作：gitbra
元芳Q代码·2024-02-19 16:26

DockerFile的应用

DockerFile的应用一、介绍1构建的三步骤2构建的过程二、常用命令三、DockerFile案例1创建DockerFile文件2使用DockerFile文件构建镜像3启动容器并验证四DockerFile
马志武·2024-02-19 16:40

Docker的介绍、安装与常用命令

Docker的介绍、安装与常用命令一、介绍1.相关资源2.安装环境3.基本组成二、Docker安装1.检查系统环境2安装gcc3卸载旧版本docker4安装软件包5设置镜像仓库6更新yum索引7安装（ce
马志武·2024-02-19 16:10

vi&vim复习

vi/vim常用命令vi&vim常用命令setnu显示行号gg跳转到文件开头/向后搜索?
曹博Blog·2024-02-19 16:08

js实现判断大写锁定是否开启（转）

转载地址：http://www.cnblogs.com/xiaoao808/archive/2008/07/31/1257624.html在用户登录输入密码时，常常会有因为大写锁定开启而造成输入密码错误的情况
weixin_30621959·2024-02-19 15:59

Visual Studio设置Solution Explorer同步当前文档

从Debug或Tools菜单项打开Options窗体，勾选下面的选项：http://www.cnblogs.com/findcaiyzh/archive/2011/03/31/2000529.html
霍莉雪特·2024-02-19 14:00

JVM内存调优常用参数

视频讲解地址文章目录一、开始二、常用命令1、原生命令2、arthas命令三、Parallel四、G1相关参数五、通用参数六、JVM调优参数一、开始查看当前JDK版本所支持的垃圾回收器有哪些、以及默认使用的回收器
小道仙97·2024-02-19 14:57

中间件-Nginx学习笔记

目录nginx简介Linux安装Nginxnginx常用命令nginx.conf配置文件nginx反向代理nginx负载均衡nginx动静分离nginx搭建高可用集群高可用配置（主从配置）高可用主从配置文件详解
笑一笑、·2024-02-19 14:52

数据归档神器-pt-archiver

前言介绍`pt-archiver是用来归档表的工具，可以做到低影响、高性能的归档工具，从表中删除旧数据，而不会对OLTP查询产生太大影响。可以将数据插入到另一个表中，该表不需要在同一台服务器上。
落弋V·2024-02-19 14:40

数据归档工具pt-archiver原理研究与使用

1.介绍之前处理mysql历史数据归档，直接写存储过程实现的（《mysql历史数据自动归档》），换新东家后，还是决定研究下主流的pt-archiver并实施。
sdmei·2024-02-19 14:08

MySQL-运维工具 pt-archiver数据归档工具

逐行进行)4.2表归档到表(批量进行)4.2.1归档到当前实例，并删除数据4.2.2归档到远程实例，不删除数据4.3仅清除表数据4.4表自增字段处理5.总结1.引言2.工具说明2.1使用方式pt-archiver
凡尘技术·2024-02-19 14:07

利用 pt-archiver 实现数据库归档功能

文章目录一、前言关于Percona二、PerconaToolkit安装percona-toolkit：pt-archiver归档命令的使用格式：示例：三、归档步骤：1）、创建归档数据库和归档表方式一(推荐
程序没有缘·2024-02-19 14:02

(10)Hive的相关概念——文件格式和数据压缩

1.1.1行存储的特点1.1.2列存储的特点1.2TextFile1.3SequenceFile1.4Parquet1.5ORC二、数据压缩2.1数据压缩-概述2.1.1压缩的优点2.1.2压缩的缺点2.2Hive
爱吃辣条byte·2024-02-19 13:21

K8S常用命令

文章目录一、概念1、集群简介2、kubernetes概念3、Namespace4、Pod5、Label6、Pod控制器(Deployment)7、Service二、快速开始1、nodes2、namespace(命名空间)3、Pod4、Label5、控制器(deployment)6、Service一、概念1、集群简介一个kubernetes集群主要是由控制节点(master)、**工作节点(node
ha_lydms·2024-02-19 13:13

k8s常用命令

K8s常用命令合集1.创建资源一般创建资源会有两种方式：通过文件或者命令创建。
无敌锅包肉·2024-02-19 13:32

adb常用命令

ADB（AndroidDebugBridge）是用于与Android设备通信的命令行工具。以下是一些常用的ADB命令：adbdevices:列出已连接的Android设备。adbshell:进入设备的命令行shell环境。adbinstall:安装应用程序。adbuninstall:卸载应用程序。adbpush:将本地文件推送到设备上。adbpull:从设备上拉取文件到本地。adbreboot:重
依旧很淡定·2024-02-19 12:28

Linux常用命令汇总

在学习Linux时，会发现Linux的命令非常多而且还有很多参数，让人很是苦恼。就想着有没有一篇文章可以整理出来常用的命令，尽管网上有很多文章，但是总会有点问题（整理的文章非常详细但是没有目录——不能直接跳转到相关的位置）那么今天博主就带来了有目录的超级详细的Linux基础命令的汇总的文章！同时也会分享一些超级实用的快捷键。绝对是干货满满的一篇文章！文章目录Linux终端命令格式终端命令格式查阅命
番茄不是西红柿1·2024-02-19 12:29

linux压缩webfile文件夹 webfile.tar.gz和webfile.tar的区别

tar，全称TapeArchive，最初被设计用于在磁带存储设备上存储文件，但现在已经广泛用于在硬盘驱动器上存储和分发文件。
·2024-02-19 11:53

(15)Hive调优——数据倾斜的解决指南

目录前言一、什么是数据倾斜二、发生数据倾斜的表现2.1MapReduce任务2.2Spark任务三、如何定位发生数据倾斜的代码四、发生数据倾斜的原因3.1key分布不均匀3.1.1某些key存在大量相同值3.1.2存在大量异常值或空值3.2业务数据本身的特性3.3SQL语句本身就有数据倾斜3.4建表时考虑不周四、触发数据倾斜的SQL操作五、数据倾斜的解决方案5.1Map长尾优化5.1.1Map读取
爱吃辣条byte·2024-02-19 11:50

mongodb常用命令

mongo--host127.0.0.1--port2700-urootshowdbs//显示当前MongoDB服务器上的所有数据库。use//切换到指定的数据库。db//显示当前正在使用的数据库。showcollections//显示当前数据库中的所有集合（表）。db..find()//从指定的集合中检索所有文档。db..findOne()//从指定的集合中检索一个文档。db..insertOn
（；￣ェ￣）。·2024-02-19 10:18

Hive入门，Hive是什么？

1.1Hive是什么？Hive是一个开源的数据仓库工具，主要用于处理大规模数据集。它是建立在Hadoop生态系统之上的，利用Hadoop的分布式存储和计算能力来处理和分析数据。
JayGboy·2024-02-19 10:31

Linux超详细笔记

学习笔记操作系统Linux初识Linux的诞生Linux内核Linux发行版虚拟机VMware安装远程连接Linux系统FinalShellFinalShell连接LinuxWSL配置UbuntuLinux常用命令
Gunalaer·2024-02-19 10:25

常用命令语句—— 输出命令

格式：@[SAY][GET][DEFAULT]功能：在屏幕指定行列输出表达式的值并修改内存变量的值。说明：1）中行自上而下编号，列自左至右编号，编号从0开始，行列可以使用小数精确定位。2）省略SAY选项，GET变量值在行列指定位置开始显示。若选SAY选项，先显示表达式的值，然后再显示GET变量值。3）GET中的变量必须有初值或用[DEFAULT]中的命令定值。4）GET选项必须用READ命令激活。
编程小白ZZ·2024-02-15 10:53

Hive Distribute by 应用之动态分区小文件过多问题优化

Fatalerroroccurredwhennodetriedtocreatetoomanydynamicpartitions.Themaximumnumberofdynamicpartitionsiscontrolledbyhive.exec.max.dynamic.p
莫叫石榴姐·2024-02-15 10:58

Hive调优——count distinct替换

离线数仓开发过程中经常会对数据去重后聚合统计，而对于大数据量来说，count(distinct)操作消耗资源且查询性能很慢，以下是调优的方式。解决方案一：groupby替代原sql如下：#=====7日、14日的app点击的用户数（user_id去重统计）selectgroup_id,app_id,--7日内UVcount(distinctcasewhendt>='${7d_before}'the
爱吃辣条byte·2024-02-15 10:58

Hive的相关概念——架构、数据存储、读写文件机制

目录一、架构及组件介绍1.1Hive整体架构1.2Hive组件1.3Hive数据模型（DataModel）1.3.1Databases1.3.2Tables1.3.3Partitions1.3.4Buckets
爱吃辣条byte·2024-02-15 10:57

Hive的相关概念——分区表、分桶表

目录一、Hive分区表1.1分区表的概念1.2分区表的创建1.3分区表数据加载及查询1.3.1静态分区1.3.2动态分区1.4分区表的本质及使用1.5分区表的注意事项1.6多重分区表二、Hive分桶表2.1
爱吃辣条byte·2024-02-15 10:57

Hive——动态分区导致的小文件问题

目录0问题现象1问题解决解决方案一：调整动态分区数方案一弊端：小文件剧增解决方案二：distributeby方案二弊端：数据倾斜解决方案三：distributeby命令2思考3小结0问题现象现象：报错errorr如下：[Error20004]:Fatalerroroccurredwhennodetriedtocreatetoomanydynamicpartitions.Themaximumnumb
爱吃辣条byte·2024-02-15 10:25

【大数据Hive】hive 表设计常用优化策略

目录一、前言二、hive普通表查询原理2.1操作演示说明2.1.1创建一张表，并加载数据2.1.2统计3月24号的登录人数2.1.3查询原理过程总结2.2普通表结构带来的问题三、hive分区表设计3.1
逆风飞翔的小叔·2024-02-15 10:22

Hive on Spark配置

前提条件1、安装好Hive，参考：Hive安装部署-CSDN博客2、下载好Spark安装包，链接：https://pan.baidu.com/s/1plIBKPUAv79WJxBSbdPODw?
在下区区俗物·2024-02-15 10:51

配置hive on spark

配置hiveonspark1、上传Spark纯净版jar包到HDFS：hdfsdfs-mkdir/spark-jarshdfsdfs-put/opt/spark/jars/*/spark-jars2、修改
空白格2519·2024-02-15 10:51

hive on spark配置经验

常规配置配置完，开启hadoop，开启spark（如果在hdfs上上传了纯净版的spark则不需要开启），开启hive注：当前节点一定要是namenode的active节点，因为hadoop长时间不用namenode
小五冲冲冲·2024-02-15 10:21

部署一个3节点的Kafka集群

一Java环境部署：1.1官网下载jdkJava下载官网https://www.oracle.com/cn/java/technologies/javase/javase8u211-later-archive-downloads.html1.12
小关暗器·2024-02-15 09:25

Hive3.1.2——企业级调优

前言本篇文章主要整理hive-3.1.2版本的企业调优经验，有误请指出~一、性能评估和优化1.1Explain查询计划使用explain命令可以分析查询计划，查看计划中的资源消耗情况，定位潜在的性能问题
爱吃辣条byte·2024-02-15 09:48

docker常用命令

docker常用实例php5+apachesudodockercontainerrun--rm--namewordpress--volume"$PWD/":/var/www/htmlphp:5.6-apachemysql5sudodockercontainerrun-d--rm--namewordpressdb--envMYSQL_ROOT_PASSWORD=123456--envMYSQL_DA
Arnoux·2024-02-15 06:27

Linux下Redis安装配置,及常用命令

Redis简介Redis-REmoteDIctionaryServerRedis是一个使用ANSIC语言编写的开源数据库高性能的key-value数据库内存数据库，支持数据持久化Redis官网https://redis.io/提供了Java，C/C++,C#,PHP,JavaScript，Perl，Object-C，Python，Ruby，Erlang等客户端Redis安装（Linux）下载、解压
GALAace·2024-02-15 06:17

【前端高频面试题--git篇】

作者：“码上有前”文章简介：前端高频面试题欢迎小伙伴们点赞、收藏⭐、留言前端高频面试题--git篇常用命令gitadd和gitstage有什么区别怎么使用git连接到远程仓库github/gitlab/
码上有前·2024-02-15 06:13

python 线程池ThreadPoolExecutor

参考链接(https://www.codersrc.com/archives/6732
沧海二阳·2024-02-15 06:42

conan安装

这里以pip安装为例，python安装建议anaconda，下载地址：https://repo.anaconda.com/archive/Anaconda3-2021.11-Windows-x86_64
曳帆·2024-02-15 05:39

【docker 的常用命令——详细讲解】

docker的常用命令1.介绍2.基本管理命令3.文件和数据传输4.DockerCompose命令（用于多容器应用）1.介绍Docker是一个开源的应用容器引擎，它允许开发者打包他们的应用程序及依赖包到一个可移植的容器中
程序员不想YY啊·2024-02-15 04:46

Sqoop你用对了吗？

个人想法，有错请指出怎么让sqoop流程化1.首先创造配置表和任务表tb_configidjdbc_urluserpass_wordcolumnstablehive_tableis_incremental1jdbc
你值得拥有更好的12138·2024-02-15 03:43

linux系统管理教程pdf,Linux运维入门到高级全套系列PDF

Linux学习技巧初学者可以自己安装虚拟机，然后把Linux常用命令例如cd、ls、chmod、useradd、vi等等多练习几十遍，把自己敲打命令的熟练程度提升上来。
史文林·2024-02-15 02:42

Linux系统入门与实践：一篇详细的教程和指南【持续更新】

目录导航前言1.Linux介绍和发展2.Linux内核和发行版3.虚拟机安装Linux系统4.Linux桌面版和服务器版5.Linux的文件系统6.Linux常用命令7.在Windows安装WSL28.
郏帅北·2024-02-15 02:11

FFmpeg+x264编码qcif会出现花屏的问题

http://www.cppblog.com/tx7do/archive/2013/01/11
cyqyong·2024-02-15 02:59

Kibana启动问题

chrome-mac.zip时访问超时，日志如下[2022-09-05T11:57:55.901+08:00][WARN][plugins.screenshotting.chromium]Browserarchivefordarwin
qinghuazs·2024-02-15 01:19

HIVE优化场景七--数据倾斜--Join 倾斜

2)由于数据类型不一致，导致的转换问题，导致的数据倾斜场景说明：用户表中user_id字段为int，log表中user_id为既有string也有int的类型。当按照两个表的user_id进行join操作的时候，默认的hash操作会按照int类型的id进行分配，这样就会导致所有的string类型的id就被分到同一个reducer当中。解决方案：将INT类型id,转换为STRING类型的id.SEL
xuanxing123·2024-02-15 01:10
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他