Hive常用命令

Anaconda 配置镜像源

Anaconda安装包可以到https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/下载。

猿代码_xiao·2025-02-20 06:37

linux安装python开发环境

安装Anaconda下载Anacondawgethttps://repo.anaconda.com/archive/Anaconda3-5.3.0-Linux-x86_64.sh安装AnacondabashAnaconda3

燃冰结晶·2025-02-20 05:30

mongodb 常用命令

命令行连接mongodb：mongosh“mongodb+srv://host”--apiVersion1--usernamexxxxx查看有哪些库：showdatabases切换到操作库：usename必须切换到指定数据库才可以进行下面的增删改查操作查看表：showcollections查询所有数据:db.collectionName.find()查询表中一条数据：db.collectionNa

打瞌睡的小张·2025-02-20 04:58

MongoDB：掌握核心常用命令语句，精通数据操作

本文将详细介绍MongoDB的常用命令，帮助你更好地理解和掌握MongoDB的数据操作。一、连接与断开数据库要开始使用MongoDB，首先需要连接到数据库。在命令行中输入以下命令：mong

泰山AI·2025-02-20 04:27

第 4-2 课：MongoDB 常用命令

前言上节课我们已经成功搭建起来MongoDB服务器，本节课我们来介绍MongoDB数据库的常用命令。

Java大联盟·2025-02-20 04:53

Linux sftp 使用详解

常用命令sftpuser@host：通过SFTP连接到远程服务器ls：列出当前远程目录中的文件cd：更改远程目录pwd：显示当前远程目录lcd：更改本地目录lpwd：显示当前本地目录put：将文件从本

·2025-02-20 04:28

【Linux】FTP文件服务器

文件服务器一、FTP介绍二、应用场景三、FTP的权限四、FTP的工作模式五、FTP安装部署六、FTP配置文件6.1）相关文件6.2）主配文件详解七、FTP客户端访问7.1）文本界面登陆7.2）FTP客户端常用命令八

FixPng·2025-02-19 18:59

Hadoop管理工具dfsadmin和fsck的使用

常用命令查看HDFS状态hdfsdfsadmin-report显示HDFS集群的总体状态，包括数据节点（DataNode）的状态、存储容

脚本无敌·2025-02-19 16:46

实现MySQL数据全量迁移至Hive的简单脚本

1、主要思路：编写脚本执行建表语句、sqoop命令1.1、编写建表语句脚本思路：在虚拟机下执行hive-f/脚本路径即可执行hql脚本1.2、编写shell脚本脚本内容为分为两部分执行hql建表语句脚本

xiaoxaoyu·2025-02-19 16:11

Hive的动态分区与静态分区（区别及详解）

静态分区与动态分区的区别：1、静态分区2、动态分区静态分区与动态分区的区别：静态分区是先把分区表创好，然后手动把数据导入到对应的分区里面去。静态分区实在编译期间指定分区名。静态分区支持load、insert两种插入方式。静态分区是用于分区少，分区名可以明确的数据。动态分区是有一份数据集（2015-2022年的），按照数据集的字段给动态的生成分区。动态分区实在SQL执行的时候确定的。动态分区前需打开

东南枝上的大雄·2025-02-19 16:41

hive—常用的函数整理

1、size(split(...))函数用于计算分割后字符串数组的长度1）实例：由客户编号列表计算客户编号个数--数据准备withtmp_test01as(select'tag074445270'tag_id,'202501'busi_mon,'012399931003,012399931000'index_valunionallselect'tag074445271'tag_id,'202501

风子~·2025-02-19 15:08

Hive 分区详解

在Hive中处理数据时，当处理的一张表的数据量过大的时候，每次查询都是遍历整张表，显然对于计算机来说，是负担比较重的。

mm_ren·2025-02-19 15:36

Hive的动态分区的原理

Hive动态分区原理详解1.什么是Hive动态分区？在Hive中，分区（Partition）是对表数据的一种划分方式，类似于关系型数据库中的分区表。

肥猪猪爸·2025-02-19 15:01

hive全量迁移脚本

/bin/bash#场景：数据在同一库下，并且hive是内部表（前缀的hdfs地址是相同的）#1.读取一个文件，获取表名#echo"时间$dt_jian_2-----------------------

我要用代码向我喜欢的女孩表白·2025-02-19 15:29

笔记：DataSphere Studio安装部署流程

一、标准版部署标准版：有一定的安装难度，体现在Hadoop、Hive和Spark版本不同时，可能需要重新编译，可能会出现包冲突问题。适合于试用和生产使用，2~3小时即可部署起来。

右边com·2025-02-19 13:15

HIVE- SPARK

日常记录备忘Hive修改字段类型之后（varchar->string）Hive可以查到数据，Presto查询报错;分区字段数据类型和表结构字段类型不一样；spark-sql分区表和非分区表兼容问题，不能关联可以建临时表把分区数据导入

流川枫_·2025-02-19 13:14

Hive的ReduceJoin/MapJoin/SMBJoin

Hive中就是把Map，Reduce的Join拿过来，通过SQL来表示。

for your wish·2025-02-19 12:40

hive-site.xml 配置总结

在Hive安装后，hive主要的配置文件为conf中hive-site.xml那该文件中那么多的配置选项都是什么含义呢。

hxsln11·2025-02-19 12:07

小白也能安装：Ubuntu20.04 安装 RabbitMQ

写篇记一记安装基本依赖项更新源sudoapt-getupdate-y下载签名密钥和软件包所需的先决条件sudoapt-getinstallcurlgnupgdebian-keyringdebian-archive-keyring-y

Valishment·2025-02-19 06:22

Git 深度解析 —— 从基础到进阶

目录1.Git基础概念1.1版本控制(VersionControl)1.2分布式版本控制(DistributedVersionControl)1.3核心概念1.4Git工作流程2.Git常用命令2.1初始化仓库

Exhausted、·2025-02-19 01:34

ib网络状态探测

常用命令ibstat功能：显示HCA的基本状态信息，包括设备状态、端口状态、链路速度等。用法：ibstat输出：包括HCA的名称、固件版本、端口状态（如PORT_ACTIVE）、最大和活动MTU等。

大隐隐于野·2025-02-19 00:29

Ubuntu 安装 docker 配置环境及其常用命令

Docker安装与配置指南本文介绍如何在Ubuntu系统上安装Docker，解决权限问题，配置DockerCompose，代理端口转发，容器内部代理问题等并进行相关的优化设置。参考官方文档：Docker官方安装指南注意：本教程的部分命令需ubuntu系统可科学上网一、安装Docker1.卸载旧版本在安装新版Docker之前，建议先卸载旧版本以避免潜在的冲突。执行以下命令卸载旧版本的Docker：s

自学AI的鲨鱼儿·2025-02-18 23:09

Python 算法交易秘籍（五）

原文：zh.annas-archive.org/md5/010eca9c9f84c67fe4f8eb1d9bd1d316译者：飞龙协议：CCBY-NC-SA4.0第十一章：算法交易-实际交易现在我们已经建立了各种算法交易策略

绝不原创的飞龙·2025-02-18 22:33

Linux：Supervisor进程管理

2.1supervisord2.2supervisorctl2.3WebServer三、安装Supervisor3.1安装要求3.2安装方式3.3修改WebServer端口（可选）3.4启动服务四、Supervisor常用命令

m0_37559973·2025-02-18 10:17

Hive中文乱码解决方法

Hive中文乱码解决方法一、Hive中文乱码原因二、Hive中文乱码解决方法三、修改hive配置文件四、再次查看表信息，中文注释正常一、Hive中文乱码原因hive的元数据是由mysql管理的，mysql

快乐骑行^_^·2025-02-18 08:57

docker常用命令

sudodockercp1.pyh6:/test#把当前路径下的1.py复制进dockerh6的test目录之下sudodockerpullubuntu:20.04#将ubuntu：20.04docker镜像从仓库pull到本地dockerimages#查看本地镜像dockerrun-itd--nameh1ready2-h#运行容器ubuntu-test--命名的容器名字，ubuntu：20.04

慢一点会很快·2025-02-18 03:39

hive建表语句增加字段、分区基础操作

目录hive建表内部分区表外部分区表表结构复制：hive表删除hive表重命名表修改操作增加分区修改分区删除分区新增表字段hive建表IFNOTEXISTS:表不存在才会创建分隔符：field.delim

节点。csn·2025-02-17 21:03

Hive JOIN过滤条件位置玄学：ON vs WHERE的量子纠缠

HiveJOIN过滤条件位置玄学：ONvsWHERE的量子纠缠作为数据工程师，HiveJOIN就像吃火锅选蘸料——放错位置味道全变！

数据大包哥·2025-02-17 18:02

mysql 原理_mysql底层原理

Archive：用于存储和检索大量很少引用的历史、存档、安全审计信息，不支持事务。mysql架构局部性原理：读取磁盘的数据，它附近的数

高傲的大白杨·2025-02-17 16:43

gbase导入sql文件_GBase数据库——常用命令

1数据库操作与维护1.1数据库启停[root@OMMB-66-V10-001~]#servicegcwarestopStoppingGCMonitsuccess!SignalingGCRECOVER(gcrecover)toterminate:[OK]Waitingforgcrecoverservicestounload:.....[OK]SignalingGCSYNC(gc_sync_serve

weixin_39706561·2025-02-17 12:12

shell脚本定时备份mysql数据库

系列文章目录1.mysqldump常用命令语法2.编写命令3.将命令写入shell脚本4.写入定时任务示例系统:centos7mysql版本：5.7一、mysqldump命令全量备份（数据+结构）:mysqldump-uroot-p123456

小爱是金毛o·2025-02-17 11:31

脚大江山稳·2025-02-17 07:53

python编译成dll文件_Python 调用DLL文件

http://blog.csdn.net/magictong/archive/2008/10/14/3075478.aspx貌似原文的网页服务器有问题，总是load不全，所以备个份：Python调用windows

weixin_39682511·2025-02-17 02:18

《Python编程轻松进阶》干货整理

文章目录《Python编程轻松进阶》干货整理第一章处理错误和寻求帮助1.1如何查看模块版本第二章环境设置和命令行2.1使用pathlib库可以让Python脚本跨平台兼容2.2Path常用命令2.3命令行参数

KLZZ66·2025-02-16 23:58

大数据之-hdfs+hive+hbase+kudu+presto集群(6节点)

prestohttps://prestosql.io/docs/current/index.htmlkudurpm包地址https://github.com/MartinWeindel/kudu-rpm/releaseshivehttp

管哥的运维私房菜·2025-02-16 22:50

高可用（HA）架构

(HA)解决方案http://zhuanlan.51cto.com/art/201612/524201.htm互联网架构“高可用”http://www.blogjava.net/ivanwan/archive

weixin_34344403·2025-02-16 17:41

go hive skynet_MMORPG游戏服务器技术选型参考-Go语言中文社区

游戏服务器一般追求稳定和效率，所以偏向于保守，使用的技术手段也是以已经过验证、开发人员最熟悉、能HOLD为主要前提。1、典型按场景分服设计开发语言：c++数据库：mysql架构：多个网关：维持与玩家间的SOCKET连接，可处理广播、断线重连等逻辑。一个或多个账号登陆验证服务器：处理登陆、排队等逻辑。多个场景服务器：处理在本地图上能解决的逻辑，如：打怪、玩家间战斗、接任务、完成任务等各种不需要跨地图

weixin_39908948·2025-02-16 15:01

Linux安装Anaconda、Miniconda

Anaconda下载：https://repo.anaconda.com/archive/MinicondaDocument：https://docs.conda.io/projects/miniconda

让我安静会·2025-02-16 14:19

hive spark读取hive hbase外表报错分析和解决

问题现象使用Sparkshell操作hive关联Hbase的外表导致报错；hive使用tez引擎操作关联Hbase的外表时报错。

spring208208·2025-02-16 07:21

常用的Dos命令

打开CMDWindows键+R打开运行窗口输入cmd点击回车即可打开常用命令1.盘符切换：磁盘名+英文冒号,按回车键例：D:E:F:2.查看当前目录下的文件输入dir按回车键3.切换目录cd/d+磁盘名

嘵奇·2025-02-16 06:19

【Python】解决PyTorch报错：PytorchStreamReader failed reading zip archive: failed finding central的解决方案

在使用PyTorch时，遇到“PytorchStreamReaderfailedreadingziparchive:failedfindingcentral”错误通常是由于损坏的模型文件或不兼容的文件版本导致的

I'mAlex·2025-02-16 03:27

[linux专题]CMakeLists 使用案例详解

目录1.为什么CMake2.案例使用说明2.1简单文件编译2.2多文件多目录编译2.3进阶使用3.CMake常用语法3.1常用模板3.2常用命令1.为什么CMakecmake可用于跨平台、开源的构建系统

AgingMoon·2025-02-16 01:12

解释归档和非归档模式之间的不同和他们的各自的优缺点？思维导图代码示例（java 架构)

归档模式（ArchiveMode）和非归档模式（NoArchiveMode）是数据库管理系统中两种不同的日志记录方式，主要用于控制如何处理重做日志文件。

用心去追梦·2025-02-16 01:41

windows 安装nvidaia驱动和cuda

drivers/lookup/这里查出来的都是最高支持什么版本的cuda安装时候都默认精简就行官网下载所需版本的cuda包https://developer.nvidia.com/cuda-toolkit-archive

njl_0114·2025-02-15 14:14

git常用命令

gitclonehttp:www.git.com.cn........克隆git项目gitbranch查看分支gitbranch-r查看远程分支gitpushorigin--delete分支名删除远程分支tmpgitcheckout切换分支gitcheckout-b切换并创建分支gitcheckout-b分支名origin/分支名(如果远程分支已存在最好用此命令，在创建分支时会把远程分支最新代码一

来吧来吧一起研究·2025-02-15 11:55

记一次hivemetastore启动报错

1，启动hivemetastore后报错日志2，排查lib下的mysql的驱动也在，这里和mysql的驱动大小一样3，把hive-site.xml中无关的配置都删掉，重启metastore还是报错4，最后排查

不吃饭的猪·2025-02-15 09:37

MongoDB笔记02-MongoDB基本常用命令

文章目录一、前言二、数据库操作2.1选择和创建数据库2.2数据库的删除3集合操作3.1集合的显式创建3.2集合的隐式创建3.3集合的删除四、文档基本CRUD4.1文档的插入4.1.1单个文档插入4.1.2批量插入4.2文档的基本查询4.2.1查询所有4.2.2投影查询（ProjectionQuery）：4.3文档的更新4.3.1覆盖的修改4.3.2局部修改4.3.3批量的修改4.3.4列值增长的修

齐飞·2025-02-15 09:06

Hive服务启动之 metastore配置和 hiveserver2

Hive服务启动之metastore服务配置和hiveserver2 配置hive的时候都需要配置hive-site.xml，配置过程中可以选择hive直连或者使用metastore服务间接连接，那么他们之间有什么区别呢

龍浮影·2025-02-15 08:33

MongoDB快速入门（MongoDB简介、MongoDB的应用场景、MongoDB中的基本概念、MongoDB的数据类型、MongoDB的安装与部署、MongoDB的常用命令、MongoDB的索引）

特殊数据类型4.3BSON数据类型5.MongoDB的安装与部署5.1Windows环境5.2Linux环境6.开启MongoDB的安全认证6.1Windows环境6.2Linux环境7.MongoDB的常用命令

聂可以·2025-02-15 08:32

推荐频道