hive云原生第4页

hivesql练习

源表:province,province_id,city,city_id,area,area_id甘肃省,11,张掖市,21,甘州区,31甘肃省,11,张掖市,21,山丹县,32甘肃省,11,张掖市,21,高台县,33甘肃省,11,兰州市,22,七里河,34甘肃省,11,兰州市,22,新区,35北京,12,北京,12,海淀区,36北京,12,北京,12,昌平区,37目标表:+------+----

小涛手记·2024-08-31 17:54

Hive SQL练习之影评案例

找的练习hive，内容非原创链接https://www.cnblogs.com/frankdeng/p/9309668.html一、建表，导入数据1、建表[root@masterhadoop]#hiveLogginginitializedusingconfigurationinjar

软件手·2024-08-31 17:23

Python使用pyhive库远程操作hive的配置和使用

请先安装好hive，林子雨老师的配置方法，该配置方法是可以配置成功的，请注意配置hive-site.xml文件的时候，里面添加的信息都是在标签里的尾部添加配置hive环境到hive安装的conf目录下，

玩家_名狱·2024-08-31 17:52

python利用pyhive 连接hive

1.下载需求包pipinstallsaslpipinstallthriftpipinstallthrift-saslpipinstallPyHive2.连接hive注意端口默认为10000frompyhiveimporthiveconn

Leonban·2024-08-31 16:50

python连接hive--Pyhive

Pyhive安装包pipinstallsaslpipinstallthriftpipinstallthrift-saslpipinstallPyHive#安装对应的包sasl可能会报错#下载sasl文件

Elvis_hui·2024-08-31 16:20

pyhton - PyHive

简介PyHive是一组PythonDB-API和SQLAlchemy接口，可用于Presto和Hive。

凌不了云·2024-08-31 16:19

Spark SQL 结构化数据处理流程及原理是什么？

SparkSQL可以使用现有的Hive元存储、SerDes和UDF。它可以使用JDBC/ODBC连接到现有的BI工具。有了SparkSQL，用户可以编写SQL风格的查询。

我想去吃ya·2024-08-31 16:18

Ubuntn安装Xfce桌面环境

原文：https://blog.c12th.cn/archives/11.html前言最近搞了台云服务器(2H2G)玩玩，其实一直想挂一些奇奇怪怪的东西到服务器？

c12th·2024-08-31 09:03

解决Butterfly主题图标不显示问题

文章目录原文：https://blog.c12th.cn/archives/4.html前言解决方法主题4.3.0及以上主题4.2.0及以上方法之一主题4.2.0以下方法一(不推荐)方法二(推荐)补充原文

c12th·2024-08-31 09:33

什么是DevOps？什么是DORA？

1.前言对于搞云原生应用的同学，对于DevOps和DORA应该都不陌生。但对于传统应用程序开发的同学，经常被DevOps,Microservice,CICD,DORA这些新颖的名词搞得晕头转向。

十年铸器·2024-08-31 09:56

halo主题开发环境搭建

halo主题开发环境搭建|LogDicthttps://www.logdict.com/archives/halozhu-ti-kai-fa-huan-jing-da-jian

该账号已被封禁丨·2024-08-31 06:41

tar命令解压报错“Error is not recoverable: exiting now”

tar命令解压报错：gzip:stdin:invalidcompresseddata--formatviolatedtar:UnexpectedEOFinarchivetar:UnexpectedEOFinarchivetar

Yana.com·2024-08-31 05:58

KubeSphere 宣布开源 Thanos 的企业级发行版 Whizard

Prometheus已经成为云原生监控领域事实上的标准，但Prometheus并没有解决企业用户对高可用、可扩展、可存储与查询海量监控数据、易运维等方面的需求。

KubeSphere 云原生·2024-08-31 04:49

Gulp入门个人总结

Gulp入门个人总结参考资料：http://www.ydcss.com/archives/18http://www.techug.com/gulphttp://www.browsersync.cn/一．

薰衣草smile·2024-08-31 02:45

日志服务之使用Nginx模式采集日志

活动期完成有机会参与100%中奖）：https://developer.aliyun.com/adc/series/activity/sls-1背景知识本场景主要涉及以下云产品和服务：●日志服务：日志服务SLS是云原生观测与分析平台

阿里云天池·2024-08-31 01:00

微服务中间件之Nacos-安装篇

Nacos（DynamicNamingandConfigurationService）是由阿里巴巴开发的一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。

java_heartLake·2024-08-31 01:59

常用ES查询DSL语句

1.针对hive表中jsonObject类型的String数据mapping中定义如下："esf_room":{"type":"text","fields":{"keyword":{"type":"keyword

攻城狮Kevin·2024-08-30 22:15

hive中的分区

文章目录Hive分区1.简介为什么要分区如何分区以及细节2.Hive分区的建立创建分区静态分区动态分区启动动态分区功能多分区单分区区别创建多分区插入分区查看分区数查看表结构Hive分区1.简介Hive分区的概念与传统关系型数据库分区不一样

百流·2024-08-30 16:07

linux网络流程分析（一）---网卡驱动

转载：https://www.cnblogs.com/gogly/archive/2012/06/10/2541573.html分析linux网络的书已经很多了，包括《追踪LinuxTCP/IP代码运行

wang603603·2024-08-30 15:55

关于vue2运行时filemanager-webpack-plugin报错isFile is undefind

/dist.zip'],archive:[{source:'./dist',destination:'./dist.zip'}]}})在对应的路径下建一个dist文件夹

又写了一天BUG·2024-08-30 12:34

sql-函数

SQL函数及报错问题合集一、sql函数1.日期函数（**Hive**）1.1日期减少函数:date_sub1.2日期增加函数：date_add1.3日期格式转化函数：date2datekey/datekey2date2

weixin_45925478·2024-08-30 11:03

Hive3：列注释、表注释等乱码解决方案

--在Hive的MySQL元数据库中执行usehive;1).修改字段注释字符集altertableCOLUMNS_V2modifycolumnCOMMENTvarchar(256)charactersetutf8

生产队队长·2024-08-30 08:09

常见的实时数仓方案

实时部分以消息队列的方式实时增量消费，一般以Flink+Kafka的组合实现，维度表存在关系型数据库或者HBase；离线部分一般采用T+1周期调度分析历史存量数据，每天凌晨产出，更新覆盖前一天的结果数据，计算引擎通常会选择Hive

北极冰雨·2024-08-30 05:27

hive中的数据同步到hbase

hive中的数据同步到hbase工作中遇到了这个工作，就是将hive中的数据同步到hbase中，然后java通过hbase相关的API来访问hbase中的数据。

流~星~雨·2024-08-29 21:31

HIVE 数据模型

type=hive集群状态管理：http://tdxy-bigdata-03:7180/cmf/home基于HDFS没有专门的数据

HFDYCYY·2024-08-29 19:47

Hive 数据模型切换后的数据验证方案

记录这样一个场景，cdp/dmp等等标签模型系统，会出现这样一种情况。标签系统一般属于ads集市层加工的模型数据，如果上游（数仓/业务）表进行了切换，比如我们项目最近上游从fdl/gdl切换到了dwd/dws，切换完毕后的数据一般都会出现问题，如何进行数据验证是一个需要好好思考的问题。首先，如果把切换后的结果表当成左表去匹配切换前的结果表，很容易出现因未验证语法不正确导致的数据验证问题，例如：切换

小菜菜1223·2024-08-29 19:16

云原生应用(7)之Docker容器数据持久化存储机制

一、Docker容器数据持久化存储介绍物理机或虚拟机数据持久化存储由于物理机或虚拟机本身就拥有大容量的磁盘，所以可以直接把数据存储在物理机或虚拟机本地文件系统中，亦或者也可以通过使用额外的存储系统（NFS、GlusterFS、Ceph等）来完成数据持久化存储。Docker容器数据持久化存储由于Docker容器是由容器镜像生成的，所以一般容器镜像中包含什么文件或目录，在容器启动后，我们依旧可以看到相

技术路上的苦行僧·2024-08-29 18:10

Mysql 查询数据库或数据表中的数据量以及数据大小_mysql 获取查询记录的数据大小

许多数据库的元数据都是存储在mysql中的，例如hive、startrockes，因此可以通过mysql中的“information_schema.TABLES”表来查询对应数据库或对应数据表的具体信息

m0_74932057·2024-08-29 17:02

Linux 属主属组设置和文件类型

我是公众号「想吃西红柿」「云原生运维实战派」作者，对云原生运维感兴趣，也保持时刻学习，后续会分享工作中用到的运维技术，在运维的路上得到支持和共同进步！

尘嫣慕曦·2024-08-29 15:50

Kylin的工作原理及使用分享操作指南

1.Kylin概述Kylin是一个开源项目，支持SQL查询，兼容与Hive和MapReduce等大数据技术的集成。

vvvae1234·2024-08-29 05:14

git打包某个分支的特定提交

假设你已经知道提交的哈希值是1234abcd#创建一个新分支指向特定提交gitbranchnew-branch1234abcd#或者创建一个标签gittagv1.01234abcd创建分支或标签后，使用gitarchive

每一天，每一步·2024-08-28 22:22

Java高级技术day75：Zookeeper与Dubbo

一、Zookeeper的介绍1.Zookeeper介绍：顾名思义zookeeper就是动物园管理员，他是用来管hadoop（大象）、Hive(蜜蜂)、pig(小猪)的管理员，ApacheHbase和ApacheSolr

开源oo柒·2024-08-28 20:54

【python】如何通过Python中的http.server搭建文件上传下载服务

《博客》：Python全栈，PyQt5和Tkinter桌面开发，小程序开发，人工智能，js逆向，App逆向，网络系统安全，数据分析，Django，fastapi，flask等框架，云原生K

景天科技苑·2024-08-28 18:55

Hive 分区表 & 数据加载

1.Hive表数据的导入方式1.1本地上传至hdfs命令：hdfsdfs-put[文件名][hdfs绝对路径]例如：测试文件test_001.txt内容如下在hdfs绝对路径：/user/hive/warehouse

Wu_Candy·2024-08-28 18:22

SparkSql

3、兼容Hive4、标准的数据连接（JDBC/ODBC）SQL优缺点优点：表达非常清晰，难度低、易学习。缺点：复杂的业务需

李思缘的大数据之路·2024-08-28 09:00

Kubernetes (K8s) 监控方案：Prometheus 实战指南

1.引言在当今云原生时代，Kubernetes(K8s)已成为容器编排的标准解决方案。然而，随着K8s集群规模和复杂性的增加，有效的监控变得至关重要。

ivwdcwso·2024-08-28 07:14

Ubuntu下部署Hadoop集群+Hive（三）

Hive部署准备环境apache-hive-4.0.0-bin.tar.gz、mysql-connector-j-8.1.0.jar如果是离线安装的话，使用mysql-8.0.34-1.el7.x86_

岩屿·2024-08-28 01:07

人类图学习之优惠政策

请认准人类图官网IHDS~https://www.ihdschool.com/Jovian~https://www.jovianarchive.com20%折扣，即8折IHDS和Jovian两大官网上针对两种人群有同样的

人类图_活出独一无二的自己·2024-08-27 20:02

【云原生】Kubernetes中常见的Pod故障排查定位与解决方案

《博客》：Python全栈，前后端开发，小程序开发，人工智能，js逆向，App逆向，网络系统安全，数据分析，Django，fastapi，flask等框架，云原生k8s，linux，she

景天科技苑·2024-08-27 20:00

python import settings报错的解决

首先是按上一篇文章把pip更新了环境变量配好了然后importsettings还是不行…最后发现原因是pycharm下的文件夹是PythonProject再里面是Archive文件夹，再往里面才是我运行的文件和

yuan_yuan_z·2024-08-27 19:24

在亚马逊云科技上搭建云原生生成式AI教育学习平台

本次介绍的是如何利用亚马逊云科技大模型托管服务AmazonBedrock和云原生容器管理服务，将生成式AI和亚马逊Titan大模型应用到教育和学习场景，利用Titan大模型的向量化、文字和图片生成能力构建云端

佛州小李哥·2024-08-27 18:20

想提神，喝中药，咖啡可可没用的

想提神，喝中药，咖啡可可没用的rtpostedon2010-08-1621:24lexus阅读(...)评论(...)编辑收藏转载于:https://www.cnblogs.com/lexus/archive

a13393665983·2024-08-27 15:00

云原生周刊：KubeSphere 宣布开源 Thanos 的企业级发行版 Whizard

KubeSphere 云原生·2024-08-27 14:59

Hive SQL

一、基本数据类型tinyint1byte有符号整数smallint2byte有符号整数int4byte有符号整数bigint8byte有符号整数boolean布尔类型，true或者falsefloat单精度浮点数double双精度浮点数decimal十进制精准数字类型decimal(16,2)varchar字符序列，需指定最大长度，最大长度的范围是[1,65535]varchar(32)strin

diluosixu·2024-08-27 13:19

CDH 之 hive 数据迁移

当你想切换了集群想把hive迁移至新集群，两个集群之间又互不相通，一个最简单快捷的方法，就是批量导出元数据信息，同时把数据文件下载上传至新服务器的数据文件存放目录下1.导出元数据信息#database即是数据库名称

啊这·2024-08-27 13:18

Hive 数据迁移与备份

迁移类型同时迁移表及其数据（使用import和export）分步迁移表和数据迁移表（showcreatetable）迁移数据关联表和数据（msckrepair）迁移步骤将表和数据从Hive导出到HDFS

linzeyu·2024-08-27 13:17

Spark-第六周

CSDN博客摸鱼大数据——SparkSQL——SparkSQL的运行机制-CSDN博客2.熟练使用thriftserver服务thriftserver和beeline的使用，代码连接server（连接hive

fightingD&W·2024-08-27 12:13

unity学习之编辑器拓展 20190722

https://www.xuanyusong.com/archives/category/unity/unity3deditor-师傅给的教程总体来说，这个教程还是挺好的，说的很全面，但是这个教程使用的

那年白马啸西风·2024-08-27 01:05

javaweb-数据库

DataBaseManagementSystem，简称DBMS）MySQL官网：MySQL::DeveloperZone安装官网下载地址：MySQL::DownloadMySQLCommunityServer(ArchivedVersions

kussmcx·2024-08-26 21:37

基于Zookeeper搭建Kafka高可用集群

官方下载地址：https://archive.apache.org/dist/zookeeper/#下载wgethttps://archi

数字游牧人0v0·2024-08-26 16:58

推荐频道

hive云原生