hive云原生

搭建Hadoop与Hive环境

当搭建Hadoop与Hive环境时，以下是每个步骤的详细操作说明：1.安装并配置CentOS7操作系统：-下载CentOS7ISO镜像文件，并通过虚拟机或物理机安装CentOS7操作系统。
达达玲玲·2025-01-28 05:28

hive视图与物化视图使用详解

Hive视图和物化视图都是在数据仓库中处理数据的概念。下面对Hive视图和物化视图进行详细解释：Hive视图：1.Hive视图是一个逻辑表，它是对基础表的查询结果的引用，被视为一个新表。
达达玲玲·2025-01-28 05:58

Prometheus学习笔记

它能够实时地收集、存储和查询时间序列数据，广泛用于监控云原生应用、微服务架构和容器化环境（如Kubernetes）。
柠檬编程工作室·2025-01-28 02:32

极氪汽车 APP 系统云原生架构转型实践

前言新能源汽车已经成为我国汽车市场再次崛起的关键支柱，随着新能源汽车市场的快速发展，不同类型的品牌造车厂商呈现出百花齐放的态势。极氪汽车是吉利控股集团旗下高端纯电汽车新品牌，2021年4月极氪发布首款高端智能电动车型–极氪001，大获市场好评，截至2022年12月，001车型累计交付量突破7万台。连续3个月问鼎自主品牌30万以上豪华纯电车型销量冠军。极氪坚持不止于车的服务体验，除了为客户提供卓越产
阿里巴巴中间件·2025-01-27 22:03

【云原生】【适用小白】SpringCloud Alibaba开源Nacos切换到MSE Nacos

参考阿里云官方文档：NacosClient访问鉴权非常简单，我这里代码部分只更换了2个配置字段就实现了！！！前提条件微服务架构：springcloudalibaba，框架版本升级至2.2.1.RELEASE及以上版本开启公网：本地代码注册到阿里云MSENacos是需要MSENacos开启公网弹性IP的一、选定认证方式凭证提供者初始化方式适用场景是否需要提供前置的AK或****STSToken底层实
登云时刻·2025-01-27 21:56

深度学习探索：ChatGPT数据分析精髓 & 梯度下降优化方法深度剖析

在移动端开发、鸿蒙开发、物联网、嵌入式、云原生、开源等领域有深厚造诣。图书作者：《ESP32-C3物联网工程开发实战》图书作者：《SwiftUI入门，进阶与实战》超级个体：CO
网罗开发·2025-01-27 20:22

spark2如何集成到cdh里

spark1.6性能有多大差别，官方文档里写着可以集成，但是自己怎么搞都不行，折磨了3天的时间，目前终于把spark2集成到集群里了我安装的是最新版本的下载spark2安装包wgethttp://archive.cloudera.com
蘑菇丁·2025-01-27 16:55

execute sql error: HdfsOrcScanner::do_open failed. reason = Failed to parse the postscript from file

目录一、背景概述二、定位原因三、解决方法一、背景概述通过hivecatalog同步hive表数据到starrocks数据库，结果报错执行语句：insertintosr_db.sr_table_nameselect
chimchim66·2025-01-27 11:52

大数据StarRocks(六) ：Catalog_starroccks支持oracle外部表了吗(1)

外部数据：指保存在外部数据源（如ApacheHive™、ApacheIceberg、ApacheHudi、DeltaLake、JDBC）中的数据。2.Catalog当前StarRocks提供两
2401_84181975·2025-01-27 11:51

一站式云原生支持，Alibaba Cloud Linux性能有多强？

随着云计算技术的高速发展，企业对操作系统的需求不再局限于传统的服务器环境，而是更加关注与云原生架构的兼容性、性能优化以及系统的可扩展性。
Anna_Tong·2025-01-27 08:01

RocketMQ优势剖析-集成云原生环境

目录弹性和可扩展性Serverless架构支持容器化和Kubernetes支持多协议支持持久化和可靠性分布式事务支持社区和生态系统结论RocketMQ在集成云原生环境方面的优势主要体现在其设计的灵活性、
Lin_Miao_09·2025-01-27 06:21

Linux ar命令详解

以下是ar命令的详细解释，包括常用选项和示例：1、基本语法ar[options]archive-filefile...常用选项r：添加或替换文件到归档文件中。如果归档文件不存在，则创建一个新的归档文
写代码的猫_531·2025-01-26 23:29

Flink访问Kerberos环境下的Hive

目录测试环境工程搭建示例代码及运行总结本文主要介绍如何使用Flink访问Kerberos环境下的Hive。
我若成风zhb·2025-01-26 18:50

Tesla V100驱动安装

确认操作系统kernel版本，参考链接：https://docs.nvidia.com/cuda/archive/12.2.0/cuda-installation-guide-linux/index.html
郭宝才·2025-01-26 17:17

hive窗口函数和hive基础使用

7.270.连接客户端beeline-ujdbc:hive2://localhost:100001.建库并使用createdatabasexxxusexxx2.建表createtablexxxcreateexternaltableifnotexists
醉与浮·2025-01-26 13:45

Hive 窗口函数

文章目录一、常见聚合操作1.sum、avg、min、max二、排序相关的窗口函数1.row_number2.rank3.dense_rank三、其它窗口函数1.NTILE2.cume_dist3.percent_rank4.LAG5.LEAD6.FIRST_VALUE7.LAST_VALUE四、增强聚合操作1.GROUPINGSETS2.CUBE3.ROLLUP4.GROUPING__ID有ORD
b1gx·2025-01-26 12:12

我从 2024 年的 LLM 应用开发实践中学到了什么？Part 1

本文作者凭借近十年的Web应用和云原生开发经验，以及2024年深度参与LLM应用开发的第一手经历，为我们揭示了一个重要发现：成
·2025-01-26 12:58

Apache Hive 聚合函数与 OVER 窗口函数：从基础到高级应用

在大数据时代，ApacheHive是处理和分析海量数据的强大工具。Hive提供了丰富的聚合函数和强大的OVER窗口函数，能够帮助我们高效地进行数据分析。
大鳥·2025-01-26 11:04

mysql的单表数据导入到hive数据库中

1、将mysql的数据导出借助dbeaver工具，将单表数据table1格式导出为csv文件2、将csv的后缀名手动改为txt后缀，为了让每行的的字段是以，分隔3、将得到的txt文件上传到hdfs文件系统中4、目标机创建和table1一样的表结构的表，创建过程中要加上这几句ROWFORMATDELIMITEDFIELDSTERMINATEDBY','STOREDASTEXTFILE;如：CREAT
熏陶·2025-01-26 05:43

arm-linux平台、rk3288 SDL移植

交叉编译器，这里使用的是gcc-linaro-6.3.12、linux交叉编译环境，这里使用的是Ubuntu20.043、sdl2源码https://github.com/libsdl-org/SDL/archive
雨中来客·2025-01-26 05:43

Sqoop数据导出 第3关：Hive数据导出至MySQL中

为了完成本关任务，你需要掌握：Hive数据导出至MySQL中。
是草莓熊吖·2025-01-26 05:09

把hive中的数据导出到mysql

1.hive中的表的字段和类型必须和mysql表中的字段和类型一样不如hive中的stnamevarchar（50），那么mysql中的字段和类型也必须为stnamestring2.sqoopexport
樱浅沐冰·2025-01-26 05:39

Hive数据仓库中的数据导出到MySQL的数据表不成功

可能的原因：(1)没有下载flume和sqoop(2)权限问题：因为MySQL数据库拒绝了root用户从hadoop3主机的连接请求，root用户没有从hadoop3主机进行连接的权限解决：通过MySQL的授权命令来授予权限mysql>GRANTALLPRIVILEGESONsqoop_weblog.*TO'root'@'hadoop3'IDENTIFIEDBY'2020';QueryOK,0ro
sin2201·2025-01-26 04:01

MySQL 拆分字符串函数Split

MYSQL目前没有Hive或者Java。
大乔乔布斯·2025-01-26 02:15

速看：华为云云原生实践与应用大阅兵

出品|CSDN云原生2022年6月9日，CSDN云原生系列在线峰会第8期“华为云云原生实践与应用峰会”盛大举行，本期峰会出品人、中信银行技术专家、华为云MVP马超携手华为云数字化平台技术专家高红霞、边缘云创新实验室主任工程师郑子木
CSDN云原生·2025-01-25 23:16

华为云云原生王者之路集训营（黄金-第五章)

华为云云原生王者之路集训营（黄金-第五章)1.11.1Kubernetes工作负载(Workload)介绍工作负载是在Kubernetes上运行的应用程序。
※网络笨猪※·2025-01-25 23:16

c# list排序的三种实现方式

本文转载自：https://www.cnblogs.com/bradwarden/archive/2012/06/19/2554854.html作者：bradwarden转载请注明该声明。
CHCH998·2025-01-25 17:00

不同hive集群中基于表的数据一致性比对

前阵子博主遇到一个需求，因对hadoop集群进行数据迁移，数据迁移完毕后进行两个hive库的数据一致性的比对，不仅对源表数据进行比对，而且要同时使用两个集群加工相同数据，对加工后的数据进行数据一致性比对
AA赵师傅·2025-01-25 07:19

详细介绍：云原生技术细节（关键组成部分、优势和挑战、常用云原生工具）

目录前言1、云原生架构的关键组成部分1.1、微服务架构（MicroservicesArchitecture）1.2、容器化（Containerization）1.3、容器编排（ContainerOrchestration
周杰伦_Jay·2025-01-25 07:48

Hadoop、Hive、Hbase集群间的数据迁移

集群间拷贝数据：迁移之前需要把两个集群的所有节点都互通/etc/hosts文件（重要，包括各个数据节点）两个集群版本不相同hadoopdistcphftp://192.168.57.73:50070/hive3
这个操蛋的人生！！！·2025-01-25 07:18

Hive面试题汇总

Hive定义Hive是建立在Hadoop上的数据仓库基础构架。可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。
大数据侠客·2025-01-25 07:18

Hive之数据迁移方案(实测)

文章目录Hive的迁移涉及两个技术点：1.仅迁移元数据2.元数据及Hive数据全量迁移2.1全表迁移2.1.1旧集群2.1.2新集群2.2仅部分分区迁移（主要步骤）2.1.1旧集群2.1.2新集群2.3beeline
南风知我意丿·2025-01-25 06:11

【原创】运维基础之OpenResty(Nginx+Lua)+Kafka

使用docker部署1下载#wgethttps://github.com/doujiang24/lua-resty-kafka/archive/v0.06.tar.gz#tarxvfv0.06.tar.gz2
weixin_30293079·2025-01-25 04:29

《Go底层原理与工程化实践》发布啦！

另外，原生体系中的Kubernetes、Docker等开源项目就是基于Go语言开发的，想要深入研究云原生技术，就必须精通Go语言。
·2025-01-24 20:44

云原生架构需遵循七个原则

作为一种架构模式，云原生架构通过若干原则来对应用架构进行核心控制。这些原则可以帮助技术主管和架构师在进行技术选型时更加高效、准确，下面将展开具体介绍。
OneAuth·2025-01-24 19:25

【云原生应用与Docker】如何在Centos7安装docker及其compose？

随着云计算的深入发展，越来越多的企业开始采用云原生应用来优化他们的IT架构，提升业务敏捷性和效率。云原生应用是一种针对云环境进行优化，以容器化、微服务化、动态编排等为特点的应用形态。
奇墨 ITQM·2025-01-24 18:46

C# 与.NET 日志变革：JSON 让程序“开口说清话”

然而，随着软件系统规模的不断扩大，架构日益复杂，尤其是在微服务、大数据分析以及云原生应用
步、步、为营·2025-01-24 15:46

Hive架构及搭建方式

Hive架构及搭建方式[TOC]前言本文档基于hive3.1.2编写hive的基础知识基本架构整个hive由hiveserver2和hive客户端组成hive客户端有三种，beeline、使用jdbc链接
西北偏北up·2025-01-24 15:14

产品的系统架构设计优化和演进

2.1系统架构设计原则2.2常用架构模式2.3架构设计视图3.系统架构优化方法3.1性能优化3.2可扩展性优化3.3可靠性优化3.4可维护性优化4.系统架构演进策略4.1渐进式演进4.2平台化演进4.3云原生演进
AI天才研究院·2025-01-24 14:43

hive数据类型

数字类型TINYINT(1字节整数)SMALLINT(2字节整数)INT/INTEGER(4字节整数)BIGINT(8字节整数)FLOAT(4字节浮点数)DOUBLE(8字节双精度浮点数)示例：createtablet_test(astring,bint,cbigint,dfloat,edouble,ftinyint,gsmallint)时间类型TIMESTAMP(时间戳)(包含年月日时分秒毫秒的
qzWsong·2025-01-24 14:11

hive数据操作，导入导出

数据导入导出将数据文件导入hive的表方式1：导入数据的一种方式：手动用hdfs命令，将文件放入表目录；方式2：在hive的交互式shell中用hive命令来导入本地数据到表目录hive>loaddatalocalinpath
qzWsong·2025-01-24 14:10

TiDB架构分析以及总结

1TiDB1.1产品简介TiDB是PingCAP公司的自主设计、研发开源的分布式开源数据库，是一款支持在线处理与在线分析处理的融合性分布式数据库产品，具备水平扩容，金融级高可用、实时HTAP、云原生的分布式数据库
微 亻言·2025-01-24 13:35

【大数据入门核心技术-Hive】（十六）hive表加载csv格式数据或者json格式数据

一、环境准备hive安装部署参考：【大数据入门核心技术-Hive】（三）Hive3.1.2非高可用集群搭建【大数据入门核心技术-Hive】（四）Hive3.1.2高可用集群搭建二、hive加载Json格式数据
forest_long·2025-01-24 12:27

SkyWalking

它支持多种语言，包括Java、Go、Node.js、Python等，能够提供强大的分布式追踪、日志分析、性能监控等功能，是微服务和云原生架构中重要的性能管理工具之一。
小馋喵知识杂货铺·2025-01-24 11:19

在KubeFATE中定制化部署联邦学习组件的深入分析

题图摄于国家大剧院（本文作者系VMware中国研发云原生实验室架构师，联邦学习开源项目KubeFATE/FATE-Operator维护者。）
亨利笔记·2025-01-24 10:42

【分布式日志篇】从工具选型到实战部署：全面解析日志采集与管理路径

在移动端开发、鸿蒙开发、物联网、嵌入式、云原生、开源等领域有深厚造诣。图书作者：《ESP32-C3物联网工程开发实战》图书作者：《SwiftUI入门，进阶与实战》超级个体：CO
网罗开发·2025-01-24 09:32

配置管理工具和k8s功能重叠部分的优势比较

Kubernetes（K8s）在这些方面具有哪些独特的优势呢，尤其是在云原生环境和大规模分布式系统中。
大囚长·2025-01-24 01:30

信创、湖仓一体化、AI+DB，2024年数据库&湖仓发展总结与展望

作者：吴炳锡时光荏苒，转眼间2025年已然来临，这又是我从传统OLTP数据库领域转向云原生湖仓Databend的第三个年头，这段转变恰如一场快速的旅程，让我深感这一年如飞箭般迅速。
·2025-01-23 22:05

【AI日志分析】基于机器学习的异常检测：告别传统规则的智能进阶

在移动端开发、鸿蒙开发、物联网、嵌入式、云原生、开源等领域有深厚造诣。图书作者：《ESP32-C3物联网工程开发实战》图书作者：《SwiftUI入门，进阶与实战》超级个体：CO
网罗开发·2025-01-23 19:14

大腾智能CAD：基于云原生架构，融合AI技术的高效三维设计解决方案

大腾智能公司紧跟时代步伐，推出了一款完全基于云原生架构的国产三维CAD设计软件，它集三维建模
大腾智能·2025-01-23 19:13
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他