hive云原生

Hive调优策略

Hive调优策略Hive作为大数据领域常用的数据仓库组件，在设计和开发阶段需要注意效率。
奋斗的蛐蛐·2024-01-26 23:24

服务器Ubuntu 22.04 64位安装 MySQL5.7

我们新建一个文件夹，路径/usr/local/mysql这里选择下载5.7.29的ubuntu版本注意是amd64不是arm64，或者执行下面命令wgethttps://downloads.mysql.com/archives
于双瑜·2024-01-26 23:55

记录Ubuntu22.04安装Mysql5.7.42

一：mysql安装与下载本次安装的版本是5.7.42下载地址：MySQL::DownloadMySQLCommunityServer(ArchivedVersions)1.选择对应的版本和系统，点击下载
tingyu_g·2024-01-26 23:21

Ubuntu22.04执行sudo apt-get update时报错：sh: 1: /usr/lib/cnf-update-db: not found

报错如下，错误原因使用的sources-list配置和系统版本不匹配$sudoapt-getupdate获取:16http://us.archive.ubuntu.com/ubuntujammy-updates
FakeOccupational·2024-01-26 23:20

MySQL技术探究（1）「索引技术」体验前所未有的技术探险，看穿索引的本质和技术体系（上篇）

数据库类型OLAP：联机分析处理----对海量历史数据进行分析，产生决策性的策略----数据仓库—HiveOLTP：联机事务处理----要求很短时效内返回对应的结果----数据库—关系型
洛神灬殇·2024-01-26 22:26

多云与混合云场景下的数据同步方案-KAFKA

这里涉及到新开发的业务系统的主动上云（由于是采用云原生技术栈新开发的业务系统，其上云相对顺畅些），也包括历史遗留系统的迁移上云（
明哥的IT随笔·2024-01-26 21:29

snprintf、strcpy、strncpy的用法

https://www.cnblogs.com/dongzhiquan/archive/2012/01/09/2317622.htmlstrcpy不安全strncpy也有安全隐患：一个典型的用法是：charbuf
一帘忧梦·2024-01-26 20:11

Spark 2.3.4 StandAlone 集群模式部署

配置$SPARK_HOME/conf/spark-defaults.conf配置$SPARK_HOME/conf/slaves分发配置启动Spark验证Spark相关文档介质路径：https://archive.apache
JP.Hu·2024-01-26 19:07

linux上使用jmeter压测

一、安装jmeter1.下载安装包地址：https://archive.apache.org/dist/jmeter/binaries/方法1:下载到本地后上传到远程linux服务器上传到服务器的命令，
sz891016·2024-01-26 18:54

成本更低、更可控，云原生可观测新计费模式正式上线

云布道师在上云开始使用云产品过程中，企业一定遇见过两件“讨厌”事：难以理解的复杂计费逻辑，时常冒出“这也能收费”的感叹；某个配置参数调节之后，云产品使用成本不可预估的暴涨。可观测作为企业IT运维必须品，在应对不同可观测场景时提供了非常多产品，以及与之对应的计费模式，供企业灵活选择。但如果产品价格说明不完整且不能有效评估现有业务规模及增长趋势，就会给企业带来非常高的成本规划与选型评估门槛。为解决上述
云布道师·2024-01-26 17:25

HiveSQL：gouping sets

https://blog.csdn.net/MOUNINGA/article/details/99408470?utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7EBlogCommendFromBaidu%7Edefault-6.baidujsUnder6&depth_1-utm_source=distribute.pc_r
木亦木木兮_0432·2024-01-26 17:14

搭建Hive3.x并整合MySQL8.x存储元数据

Hive简介Hive官方文档：https://cwiki.apache.org/confluence/display/HiveHive产生的背景：在使用MapReduce进行编程的时候，会发现实现一个简单的功能例如
端碗吹水·2024-01-26 16:06

第三篇:跨平台QT开发＜安装＞

1:安装qt5.9教程主要注意qt的安装不管是文件路径还是,项目文件都不要出现空格官网:https://download.qt.io/new_archive/qt/5.9/下载自己想要的版本即可没有账户可以注册一个安装之后需要设置编译路径和添加
坑真多·2024-01-26 12:58

oracle12c备份与恢复,Oracle Database12c Oracle RMAN备份与恢复（第4版）

OracleDatabase12c快速入门指南31.1预备步骤41.2为RMAN操作配置数据库41.2.1确定FRA的正确位置并创建FRA51.2.2登录到数据库并将其配置为使用FRA51.2.3将数据库置于ARCHIVELOG
天帝君豪·2024-01-26 12:11

引领未来：云原生在产品、架构与商业模式中的创新与应用

文章目录一、云原生产品创新二、云原生架构设计三、云原生商业模式变革《云原生落地产品、架构与商业模式》适读人群编辑推荐内容简介目录随着云计算技术的不断发展，云原生已经成为企业数字化转型的重要方向。
程序边界·2024-01-26 11:04

Apache Pulsar 社区周报｜09-05 ~ 09-11

关于ApachePulsarApachePulsar是Apache软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储
StreamNative·2024-01-26 11:06

Hive3.1.3基础学习

文章目录一、Hive入门与安装1、Hive入门1.1简介1.2Hive架构原理2、Hive安装2.1安装地址2.2Hive最小化安装(测试用)2.3MySQL安装2.4配置Hive元数据存储到MySQL2.5Hive
魅Lemon·2024-01-26 10:36

大数据之Hive:regexp_extract函数

目录一、正则的通配符简介1、正则表达式的符号及意义2、各种操作符的运算优先级：二、regexp_extract函数一、正则的通配符简介1、正则表达式的符号及意义符号含义实列/做为转意，即通常在"/"后面的字符不按原来意义解释如"*“匹配它前面元字符0次或多次，/a*/将匹配a,aa,aaa，加了”/"后，/a/*/将只匹配"a*".匹配任何一个字符^匹配一个输入或一行的开头/^a/匹配"anA"，
浊酒南街·2024-01-26 10:28

[软件安装]anaconda安装

建议下载网址：https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/打开终端，进入下载目录并解压安装包。
或许，这就是梦想吧！·2024-01-26 10:54

基于云原生技术栈构建企业统一基础技术平台（总纲）

一、概述本文主要介绍基于云原生技术栈建设企业技术平台的总纲，该技术平台对业务应用全生命周期进行管理和支撑，提供从需求交付、生产运行、稳定保障、资产运营，以及安全生产的体系化解决方案，为企业自建或采购技术平台提供参考
赵文宇（温玉）·2024-01-26 10:14

基于Kubernetes（K8s）构建企业容器云基础运行环境

cncfstack新文章上线：书名：《云原生解决方案》地址：https://zhaowenyu.com/cncf-solution访问：文章底部“阅读原文”或访问域名云原生计算是云计算发展新的里程碑阶段
赵文宇（温玉）·2024-01-26 10:11

Java操作hive报错：org.apache.thrift.transport.TTransportException: SASL authentication not

现象Java操作hive报错，关键的文本信息org.apache.thrift.transport.TTransportException:SASLauthenticationnotcomplete写的比较简单
欧阳方超·2024-01-26 10:57

centos6.8 php7 nginx,CentOS 8.x编译安装Nginx1.16.x+MySQL8.0.x+PHP7.4.x 7.3.x 7.2.x 7.1.x 7.0.x 5.6.x 5.5...

本文档最后更新于2020年4月7日前传：1、CentOS8.0.1905系统安装配置图解教程http://www.osyunwei.com/archives/10256.html2、CentOS服务器初始化设置
weixin_39624367·2024-01-26 08:57

oracle dg 搭建方式,dg搭建 全复制方式（一）

一.环境准备*数据库SID:orcl二.开始搭建(主库准备工作)1.确定主库处理归档模式(主库操作)SQL>archiveloglist;如果不是的话:SQL>SHUTDOWNIMMEDIATE;SQL
Angie洛林·2024-01-26 08:56

Hive命令-权限篇

一、权限查询1、查询master用户拥有的权限showgrantusermaster;2、查询master用户对于库dw拥有的权限showgrantusermasterondatabasedw;二、赋权限给master用户赋dw库all的操作权限grantallondatabasedwtousermaster;三、服务器上切换登录用户sshnewUser@localhostsudosu-maste
BestFei·2024-01-26 08:45

简述云原生基础定义及关键技术

云原生是什么云原生是面向“云”而设计的应用，因此技术部分依赖于传统云计算的3层概念，基础设施即服务（IaaS）、平台即服务（PaaS）和软件即服务（SaaS）。
蚊子不吸吸·2024-01-26 08:09

【云原生】Docker的镜像创建

目录1．基于现有镜像创建（1）首先启动一个镜像，在容器里做修改编辑（2）然后将修改后的容器提交为新的镜像，需要使用该容器的ID号创建新镜像实验2．基于本地模板创建3．基于Dockerfile创建镜像加载原理为什么Docker里的centos的大小才200M？DockerfileDocker镜像结构的分层Dockerfile操作常用的指令Dockerfile案例建立工作目录准备执行脚本准备网站页面生
思华年^O^·2024-01-26 08:07

【云原生】Docker的Cgroup资源控制

目录Docker是怎么控制容器使用的资源配额1．CPU资源控制进行CPU压力测试设置50%的比例分配CPU使用时间上限设置CPU资源占用比（设置多个容器时才有效）设置容器绑定指定的CPU2．对内存使用的限制3．对磁盘IO配额控制（blkio）的限制创建容器，并限制写速度Docker是怎么控制容器使用的资源配额Docker通过Cgroup来控制容器使用的资源配额，包括CPU、内存、磁盘三大方面，基本
思华年^O^·2024-01-26 08:04

【idea打包】idea打包项目了，虽然出现BUILD SUCCESS，但是jar是个无法启动的jar

的打包问题问题怎么解决解决后的样子运行成功的样子问题我执行打包命令后生成一个jar，但是在执行java-jar命令之后出现了一下的情况打开jar包里面的MANIFEST.MF里面是这样的Manifest-Version:1.0Archiver-Version
吃素的哈士奇·2024-01-26 07:54

SkyWalking介绍与使用docker-compose部署服务

一、Skywalking概述1、Skywalking介绍Skywalking是分布式系统的应用程序性能监视工具，专为微服务，云原生架构和基于容器（Docker，K8S,Mesos）架构而设计，它是一款优秀的
Hoking·2024-01-26 07:30

Hive ACID和事务表支持详解

在Hive0.13之前，Hive支持分区级别上原子性、一致性、持久性，隔离性可以通
疯狂的哈丘·2024-01-26 06:36

阿里云centos8安装mysql5.7.26

/s/1WDeMtFsrh7lNtQ53GXRv8Q提取码：kmcl官网下载地址:https://dev.mysql.com/downloads/mysql/5.7.html#downloadsArchives
风雨秋烟·2024-01-26 06:44

深度干货｜谈谈阿里云AnalyticDB Spark如何构建低成本数据湖分析

文/李少锋阿里云瑶池旗下的云原生数据仓库AnalyticDBMySQL版是基于湖仓一体架构打造的实时湖仓。本文将分享AnalyticDBMySQLSpark助力构建低成本数据湖分析的最佳实践。
阿里云瑶池数据库·2024-01-26 06:57

自动弹性，QPS线性提升｜一文读懂云原生数仓AnalyticDB弹性技术原理

阿里云瑶池旗下的云原生数仓AnalyticDBMySQL湖仓版（以下简称AnalyticDBMySQL）在发布之初提供了定时弹性功能，帮助业务有规律的客户定时升降配计算资源以节省成本。
阿里云瑶池数据库·2024-01-26 06:56

喜报｜「云原生数据库PolarDB」、「阿里云瑶池一站式数据管理平台」揽获“2023技术卓越奖”

日前，国内知名IT垂直媒体&技术社区IT168公布2023年“技术卓越奖”评选结果，经由行业CIO/CTO大咖、技术专家及IT媒体三方的联合严格评审，阿里云瑶池数据库揽获两项大奖：云原生数据库PolarDB
阿里云瑶池数据库·2024-01-26 06:22

【云原生】Docker如何构建镜像

目录前言一、基于已有的镜像创建步骤一：先基于现有的镜像创建一个容器，然后进入容器去完成修改步骤二：将该容器作为一个模板提交创建为一个新的镜像步骤三：基于新的镜像，dockerrun创建一个容器，进行测试二、基于本地模板创建第一种：从网上去下载第二种：将运行中的容器导入为模板，然后再进行导入三、基于Dockerfile创建1.联合文件系统（UnionFS）2.镜像加载原理3.为什么Docker里的c
liu_xueyin·2024-01-26 06:48

探索技术的无限可能-云原生计算2023年度奖项

在过去的一年里，字节跳动云原生计算团队获得了「DataFun年度数据智能先锋奖」、「开源中国-优秀开源技术团队」和「火山引擎开发者社区-年度优质内容」奖项。这些奖项既是鼓励，也是鞭策。
字节跳动云原生计算·2024-01-26 06:17

【K8S 云原生】K8S的安全机制

目录一、K8S安全机制概述1、概念2、请求apiserver资源的三个步骤：一、认证：Anthentcation1、认证的方式：1、HTTPTOKEN：2、httpbase：3、http证书：2、认证的访问类型：3、签发证书：二、鉴权1、概念：2、APIServer目前支持以下几种授权策略：三、准入控制四、实验一、K8S安全机制概述1、概念K8S中的安全机制，分布式的集群管理工具，就是容器编排。安
koeda（粉丝冲刺一个亿）·2024-01-26 06:16

【云原生】Docker网络模式和Cgroup资源限制

目录一、Docker网络实现原理二、Docker的网络模式#网络模式详解：第一种：host模式第二种：bridge模式第三种：container模式第四种：none模式第五种：自定义网络三、Cgroup资源控制第一种：CPU资源控制（1）设置CPU使用率上限一、Docker网络实现原理Docker使用Linux桥接，在宿主机虚拟一个Docker容器网桥(docker0)，Docker启动一个容器时
liu_xueyin·2024-01-26 06:16

flink1.13.0 环境搭建

https://blog.csdn.net/AinUser/article/details/120142220#1.standalone模式直接下载flink-1.13.0安装包https://archive.a
AinUser·2024-01-26 04:50

HttpRunner(21)：httprunner运行方式

/项目文件的路径locusts：基于Locust实现性能har2case：辅助工具，可将har格式（HTTPArchive）转换为YAML或者
测试店小二·2024-01-26 04:24

浪潮云海刘健：可演进的IT云敏捷支撑金融行业数字化转型

以云原生、自主云基础设施为内涵的IT云建设理念，为新金融业务模型支撑体系建设，提供了新思路。近日，农信银资金清算中心主办的
浪潮圈·2024-01-26 04:08

Linux 安装MySQL5.7.36(CentOS7为例)

MySQL5.7.35MySQL5.7.36MySQL5.7.37MySQL5.7.38[MySQL8.0（选择Windows或者Linux）](https://downloads.mysql.com/archives
可爱的小张666·2024-01-26 03:54

tar 命令基本用法

它的名称来自于“tapearchive”（磁带存档），最初设计用于在磁带上创建备份。
xwhking·2024-01-26 03:50

一文详解全栈可观测的实现路径

作者：曾庆国作者简介：曾庆国，来自阿里云智能-云原生可观测团队。过去多年一直从事云原生相关领域工作。从运营开源产品到商业产品研发；从应用交付、平台工程到深入云原生可观测。
阿里云云原生·2024-01-26 02:22

下一代软件架构，如何构建微服务核心能力

随着数字化进程的加速，各种架构设计思想风起云涌，进入百家争鸣时代，微服务架构，云原生架构，Serverless架构，事件驱动架构，中台架构，容灾架构，到底哪种思潮代表未来呢？
阿里云云原生·2024-01-26 02:51

PySparkSQL 入门(概述、DataFrame操作)

Spark的一个模块,用于处理海量结构化数据第一、针对结构化数据处理，属于Spark框架一个部分第二、抽象数据结构：DataFrameDataFrame=RDD+Schema信息；第三、分布式SQL引擎，类似Hive
y鱼鱼·2024-01-26 02:10

spark 学习_rdd常用操作

【sparkAPI函数讲解详细】https://www.iteblog.com/archives/1399#reduceByKey[重要API接口，全面】http://spark.apache.org/
weixin_30852367·2024-01-26 02:40

[极客大挑战 2019]Secret File1

/Archive_room.php点secret直接跳到了end，抓包看看，找到了secr3t.php过滤了很少的关键词，提示flag在flag.php，过去发现还是看不到尝试用php伪协议读取flag.php
ғᴀɴᴛᴀsʏ·2024-01-26 01:15

使用CDH的api接口对cdh服务进行滚动重启

importtimeimportrequestsimportjsonimportsys#可操作的服务列表server_list=['hdfs','yarn','zookeeper','hbase','spark_on_yarn','hive
Mumunu-·2024-01-26 01:32
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他