hive运维第5页

学习运维第七天:bash shell 脚本编程

编程基础程序组成程序一组计算机能识别和执行的指令，运行于电子计算机上，满足人们某种需求的信息化工具。它以某些程序设计语言编写，运行于某种目标结构体系上。算法算法是指解题方案的准确而完整的描述，是一系列解决问题的清晰指令，代表着用系统的方法描述解决问题的策略机制。数据结构数据结构是计算机存储、组织数据的方式。数据结构是指相互之间存在一种或多种特定关系的数据元素的集合。通常情况下，精心选择的数据结构可

运维小白。。·2024-09-03 16:13

hive 学习笔记

一、官网和文档地址Hive官网地址hive官网文档查看地址文档地址二、Hive常用交互命令（1）“-e”不进入hive的交互窗口执行sql语句bin/hive-e"selectidfromstudent

HuntFalcon·2024-09-03 14:01

hive学习（五）

一、hive的DML操作1.load（向表中装载数据）hive>loaddata[local]inpath'路径'[overwrite]intotable表名[partition(partcol1=val1

2301_79721847·2024-09-03 14:00

Clobotics 计算机视觉场景存储实践：多云架构、 POSIX 全兼容、低运维的统一存储

Clobotics是一家将计算机视觉和机器学习技术应用于风电以及零售行业的企业。在风电行业，Clobotics利用无人机对风力发电机叶片进行检查，显著降低了对人工作业的依赖。在零售领域，公司通过分析捕获的包装商品图像来提供基于实时数据的洞察，以增加销售额并减少运营成本。存储方面，Clobotics原本直接使用云SDK，而部分系统则使用了内部的封装器，没有形成统一的存储层，同时还面临多云架构、海量小

Juicedata·2024-09-03 12:47

hive学习记录

一、Hive的基本概念定义：Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

2302_80695227·2024-09-03 12:46

hive学习（四）

;loaddata[local]inpath'/root/hive/data/c.txtintotablenickypartitio

2301_79721847·2024-09-03 12:16

Hive的存储格式

文章目录Hive的存储格式1.存储格式简介2.行存储与列存储行式存储列式存储混合的PAX存储结构TextFileSequenceFileHive的存储格式1.存储格式简介Hive支持的存储数的格式主要有

百流·2024-09-03 12:16

CentOS7安装Docker及添加阿里云镜像加速详细教程_centos7安装docker教程阿里云

2401_83946570·2024-09-03 10:08

Performance Tips

ngugg·2024-09-03 09:07

阿里云大数据专业认证考试

阿里云大数据专业认证（AlibabaCloudCertifiedProfessional,ACP）是面向使用阿里云大数据产品的架构、开发、运维类人员的专业技术认证“大数据”是指以多元形式，自许多来源搜集而来的庞大数据组

xmvip01·2024-09-03 07:16

Linux离线安装MySQL5(1)

下载安装包安装依赖yum-yinstallperlautoconfgccgcc-c++makecmakelrzsznet-toolslibaio官方地址：https://downloads.mysql.com/archives

2401_84046876·2024-09-03 03:47

Docker网络模型深度解析教程

适合对Docker感兴趣的技术人员、运维工程师以及开发人员。

man2017·2024-09-03 01:07

大数据技术之HBase 与 Hive 集成(7)

目录使用场景HBase与Hive集成使用1）案例一2）案例二使用场景如果大量的数据已经存放在HBase上面，并且需要对已经存在的数据进行数据分析处理，那么Phoenix并不适合做特别复杂的SQL处理。

大数据深度洞察·2024-09-03 00:03

Python自动化运维 - day9 - 进程与线程

概述我们都知道windows是支持多任务的操作系统。什么叫“多任务”呢？简单地说，就是操作系统可以同时运行多个任务。打个比方，你一边在用浏览器上网，一边在听MP3，一边在用Word赶作业，这就是多任务，至少同时有3个任务正在运行。还有很多任务悄悄地在后台同时运行着，只是桌面上没有显示而已。现在，多核CPU已经非常普及了，但是，即使过去的单核CPU，也可以执行多任务。由于CPU执行代码都是顺序执行的

anhuoqiu1787·2024-09-02 23:52

Hive 运行在 Tez 上

Tez下载Tez官网Tez在Hive上的运用前提要有Hadoop集群上传Tez压缩包到Hive节点上tar-zxvfapache-tez-0.9.1-bin.tar.gz-C/opt/module/tez

爱吃酸梨·2024-09-02 20:07

Hive环境onTez

一、准备工作1.上传新的tez，hive，安装包到/opt/software目录下tez-0.10.1-SNAPSHOT-minimal.tar.gztez-0.10.1-SNAPSHOT.tar.gzapache-hive

asd623444055·2024-09-02 20:36

Goto是关键？思考

转载于:https://www.cnblogs.com/yuanweiming84/archive/2005/10/08/250407.

anpan0460·2024-09-02 17:50

puppet配置之puppet.conf详解中英文对照

【导读】sky也是运维人员，在使用puppet的配置过程中，经常会有碰到些参数，不知道如何修改，每次都要去看查puppet手册，要不去puppet的官方网站去看文档，另外也有些同学不知道，puppet的配置到底有那些参数

自信哥·2024-09-02 16:47

Python3 | 练气期，入门初识与起步!

[知识是人生的灯塔，只有不断学习，才能照亮前行的道路]0x00前言简述描述：作为一名网络安全转运维的工程师，每天一睁眼就要马不停蹄的学习各类计算机技术、编程和网络安全知识等，在工作中接触过很多编程语言，

全栈工程师修炼指南·2024-09-02 09:03

ubuntu / debian 根文件系统制作

带图形化界面不带图形化界面需提前打包一些应用依赖包进去需要提前内置一些文件或开机自启执行脚本等环境：ubuntu20.04服务器版本一、操作流程1.1构建工具下载#切换更新源sudovim/etc/apt/sources.list:%s/archive.ubuntu.com

mooncity0·2024-09-02 08:59

物联网架构之HBase

Linux运维老纪·2024-09-02 08:54

从零开始掌握容器技术：Docker的奇妙世界

它在软件开发、部署、运维等环节中大放异彩，但对于刚接触这个概念的朋友来说，可能还是有些陌生。本文将通过简单通俗的语言，帮助你理解什么是容器技术，以及为什么它在IT行业中如此受欢迎。

云计算练习生·2024-09-02 06:42

using maven and eclipse created a mutiple module project

usingmavenandeclipsecreatedamutiplemoduleprojectusingmavenandeclipsecreatedamutiplemoduleproject原文网址：blog.donews.com/skyhero/archive

josonchen·2024-09-02 01:11

Ansible自动化运维实战：打造高效、可靠的系统管理方案！

Ansible是一个在自动化运维领域广泛使用的工具，它基于Python开发，能够实现批量系统配置、程序部署和运行命令等功能。

疾风终究没有归途·2024-09-02 01:39

DBeaver连接Mysql和Hive踩坑-提供驱动下载链接

但是自己在hive数据库连接的时候遇到了很多问题。主要因为自己驱动配置方面没有太多经验，同时存在Hive的版本问题（使用1.1.0对应驱动才能成功连通），在下载驱动时候花费了太多的时间。

dengxc·2024-09-01 22:21

Docker技术入门与实战-第3版.pdf OCR 高清可复制

pdfOCR高清可复制简介预览下载地址Docker技术入门与实战-第3版.pdfOCR高清可复制简介本书从Docker基本原理开始，深入浅出地讲解Docker的构建与操作，内容系统全面，可帮助开发人员、运维人员快速部署

clicheeeeee·2024-09-01 22:24

【python】python指南（十四）：**操作符解包字典传参

至于python，从日常用hive做数

LDG_AGI·2024-09-01 21:17

Ansible自动化运维项目

Ansible自动化运维项目是一个复杂而强大的解决方案，它利用Ansible这一开源自动化平台来简化IT基础设施的配置管理、应用部署和任务自动化过程。

hong161688·2024-09-01 20:43

详细解说：ansible自动化运维项目

Ansible是一种强大的自动化运维工具，主要用于配置管理、应用部署、任务执行等场景。

AI逍遥子·2024-09-01 20:43

运维系列&AI系列&Lenovo-G双系统系列（前传-装之前搜索的）：Ubuntu开机黑屏，只有白色光标在左上角闪烁的解决办法

Ubuntu开机黑屏，只有白色光标在左上角闪烁的解决办法Ubantu开机黑屏，只有白色光标在左上角闪烁的解决办法底下评论问题一：所以重启电脑，进入grub时，选择进入恢复模式。重启电脑怎么进入grub啊？双系统的其他人回答问题二：选择Resumenormalboot选项后直接运行一段就黑屏，没有输入用户名和密码其他人回答问题三：你好，成功进入图形界面之后重启，还是进入tty命令行模式怎么办啊？还是

坦笑&&life·2024-09-01 14:04

无人机的工业应用场景

一、监测与检查电力巡检：工业无人机在电力巡检中发挥着重要作用，能够替代人工进行高空、高风险作业，提高电网巡视效率，降低运维成本。

云卓SKYDROID·2024-09-01 12:24

Python大数据之Hadoop学习——day06_hive学习02

一.hive内外表操作1.建表语法create[external]table[ifnotexists]表名(字段名字段类型,字段名字段类型,...)

笨小孩124·2024-09-01 11:18

大数据毕业设计hadoop+spark+hive微博舆情情感分析知识图谱微博推荐系统

爬虫工具采集新浪微博评论、热搜、文章等约10万条存入.csv文件作为数据集；（二）使用pandas+numpy或MapReduce对数据进行数据清洗，生成最终的.csv文件并上传到hdfs；（三）使用hive

qq_79856539·2024-09-01 11:16

大数据毕业设计天hadoop+spark+hive游戏推荐系统游戏数据分析可视化大屏 steam游戏爬虫游戏大数据机器学习知识图谱计算机毕业设计机器学习深度学习人工智能知识图谱

|—||一、选题的目的和意义用户往往因为不能及时查看游戏信息而造成许多烦恼。另一方面，游戏商城平台没能进行系统的管理与维护使游戏信息没能及时的更新。而传统的游戏信息管理，采用的还是手工备案、人工查询的方式。但是随之游戏信息的增多这种管理方式的工作量不断加大，这种做法就存在费时费力、缺乏时效性、不利于调动人员的积极性等缺点。一旦网站建立好之后，一方面，用户可以在第一时间在系统里查询所需的信息，另一方

2401_84159688·2024-09-01 11:45

运维系列：CentOS 7 安装报错:Cannot find a valid baseurl for repo: base/7/x86_6

CentOS7安装报错:Cannotfindavalidbaseurlforrepo:base/7/x86_6CentOS7安装报错:Cannotfindavalidbaseurlforrepo:base/7/x86_6一、报错情况二、报错原因机子解析不了`yum源`,原因有三种情况：三、不能上网解决方法四、DNS配置有误解决方法五.其他问题1.文件末尾追加DNS还是nslookup不到2.nsl

坦笑&&life·2024-09-01 11:43

网络游戏从开发到上线，都得经历哪些过程？

从项目立项，再到设计开发，经历几轮的测试，最后上线运维。整个过程，看着挺复杂，其实一点也不简单。一.项目

5北520·2024-09-01 10:36

第二周考试试题总结

小组姓名：老男孩教育-Linux运维59期(一)简答题1：简述企业磁盘分区规则（5分）2：简述CentOS开机启动流程（CentOS7）（4分）按下电源开机自检MBR引导GRUB菜单加载内核systemdtarget

不学习会死_b5ee·2024-09-01 05:53

运维痛点深度解析：当前排障流程的挑战与局限

在当今互联网时代，运维工作的重要性日益凸显。然而，随着业务规模的不断扩大，运维面临的挑战和痛点也越来越多。

云观秋毫·2024-08-31 23:03

白鲸开源中标申万宏源DataOps数据开发运维一体化平台采购项目！

白鲸开源近日成功中标申万宏源证券有限公司的DataOps数据开发运维一体化平台项目。

DolphinScheduler社区·2024-08-31 19:07

阿里云服务迁移至火山引擎

一、注册中心迁移（运维）版本号：******（注意版本号需要和迁移前的一致，避免跨大版本迁移，防止出现不必要的问题耽误进度）文档地址：Nacos快速开始二、服务代码改动项（服务端）（完全迁移前，代码部署分支全部用

super_weihx·2024-08-31 19:05

java maven 多环境+jenkins参数化构建

背景：运维提出以后会有多套环境，自动化接口测试将会是一套代码在多个服务器环境上跑。需要根据jenkins的命令，实现发布多套环境。

flyingshuai·2024-08-31 17:56

hivesql 练习3

--源表name,subjectid,age,score张三,0001,22,45张三,0002,22,56李四,0002,18,88赵五,0002,24,66--目标表(科目0001没有成绩的学生name和age)name,age李四,18赵五,24createtablescore_t(namestring,subjectidstring,agestring,scorestring)ROWFOR

小涛手记·2024-08-31 17:54

hivesql练习

源表:province,province_id,city,city_id,area,area_id甘肃省,11,张掖市,21,甘州区,31甘肃省,11,张掖市,21,山丹县,32甘肃省,11,张掖市,21,高台县,33甘肃省,11,兰州市,22,七里河,34甘肃省,11,兰州市,22,新区,35北京,12,北京,12,海淀区,36北京,12,北京,12,昌平区,37目标表:+------+----

小涛手记·2024-08-31 17:54

Hive SQL练习之影评案例

找的练习hive，内容非原创链接https://www.cnblogs.com/frankdeng/p/9309668.html一、建表，导入数据1、建表[root@masterhadoop]#hiveLogginginitializedusingconfigurationinjar

软件手·2024-08-31 17:23

Python使用pyhive库远程操作hive的配置和使用

请先安装好hive，林子雨老师的配置方法，该配置方法是可以配置成功的，请注意配置hive-site.xml文件的时候，里面添加的信息都是在标签里的尾部添加配置hive环境到hive安装的conf目录下，

玩家_名狱·2024-08-31 17:52

python利用pyhive 连接hive

1.下载需求包pipinstallsaslpipinstallthriftpipinstallthrift-saslpipinstallPyHive2.连接hive注意端口默认为10000frompyhiveimporthiveconn

Leonban·2024-08-31 16:50

python连接hive--Pyhive

Pyhive安装包pipinstallsaslpipinstallthriftpipinstallthrift-saslpipinstallPyHive#安装对应的包sasl可能会报错#下载sasl文件

Elvis_hui·2024-08-31 16:20

pyhton - PyHive

简介PyHive是一组PythonDB-API和SQLAlchemy接口，可用于Presto和Hive。

凌不了云·2024-08-31 16:19

Spark SQL 结构化数据处理流程及原理是什么？

SparkSQL可以使用现有的Hive元存储、SerDes和UDF。它可以使用JDBC/ODBC连接到现有的BI工具。有了SparkSQL，用户可以编写SQL风格的查询。

我想去吃ya·2024-08-31 16:18

Ubuntn安装Xfce桌面环境

原文：https://blog.c12th.cn/archives/11.html前言最近搞了台云服务器(2H2G)玩玩，其实一直想挂一些奇奇怪怪的东西到服务器？

c12th·2024-08-31 09:03

推荐频道

hive运维