Hive:ORC

大数据平台Ambari2.7.4+HDP3.1.4详细安装教程

Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeeper、Sqoop和Hcatalog等。
csdnuser267·2023-12-06 17:20

windows下Mysql安装

1.首先去MySQL的官网下载安装包MySQL::DownloadMySQLCommunityServer(ArchivedVersions)点下download下载至本地2.下载好mysql安装包后，
大海都是水啊·2023-12-06 16:00

Hive的安装配置、初始化元数据、启动

Hive的安装配置、初始化元数据、启动1、解压hive到指定目录/usr/local/src改名，将mysql的驱动包拷贝到hive的lib目录下2、环境变量1）vi/etc/profileexportHIVE_HOME
会java的怪蜀黍·2023-12-06 16:46

Hive的metastore服务的两种运行模式

Hive的metastore服务的作用是为HiveCLI或者Hiveserver2提供元数据访问接口1.metastore运行模式metastore有两种运行模式，分别为嵌入式模式和独立服务模式。
Appreciate(欣赏)·2023-12-06 16:14

Hive的使用技巧

一.Hive常用交互命令[zhangflink@flinkv1hive]$bin/hive-help1.在Hive命令行里创建一个表student，并插入1条数据2.
Appreciate(欣赏)·2023-12-06 16:10

Jira中重要的目录和文件

重要文件和目录以下描述的目录/文件可能出现在“JIRA安装目录”的不同子目录下，具体取决于您是否安装了建议的Windows、Linux或ArchiveJIRA。请用以下目录替换占位符（在本节其余部
明算科·2023-12-06 15:44

关于Kriging 工具箱下载使用问题

ZIP-archive点进去之后就没反应网页一直跳转失败这个是什么原因求解。还有个小疑问，这个zip压缩包里面的工具箱，是matlab社区里面作者2002年发布的那个嘛？
Taylor .·2023-12-06 14:35

实战经验分享，Python 连接 Oracle 踩坑实录

最近的一个测试任务需要测试oracle同步hive数据库的性能，那就需要对oracle数据库灌注测试数据。我就又打开了我的IDE，准备把我之前一下可以灌50w数据到MySQL的代码，改一改，直接用。
程序员潇潇·2023-12-06 13:24

Swift中Runtime实现归解档

首先定义个名为PersonModel类，在类中实现NSCoding方法classPersonModel:NSObject,NSCoding然后在开始使用Archiver进行数据持久化存本地//路径letpath
冲云简·2023-12-06 13:53

Ubuntu解锁N卡VGpu记录:解锁帧数限制,降压超频等

KVM-Guset-windows等都可以使用Cuda而且性能基本没什么损失,大概只支持包含20系以下的显卡,30系安培代码里包含,支持不支持我不清楚.开搞:根据这位写的做的：https://bytehorizon.net/archives
cheng1999_cn1·2023-12-06 13:46

Temporal table join requires an equality condition on fields of table

:Temporaltablejoinrequiresanequalityconditiononfieldsoftable*******************发生地址flinksql与维表关联场景包括hive
Direction_Wind·2023-12-06 12:34

linux上安装mysql_linux上安装MySQL

centos7mysql8.0.18一、下载mysql服务软件包rpmpackage:是某个特定的包，比如server,client,devle等rpmbundle：是该版本所有包的集合CompressedTARArchive
Flink 中文社区·2023-12-06 12:43

flume 实时监控 Hive 日志，并上传到 HDFS 中

一、首先配置hive的日志生成位置二、上传需要的jar包将commons-configuration-1.6.jar、hadoop-auth-3.1.2.jar、hadoop-common-3.1.2.
无名刺客·2023-12-06 12:41

Flume 概述+环境配置+监听Hive日志信息并写入到hdfs

Flume介绍Flume是Apache基金会组织的一个提供的高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方(可定制)的能力。当前Flume有两个版本，Flume0.9x版本之前的统称为Flume-og，Flume1.X版本被统称为Flume-ng。参考文档：http
Transkai47·2023-12-06 12:40

二百一十二、Flume——Flume实时采集Linux中的目录文件写入到HDFS中（亲测、附截图）

一、目的在实现Flume实时采集Linux中的Hive日志写入到HDFS后，再做一个测试，用Flume实时采集Linux中的目录文件，即使用Flume监听Linux整个目录的文件，并上传至HDFS中二、
天地风雷水火山泽·2023-12-06 12:10

Flume采集数据到Hive&HBase

文章目录Flume汇入数据到Hive方法一：汇入到Hive指定的HDFS路径中：方法二：利用HiveSink汇入数据Flume汇入数据到HBase一、Flume的HBaseSinks详细介绍1.1、HBaseSink1.2
哈了个Doop·2023-12-06 12:08

Flume监控Hive日志并上传到HDFS

一、实时监控单个追加文件1.需求：实时监控Hive日志，并上传到HDFS2.实现步骤：（1）上传Hadoop相关jar包到flume/lib目录下flume相关jar包https://blog.csdn.net
无发可脱丶·2023-12-06 12:37

实时监控 Hive 日志，并上传到 HDFS 中

由于Hive日志在Linux系统中所以读取文件的类型选择：exec即execute执行的意思。表示执行Linux命
夏殿灬青葛石·2023-12-06 12:07

二百一十一、Flume——Flume实时采集Linux中的Hive日志写入到HDFS中（亲测、附截图）

一、目的为了实现用Flume实时采集Hive的操作日志到HDFS中，于是进行了一场实验二、前期准备（一）安装好Hadoop、Hive、Flume等工具（二）查看Hive的日志在Linux系统中的文件路径
天地风雷水火山泽·2023-12-06 12:36

手工的乐趣

007点评行动之极豚客所属日期：2019年6月28日具体坐标：007不写就出局77奇迹班作业雨楼上战友第N次点评【文章标题】微型桌面高尔夫【文章链接】http://ptun.io/archives/build_tiny_desk_golf.html
文倩定投人生·2023-12-06 10:26

Superset 使用手册 -- 从入门到精通 （基本使用+权限管理+可视化实时刷新） 爆肝七天力作

Superset使用手册–从入门到精通（基本使用+权限管理+可视化实时刷新）第一部分Superset基本使用1.1对接数据源（目前支持mysql、hive、es）登录superset后，点Databases
不吃鱼的cat·2023-12-06 09:09

linux中安装mysql5.7或者指定版本

默认自带的mariadb数据库，避免冲突yumremovemariadb-libs.x86_643.下载解压版的mysql并安装官网地址：https://downloads.mysql.com/archives
Destiny()·2023-12-06 09:08

20231202 VCSA 7.0 日志清理及空间扩容

日志清理ssh到VCSA上，输入shell进入控制台df-lh查看空间大小，发现/storage/archive占据空间比较大，这里应该是备份日志的地方，里边文件不大但很多，查找并删除30天以前的日志cd
miyafung·2023-12-06 08:43

soapui报错： CXF directory must be set in global preferences

Theobjectisinourarchive:https
chushiyunen·2023-12-06 08:32

Hive SQL的各种join总结

说明Hivejoin语法有6中连接innerjoin（内连接）、leftjoin（左连接）、rightjoin（右连接）、fullouterjoin（全外连接）、leftsemijoin（左半开连接）、
刘文钊1·2023-12-06 07:51

spark不同结构Dataset合并

1.先将hdfs(或本地)存储的csv文件加载为Dataset先在本地C盘准备两个csv文件test.csvclient_id,behives,del,normal_status,cust_type,no_trd_days7056
容若只如初见·2023-12-06 07:03

hive文件存储格式orc和parquet详解

hive支持的文件类型：textfile、sequencefile（二进制序列化文件）、rcfile（行列式文件）、parquet、orcfile（优化的行列式文件）一、orc文件带有描述式的行列式存储文件
！@123·2023-12-06 07:32

spark 写入 hudi时数据类型报错

org.apache.spark.sql.execution.QueryExecutionException:Parquetcolumncannotbeconvertedinfilehdfs://master:9000/user/hive
南城守护·2023-12-06 07:31

maven环境搭建

maven历史版本下载：https://archive.apache.org/dist/maven/新建系统变量编辑Path，添加bin目录mvn-v测试查看版本号conf目录下新建repository
flash20230513·2023-12-06 06:36

WIN10下解决HIVE 初始化MYSQL表报错：Unknown version specified for initialization

今天本地WINDOWS装HIVE，走到最后一步初始化数据库死活不通过：D:\hive\hive-rel-release-3.1.3\bin\ext>hive--serviceschematool-dbTypemysql-initSchema
applebomb·2023-12-06 06:10

比较 Apache Hive 和 Spark

Hive和Spark是两种非常流行且成功的用于处理大规模数据集的产品。换句话说，他们进行大数据分析。本文重点描述这两种产品的历史和各种功能。
vvoennvv·2023-12-06 06:50

关于Hive的窗口函数

Hive窗口函数row_number案例数据文件是：rownumbertest.txt，字段信息是：id,xb,age,name1,男,18,张三2,女,18,李四3,女,20,王五4,男,18,赵六5
顾子豪·2023-12-06 06:19

Linux下安装MySQL 5.6

wgethttps://downloads.mysql.com/archives/get/p/23/file/mysql-5.6.35-linux-glibc2.5-x86_64.tar.gzllmysql
Jack_Jaa·2023-12-06 05:57

Ambari hdp Spark多版本并存

spark2.3经测试也是没问题的）下载spark-2.2.2-bin-hadoop2.7.tgz,并解压到放到任意目录;修改配置cdspark-2.2.2-bin-hadoop2.7/1.复制ambari的hive-site.xml
Respect123·2023-12-06 05:20

windows10系统下替换、修改jar中的文件并重新打包成jar文件然后运行

jar文件简述2、问题来源3、操作步骤3.1解压jar包3.2替换或者更改操作3.3重新打成jar包3.4确认是否修改成功3.5运行程序附录：常见命令参数1、jar文件简述JAR文件就是JavaArchive
码农小C·2023-12-06 05:26

sqoop将hive中的数据导入MySQL不能正常显示中文——已解决

问题：原因：结果查看问题：在做练习利用sqoop工具将hive中的表导入到MySQL之后，在MySQL查看中文部分不能正常显示输入sqoop执行语句sqoopexport-connect"jdbc:mysql
小-枝-丫·2023-12-06 02:54

hive外部表分区

外部表和内部表内部表：数据由hive自身管理存储在hive指定的hdfs目录中删除会删除数据本身外部表（external）：数据存储在用户使用location关键字指定的hdfs目录中hive中仅存储一份元数据删除操作不会影响到
nil_ddea·2023-12-06 00:54

Windows10下ZED相机的安装和使用记录

https://developer.nvidia.com/cuda-toolkit-archive下载zed的SDK，注意一定要和cuda版本对于。zed的下载网站已经写清楚了。
faris_5bing·2023-12-05 22:43

Flink快速入门

微信运动、信用卡月度账单、国家季度GDP增速MPI-节点间数据通信-c和pythonMR-2004谷歌提出的编程范式-hadoop/storm/spark/flinkHadoop-MR、HDFS、YARN(hive
WaiSaa·2023-12-05 21:30

【黑马甄选离线数仓day06_核销主题域开发】

层操作数据存储层:==OperateDataStore==核心理念:几乎和源数据保持一致,粒度相同注意事项:==同步方式(全量同步,全量覆盖,增量仅新增,增量新增和更新)+内部表+分区表(部分)+指定字符分隔符+orc
LKL1026·2023-12-05 21:00

【黑马甄选离线数仓day07_常见优化手段及核销主题域开发】

1.常见优化手段1.1分桶表基本介绍分桶表:分文件的,在创建表的时候,指定分桶字段,并设置分多少个桶,在添加数据的时候,hive会根据设置分桶字段,将数据划分到N个桶(文件)中,默认情况采用HASH分桶方案
LKL1026·2023-12-05 21:26

大数据开发：Hive表的基本操作

针对于Hive表的操作，是Hive当中需要大家付出足够的精力去学习和掌握的。Hive所支持的类SQL语言HQL，如果自身有比较好的SQL基础的话，其实很多东西也是能够快速融会贯通的。
成都加米谷大数据·2023-12-05 20:41

安装显卡驱动、安装cuda toolkit、安装cudnn

nvidia-smi查看，CUDA可以向下兼容，以我为例，可以安装12.0以下的版本：cudatoolkithttps://developer.nvidia.com/cuda-toolkit-archive
登高去梯·2023-12-05 20:57

Spark-03: Spark SQL 基础编程

目录1.SparkSQL简介2.SparkSession3.SparkSQL数据的读写3.1读写TXT文件3.2读写CSV文件3.3读写JSON文件3.4读写Parquet文件3.5读写ORC文件3.6
m0_37559973·2023-12-05 18:17

大数据集群配置-HA（hadoop高可用）

hadoopHA配置软件名称软件包名Zookeeperzookeeper-3.4.8.tar.gzhiveapache-hive-2.0.0-src.tar.gzjdkjdk-8u65-linux-x64
厨 神·2023-12-05 16:20

【转载】Anaconda安装与换国内源教程

Indexof/anaconda/archive/|北京外国语大学开源软件镜像站|BFSUOpenSourceMirrorhtt
kabcko·2023-12-05 14:33

HGame 2023 Week4 部分Writeup

文章同时发布于我的博客：https://blog.vvbbnn00.cn/archives/hgame2023week4-bu-fen-writeup第四周的比赛难度较高，同时也出现了不少颇为有趣的题目
不做评论·2023-12-05 13:32

hive数据库查看参数/hive查看当前环境配置

文章目录一、hive查看当前环境配置命令在一次hive数据库执行命令setngmr.exec.mode=cluster时，想看一下ngmr.exec.mode参数原先的值是什么，所以写一下本篇博文，讲一下怎么查看
五月天的尾巴·2023-12-05 10:13

8-Hive原理与技术

单选题题目1：按粒度大小的顺序，Hive数据被分为：数据库、数据表、桶和什么选项:A元祖B栏C分区D行答案：C------------------------------题目2：以下选项中，哪种类型间的转换是被
阿伊同学·2023-12-05 10:13

Apache Sqoop使用

Hadoop生态系统包括：HDFS、Hive、Hbase等RDBMS体系包括：MySQL、Oracle、DB2等Sqoop可以理
高过蓝天的云·2023-12-05 10:41
上一页 45 46 47 48 49 50 51 52 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他