E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive导入到doris
hive
函数及性能优化
--函数--查询当前系统提供的所有函数showfunctions;--模糊查询函数showfunctionsLIKE'x*y*';--查询指定函数的具体用法DESCFUNCTION函数名称;--查询指定函数的具体用法且带示例DESCFUNCTIONEXTENDED函数名称;--字符(串)函数【注,不分单双引号】--返回字符个数SELECTlength('abc'),length('你我他');se
xinxinyydss
·
2024-01-09 15:00
hive
hadoop
数据仓库
6.1.CentOS7下安装Sqoop安装与使用
python编程快速上手(持续更新中…)推荐系统基础一、Sqoop介绍二、Sqoop原理三、Sqoop安装事前准备安装包解压安装四、Sqoop使用1、MySQL->HDFS2、创建job3、导入数据到
Hive
IT瘾君
·
2024-01-09 15:29
推荐系统-大数据
sqoop
mysql
hadoop
sqoop 安装与使用
1.上传sqoop2.安装和配置在添加sqoop到环境变量将数据库连接驱动拷贝到$SQOOP_HOME/lib里3.使用第一类:数据库中的数据
导入到
HDFS上sqoopimport--connectjdbc
麦香鸡翅
·
2024-01-09 15:27
hadoop
大数据学习6-Sqoop安装与使用
sqoop搭建还是挺简单的,前提是hadoop与
hive
搭建完成上传解压首先下载sqoop,sqoop的版本是1.4.7,sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz,提取码
asXt
·
2024-01-09 15:57
大数据
笔记
linux
sqoop
基于spark的
Hive
2Pg数据同步组件
一、背景
Hive
中的数据需要同步到pg供在线使用,通常sqoop具有数据同步的功能,但是sqoop具有一定的问题,比如对数据的切分碰到数据字段存在异常的情况下,数据字段的空值率高、数据字段重复太多,影响
zcc_0015
·
2024-01-09 15:53
spark
大数据
分布式
Hive
基础知识(三):Linux系统下的MySQL安装
1)检查当前系统是否安装过MySQL[zzdq@hadoop100
hive
]$rpm-qa|grepmariadbmariadb-libs-5.5.68-1.el7.x86_64#如果存在,就用下面这条命令卸载
依晴无旧
·
2024-01-09 13:26
hive
linux
mysql
Hive
基础知识(二):
Hive
安装部署教程
1.安装
Hive
1)把apache-
hive
-3.1.2-bin.tar.gz上传到linux的/opt/software目录下2)解压apache-
hive
-3.1.2-bin.tar.gz到/opt
依晴无旧
·
2024-01-09 13:25
大数据
hive
hadoop
数据仓库
Hive
基础知识(一):
Hive
入门与
Hive
架构原理
1.什么是
Hive
1)
hive
简介
Hive
:由Facebook开源用于解决海量、结构化日志的数据统计工具。
依晴无旧
·
2024-01-09 13:25
大数据
hive
架构
hadoop
Hive
基础知识(个人总结)
声明:1.本文为我的个人复习总结,并非那种从零基础开始普及知识内容详细全面,言辞官方的文章2.由于是个人总结,所以用最精简的话语来写文章3.若有错误不当之处,请指出一.基础
Hive
的特点:
Hive
的执行延迟比较高
hellosrc | forward
·
2024-01-09 13:54
Hive
大数据
1024程序员节
hive
大数据
hive
基础知识大全
一、
Hive
基本概念1.1
hive
是什么
hive
是基于hadoop的一个数仓分析工具,
hive
可以将hdfs上存储的结构化的数据,映射成一张表,然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567
不爱吃鱼的馋猫
·
2024-01-09 13:23
hive
数据仓库
Hive
基础知识笔记(含MySQL metastore伪分布式安装配置流程)
该笔记涉及代码:https://github.com/hackeryang/Hadoop-Exercises/tree/master/src/main/java/
Hive
一、介绍1.
Hive
是一个构建在
书忆江南
·
2024-01-09 13:52
大数据
Hive
Hive
基础知识
1.
Hive
的基本概念1.1
hive
的简介什么是
hive
?1)
Hive
是基于Hadoop的一个数据仓库工具,将结构化的数据文件映射为一张数据库的数据表,并且提供类SQL查询功能。
巷子里的猫X
·
2024-01-09 13:52
数据分析
hive
大数据
hadoop
大数据开发:
Hive
基础知识点介绍
Hadoop生态下的各个组件,
Hive
的出现是为了解决海量日志数据分析而诞生,最初出自Facebook,后来归到了Apache旗下进行开源,本质上来说,
Hive
是一个帮助提升数据处理的工具。
加米谷大数据张老师
·
2024-01-09 13:52
大数据
数据库
hive
数据仓库
Hive
基础知识
1.
Hive
和HBase的区别HBase是一个用来处理HDFS上文件的NoSQL数据库,建立于HDFS之上。
辰阳星宇
·
2024-01-09 13:22
#
Hive
hive
hadoop
big
data
基于hadoop的
hive
数据仓库基础操作知识整理
第1章
Hive
基本概念1.1什么是
Hive
hive
简介
Hive
:由Facebook开源用于解决海量结构化日志的数据统计工具。
大包丫
·
2024-01-09 13:51
hadoop
hive
大数据
hive
在mysql中总是不创建元数据库的解决办法
hive
在mysql中总是不创建元数据库的解决办法这两天打算好好捣鼓捣鼓
hive
sql。遂搞了台centos搭环境,搭环境嘛,当然是怎么简单怎么来,怎么快怎么来。
黄道婆
·
2024-01-09 13:21
bigdata
#
hive
hive
Hadoop的数据仓库
Hive
的基础知识和安装部署
1、数据仓库和
Hive
数据仓库是为了协助分析报告,支持决策,为需要业务智能的企业提供业务流程的改进和指导,从而节省时间和成本,提高质量。
姠惢荇者
·
2024-01-09 13:21
大数据
大数据
数据仓库
Hive
数据导入
Hive
基础知识(四):
Hive
元数据配置到 MySQL
1.拷贝驱动将MySQL的JDBC驱动拷贝到
Hive
的lib目录下[zzdq@hadoop100software]$cp/home/atguigu/mysql-connector-java-5.1.37
依晴无旧
·
2024-01-09 13:50
大数据
hive
mysql
hadoop
在企业网中部署SDN
2、用户名/密码:
hive
/
hive
。进入桌面以后,“Ctrl+Alt+t”打开命令终端后可以根据自己的环境,去更改为环
huangzwei
·
2024-01-09 13:16
网络
Ubuntu22.04.3安装pyenv、pipenv来管理python版本和每个项目的虚拟环境,vscode中配置pipenv环境
前言每次放假的时候,在公司和家里电脑切换使用,存在环境问题,远程比较卡,在Virtualbox中安装了一个Ubuntu22.04.3系统,需要使用的时候导出,然后
导入到
另一个电脑即可。
莫忘初心丶
·
2024-01-09 13:13
python
vscode
开发语言
Doris
案例篇——长安汽车基于
Doris
的车联网数据分析平台建设实践
Doris
案例篇——长安汽车基于
Doris
的车联网数据分析平台建设实践随着消费者更安全、更舒适、更便捷的驾驶体验需求不断增长,汽车智能化已成必然趋势。
不二人生
·
2024-01-09 12:20
#
Doris
数据仓库
Doris
大数据
深度学习常用的下载链接/下载地址(CUDA/cuDNN)
1.CUDA各个版本的下载链接https://developer.nvidia.com/cuda-toolkit-arc
hive
2.cuDNN各个版本的下载链接https://developer.nvidia.com
Mobius8086
·
2024-01-09 12:56
深度学习
深度学习
人工智能
Linxu文件管理实验1
进入/目录下面查看以l开头的目录将查询后的结果
导入到
1将1复制到tmp目录下查看2、将系统中所有链接文件,或者小于10K的文件查找出来并且保存到link.txt文件中,同时统计查找到了多少个文件。
X.cc
·
2024-01-09 12:18
linux
linux
Spark与
Hive
的集成与互操作
ApacheSpark和Apache
Hive
是大数据领域中两个非常流行的工具,用于数据处理和分析。Spark提供了强大的分布式计算能力,而
Hive
是一个用于查询和管理大规模数据的数据仓库工具。
晓之以理的喵~~
·
2024-01-09 11:30
Spark
spark
hive
大数据
iOS 整合一些项目中常用的工具 让开发更简单
本文主要是整合了一下我项目中用到的和网上其他项目中用到的一些工具这样可以在开发的时候直接使用一下通用的东西就不需要一遍一遍去写了(感谢哪些把自己代码开源出来的同道中人);使用方法1、直接到github上下载使用:https://github.com/leohou/HLKit把HLKit文件
导入到
工程中
HOULI
·
2024-01-09 11:32
如何将oracle数据库中的表结构
导入到
sqlserver中,Oracle转换成SqlServer数据库的步骤...
1背景ITM系统目前支持MysqL、Oracle数据库,由于现在需要和CA产品进行结合,用CA产品的采集功能进行数据采集,因此需要使用CA产品的sqlServer数据库,为了使得系统支持sqlserver数据库,首先需将Oracle数据库迁移到MysqL中,然后修改系统中dao对应xml配置文件中的sql语句进行调试。下面介绍如何将Oracle数据库迁移到sqlServer2步骤准备工具:Orac
AMD中国
·
2024-01-09 10:56
hive
sql的常用日期处理函数总结
1)date_format函数(根据格式整理日期)作用:把一个字符串日期格式化为指定的格式。selectdate_format('2017-01-01','yyyy-MM-ddHH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式 结果:2017-01-0100:00:002)date_add、date_sub函数(加减日期)作用:把一个字符串日期格式加一天、减一天。selec
*Snowgrass*
·
2024-01-09 09:43
HIVE
SQL数据分析常用案例总结
Hive
计算最大连续登陆天数3个常考的SQL数据分析题(干货建议收藏)sql数据分析案例和学习资料https://mp.weixin.qq.com/mp/appmsgalbum?
fragrans
·
2024-01-09 09:41
Hive
sql
数据分析
big
data
doris
部署
doris
-2.0.1.1部署安装一、下载
doris
安装包二、解压到/data下,修改名称三、修改fe配置文件四、启动
doris
-fe五、验证
doris
-fe六、修改be配置文件七、启动
doris
-be
码海小虾米_
·
2024-01-09 09:50
数据库
adb
doris
linux
数据库
sqlite3 - 将数据库的表
导入到
另一个数据库
文章目录方式一:使用客户端导入csv文件方式二:使用.import命令导入csv文件方式一:使用客户端导入csv文件有一个数据写入到了test_db的table1,不想重新录入到product_db的table1,所以想直接导过去。看了下网上的方法,大部分都是需要attach操作,然后目前的客户端没有这样的支持(或是我没找到)于是用笨方法,将test_db.table1导出为csv文件,然后去pr
小田_
·
2024-01-09 09:44
数据库
数据库
表迁移
卷积神经网络|猫狗分类系列--导入kaggle猫狗数据集
我们将从https://www.kaggle.com/competitions/dogs-vs-cats/data下载猫狗数据集,并对其进行一定的操作,以正确的
导入到
我们的计算机,为接下来的模型训练做准备
霜溪
·
2024-01-09 09:40
pytorch
cnn
分类
深度学习
mysql存储引擎
主要的存储引擎包括Myisam、InooDB、BDB、MEMMORY、ARC
HIVE
、CSV等,其中InooDB和BDB引擎提供事务安全表,其他是非安全的,一般采用InooDB引擎。
程序媛-jjl
·
2024-01-09 08:56
mysql
Hive
操作命令上手手册
内容来自于《大数据
Hive
离线计算开发实战》
Hive
原理
Hive
是一个基于Hadoop的数据仓库和分析系统,用于管理和查询大型数据集。
枫叶梨花
·
2024-01-09 08:50
Hive知识圈
hive
hadoop
数据仓库
PySpark-Spark SQL基本介绍
目录SparkSQL基本介绍SparkSQL特点SparkSQL与
Hive
的异同SparkSQL的数据结构SparkSQL的入门创建SparkSession对象DataFrame详解DataFrame基本介绍
Sisi525693
·
2024-01-09 07:37
spark
大数据
分布式
Hive
查询之函数(二)
炸裂函数把一个容器的多个数据炸裂出单独展示:explode(容器)炸裂函数配合侧视图使用如下格式:select原表别名.字段名,侧视图名.字段名from原表原表别名lateralviewexplode(要炸开的字段)侧视图名as字段名;--UDTF:一进多出selectexplode(array('binzi','666','888'));selectexplode(map('a',1,'b',2
Sisi525693
·
2024-01-09 07:36
hive
hadoop
数据仓库
Hive
查询之常用语法
目录语法结构基本查询知识点数据准备练习多表查询数据准备练习
hive
排序操作示例抽样查询知识点示例正则模糊查询union联合查询CTE表达式内置虚拟列语法结构select[distinct]字段名from
Sisi525693
·
2024-01-09 07:35
hive
hadoop
数据仓库
Redis的常用命令
:1、基于内存存储,读写性能高redis官网:Redis中文网Redis下载与安装Redis安装包分为Windows版和Linux版windows版下载地址:Releases·microsoftarc
hive
suweijie768
·
2024-01-09 07:27
redis
数据库
缓存
hive
的基本操作
最近新学了
hive
,想通过写文章的方式对所学知识进行巩固,同时希望可以帮助到大家
Hive
是基于Hadoop的一个数据仓库工具1.创建数据库(创建方法是和Mysql一样的)createdatabase数据库名字
暴打小赵
·
2024-01-09 06:49
hive
hive
数据库
mysql
实验6 熟悉
Hive
的基本操作
一、实验目的(1)理解
Hive
作为数据仓库在Hadoop体系结构中的角色。(2)熟练使用常用的
Hive
QL。
Z.Q.Feng
·
2024-01-09 06:47
实验报告
大数据技术与原理
实验报告
hive
大数据
【
Hive
】
Hive
基本操作
Hive
定义了一套自己的SQL,简称HQL,它与关系型数据库的SQL略有不同,但支持了绝大多数的语句如DDL、DML以及常见的聚合函数、连接查询、条件查询。
New soul~
·
2024-01-09 06:47
hive
基本操作与应用
1、通过hadoop上的
hive
完成WordCount启动hadoop2、Hdfs上创建文件夹/3、上传文件至hdfs4、启动
Hive
5、创建原始文档表6、导入文件内容到表docs并查看7、用HQL进行词频统计
weixin_34416649
·
2024-01-09 06:16
大数据
物理机搭建
hive
一、修改Hadoop配置修改core-site.xml配置yarn-site.xml分发文件,然后重启集群二、
Hive
解压安装上传文件添加
hive
环境便量,source生效启动高可用集群,启动
hive
三
DIY……
·
2024-01-09 06:45
hive
hadoop
数据仓库
Hive
基本操作
hive
简单认识
Hive
是建立在HDFS之上的数据仓库,所以
Hive
的数据全部存储在HDFS上。
X晓
·
2024-01-09 06:45
hive
big
data
mysql
Hive
的 安装与部署
目录1安装MySql2安装
Hive
3
Hive
元数据配置到MySql4启动
Hive
Hive
官网1安装MySql为什么需要安装MySql?
夏木夕
·
2024-01-09 06:41
#
大数据
hive
hadoop
Hive
学习(14)json解析get_json_object()函数
一、语法目的:在一个标准JSON字符串中,按照指定方式抽取指定的字符串。stringget_json_object(string,string)参数说明json:必填。STRING类型。标准的JSON格式对象,格式为{Key:Value,Key:Value,…}。如果遇到英文双引号("),需要用两个反斜杠(\)进行转义。如果遇到英文单引号('),需要用一个反斜杠(\)进行转义。path:必填。ST
一个天蝎座 白勺 程序猿
·
2024-01-09 06:40
hive
学习
json
sql
数据仓库
熟悉
Hive
的基本操作
4、实验步骤(一)创建一个内部表stocks,字段分隔符为英文逗号,表结构下所示。col_namedata_typeexchangestringsymbolstringymdstringprice_openfloatprice_highfloatprice_lowfloatprice_closefloatvolumeintprice_adj_closefloat创建内部表stocks:create
cwn_
·
2024-01-09 06:39
大数据
hive
hadoop
数据仓库
大数据
Hive
中的四种排序
1.orderby全局排序,只有一个Reducer(多个reducer无法保证全局有序),会导致当输入规模较大时,消耗较长的计算时间
hive
.mapred.mode=strict模式下必须指定limit
Young_IT
·
2024-01-09 06:38
大数据开发
hive
hadoop
数据仓库
某大厂大数据开发-外包面试
笔试题:
hive
-sql一个表tbl:c_idu_idscore用SQL计算每个班级top5学生的平均分表A(uid,bid),uid代表:用户idbid代表:uid关注的用户id表数据示例:uidbid12
劝学-大数据
·
2024-01-09 06:42
面试
职场和发展
大数据
自动化办公excel
一、应用场景:----可以完成什么操作①把mysql数据
导入到
excel文件中,然后报错了导出来日期类型是反着的,格式对不上列:MySQL的格式:2023/12/12excel:12/12/2023解决办法
桃花坞生动的芒果
·
2024-01-09 04:33
爬虫
excel
python
非小米电脑安装小米电脑管家
博客地址非小米电脑安装小米电脑管家https://xue6ing.cn/arc
hive
s/fei-xiao-mi-dian-nao-an-zhuang-xiao-mi-dian-nao-guan-jia
xB77
·
2024-01-09 03:33
电脑
上一页
33
34
35
36
37
38
39
40
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他