大数据-hive

互联网对信息的传输

因为我们现在每天都在无时无刻的接触大数据或联网信息。我们每天都要处理以亿为单位的数据信息量。那么如果说没有大数据的互联网的存在，那么我们的数据可能会崩溃。就是因为有了互联网大数据的存在。
深度链的新鲜事·2024-02-20 11:08

「连载」边缘计算（十六）02-19：边缘部分源码（源码分析篇）

KubeEdge/cloud/pkg/edgecontroller/controller.go//Startcontrollerfunc(ctl*Controller)Start(c*beehiveContext.Context
十越科技·2024-02-20 10:53

「连载」边缘计算（十五）02-18：边缘部分源码（源码分析篇）

KubeEdge/beehive/pkg/core/context/context.go//ChannelContextisobjectforContextchanneltypeChannelContextstruct
十越科技·2024-02-20 10:52

Hive使用双重GroupBy解决数据倾斜问题

createtablewordcount(astring)rowformatdelimitedfieldsterminatedby‘,’;loaddatalocalinpath‘opt/2.txt’intotablewordcount;hive
黄土高坡上的独孤前辈·2024-02-20 10:29

大数据 - Spark系列《六》- RDD详解

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-20 10:55

大数据 - Spark系列《七》- 分区器详解

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-20 10:55

Hive切换引擎(MR、Tez、Spark)

Hive切换引擎(MR、Tez、Spark)1.MapReduce计算引擎(默认)sethive.execution.engine=mr;2.Tez引擎sethive.execution.engine=
落空空。·2024-02-20 10:54

透彻理解实时数仓的支撑技术：Upsert Kafka 和 Flink 动态表（Dynamic Table）

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
　Laurence·2024-02-20 10:23

Hive框架(三) —— Hive SQL语句的执行顺序

HQL的语句执行顺寻与SQL有一定的差别HiveSQLFrom-where-join-on-select-groupby-select-having-distinct-orderby-limit-union
爱睡觉的考拉yxl·2024-02-20 10:52

二百二十三、Kettle——从Hive增量导入到ClickHouse(根据day字段判断)

一、目的需要用Kettle从Hive的DWS层库表数据增量同步到ClickHouse的ADS层库表中，不过这次的增量判断字段是day字段，不像之前的create_time字段因为day字段需要转换类型，
天地风雷水火山泽·2024-02-20 10:20

2022-01-07

真的为祖国自豪，大数据一刷就知道你去哪哪哪了。回来把我把我乱糟糟的头发剪了一下瞬间感觉自己年轻了。剪断烦恼丝，明天应该可以全身心的去加人了。
久睡成瘾的范·2024-02-20 10:32

Hive SQL——group by函数的注意点

HiveSQL的groupby对比MySQL，有一个让我特别不能接受的原则：select后面所有的列中，没有使用聚合函数的列，必须出现在groupby子句中。
xia ge tou lia·2024-02-20 10:16

HiveSQL——统计当前时间段的有客人在住的房间数量

注：参考文章：HiveSQL一天一个小技巧：如何统计当前时间点状态情况【辅助变量+累计变换思路】_sql查询统计某状态出现的次数及累计时间-CSDN博客文章浏览阅读2k次，点赞6次，收藏8次。
爱吃辣条byte·2024-02-20 09:42

如何利用空号检测 API 降低企业的业务成本

空号检测API的工作原理技术原理和流程空号检测API是一种基于云计算的人工智能技术，它可以通过大数据
API小百科_APISpace·2024-02-20 09:29

NSCoding对象存储(注意:以后使用NSSecureCoding)

文件存储：NSData类提供了一个方法，可以直接将NSData实例存储到文件中3.相关知识介绍NSCoder类是一个抽象类，用来被其他的类继承NSKeyedArchiver和NSKeyedUnarchi
皮蛋豆腐酱油·2024-02-20 09:38

晚间随笔｜有些书想读就去读吧

最近刷视屏总能刷到很多读书笔记，经典好书等内容，看来是大数据知道我的心思，专门给我推送这些内容。今天最大的感触就是，有些书一定要在余生时光里将它读完，方不负此生。
三合燕子·2024-02-20 09:40

MySQL系列之数据导入导出

前言大数据与云计算作为当今时代，数据要素发展的“动力引擎”，已经走进了社会生活的方方方面。而背后承载的云服务或数据服务的高效运转，起了决定作用。作为数据存储的重要工具，数据库的品类和特性也日新月异。
ZHOU西口·2024-02-20 09:00

干货分享！7个方向下手，一步步学会精益管理

引言：近年来生产智造、大数据、商业智能等概念越来越火，许多企业纷纷加入了智造变革的大军，但往往因为忽略了精益管理而烂尾无数，企业智造之路仿佛陷入了困境。
一帆简书·2024-02-20 09:15

hive load data未正确读取到日期

1.源数据CSV文件日期字段值：2.hiveDDL语句：CREATEEXTERNALTABLE`test.textfile_table1`(`id`intCOMMENT'????'
dogplays·2024-02-20 08:48

测试环境搭建整套大数据系统（三：搭建集群zookeeper，hdfs，mapreduce，yarn，hive）

一：搭建zkhttps://blog.csdn.net/weixin_43446246/article/details/123327143二：搭建hadoop，yarn，mapreduce。1.安装hadoop。sudotar-zxvfhadoop-3.2.4.tar.gz-C/opt2.修改java配置路径。cd/opt/hadoop-3.2.4/etc/hadoopvimhadoop-env.
宇智波云·2024-02-20 08:05

物联网水域信息化：水质监测智慧云平台

且传统水务行业信息化手段单一，缺乏对大数据等新技术的应用，一定程度上影响了水务工作的精细化和智能化程度。系统特点为解决传统水质自动监测站建设占地大、运维成本高等等问题。
郭靖守襄阳【软芯民用】·2024-02-20 08:01

大数据分析学习第十五课 自建云服务器集群离线安装Ambari2.7.5和HDP3.1.5(一)

之前了解了很多关于大数据平台一站式部署管理的工具，比如ApacheAmbari和CDH，目前最新的CDH已经没有了社区版，也就是说以后使用新版本的ClouderaManager和CDH都是要收费的，这对于很多小公司来说
猫头鹰数据分析·2024-02-20 08:29

数字化转型导师坚鹏：政府数字化转型之数字化技术

政府数字化转型之数字化技术——物联网、云计算、大数据、人工智能、虚拟现实、区块链、数字孪生、元宇宙等综合解析及应用课程背景：数字化背景下，很多政府存在以下问题：Ø 不清楚新技术的发展现状？
银行数字化转型导师坚鹏·2024-02-20 07:24

作业帮 x TiDB丨多元化海量数据业务的支撑

经过近十年的积累，作业帮运用人工智能、大数据等技术，为学生、老师、家长提供学习、教育解决方案，智能硬件产品等。随着公司产品和业务场景越来越丰富，数据量越来越大，业务方对数据库的使用需求也越来越多元化。
TiDB_PingCAP·2024-02-20 07:46

Elasticsearch查询报错 Result window is too large

一现象：es数据分页查询前端提示系统异常，后端报错日志二根本原因：默认情况下，Elasticsearch限制了from+size参数的组合不能超过10,000条记录，用于防止查询大数据集时对系统资源的过度消耗三解决办法
wit_cx·2024-02-20 07:00

大数据技术之 Kafka

大数据技术之Kafka文章目录大数据技术之Kafka第1章Kafka概述1.1定义1.2消息队列1.2.1传统消息队列的应用场景1.2.2消息队列的两种模式1.3Kafka基础架构第2章Kafka快速入门
efzy·2024-02-20 07:26

【Flink】ClassNotFoundException: org.apache.hadoop.conf.Configuration

问题背景在Flink的sql-client客户端中执行连接hive的sql代码时出现如下错误，版本Flink1.13.6FlinkSQL>createcatalogtestwith(>'type'='hive
一杯咖啡半杯糖·2024-02-20 07:38

Python招聘信息爬虫+数据分析+可视化系统+薪资预测+岗位推荐（大数据项目）计算机毕业设计 源码下载

boss直聘招聘信息爬虫+数据分析+可视化系统+薪资预测+岗位推荐（大数据项目）计算机毕业设计源码下载一、开发技术pycharm、MySQL数据库/sqlite3数据库、Python3.x版本、Flask
计算机毕业设计指导·2024-02-20 06:39

Flink Catalog 解读与同步 Hudi 表元数据的最佳实践

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
　Laurence·2024-02-20 06:28

美丽链——三星推出了基于区块链的数字金融平台Nexfinance

三星集团IT子公司三星SDS对外推出了一种新的数字金融平台Nexfinance，Nexfinance上应用了人工智能、生物识别、区块链、大数据分析及流程自动化等全新的IT技术。
热情A·2024-02-20 06:09

bypy：使用Linux命令行上传及下载百度云盘文件（远程服务器大文件传输必备）

诸神缄默不语-个人CSDN博文目录由于众所周知的原因，国内不方便上谷歌云盘，所以很多开源项目的大数据集、预训练模型等也会同时提供百度网盘形式存储的下载链接。
诸神缄默不语·2024-02-20 06:25

ADO.NET大数据查询内存分页处理

ADO.NET大数据查询内存分页处理在ADO.NET中处理大数据查询时，如果直接在客户端应用程序中进行内存分页，可能会导致内存使用量激增，特别是在处理数十万甚至数百万条记录时。
管理大亨·2024-02-20 06:47

《一闪一闪亮星星》观后感

大数据推测到了我的想法，把关于这事不实的消息又推送给了我。于是乎，就秉持着随便看一看的想法打开了第一集。好家伙，真香虽迟但到！女主虽然已经30+了，但是看着还是很嫩，很可爱，扮演高中生，毫无违和感。
采蘑菇的小Timor·2024-02-20 06:47

打造AI时代竞争力：全面解析学习人工智能所需的硬核实力与软实力

随着大数据的爆发增长、算力的飞速提升和算法的不断创新，投身于AI领域不仅是职业发展的明智选择，也是实现技术改变世界愿景的重要途径。
极客代码·2024-02-20 06:35

ETL数据集成工具DataX、Kettle、ETLCloud特点对比

ETL数据集成工具对于数据仓库，大数据集成类应用，通常会采用ETL工具辅助完成。
RestCloud·2024-02-20 05:28

未来十年

贵阳大数据世博会圆满成功，给贵阳经济发展带来很多发展机遇。
IT蜂盾·2024-02-20 05:26

【研究生复试】计算机&软件工程&人工智能研究生复试——资料整理（速记版）——计算机体系结构

1、JAVA2、计算机网络3、计算机体系结构4、数据库5、计算机租场原理6、软件工程7、大数据8、英文自我介绍3.计算机体系结构1.基本概念2.指令与寻址3.输入输出系统、贮存体系现代：存储器为中心冯诺依曼
沐风—云端行者·2024-02-20 05:16

【研究生复试】计算机&软件工程&人工智能研究生复试——资料整理（速记版）——JAVA

1、JAVA2、计算机网络3、计算机体系结构4、数据库5、计算机租场原理6、软件工程7、大数据8、英文自我介绍1.Java1.
沐风—云端行者·2024-02-20 05:46

【研究生复试】计算机&软件工程&人工智能研究生复试——资料整理（速记版）——数据库

1、JAVA2、计算机网络3、计算机体系结构4、数据库5、计算机租场原理6、软件工程7、大数据8、英文自我介绍4.数据库1.B+树相对于B树的区别及优势B树中有重复元素，B树没有重复元素B树种每个节点都存储了
沐风—云端行者·2024-02-20 05:46

【研究生复试】计算机&软件工程&人工智能研究生复试——资料整理（速记版）——自我介绍（英文）

1、JAVA2、计算机网络3、计算机体系结构4、数据库5、计算机租场原理6、软件工程7、大数据8、英文自我介绍自我介绍英文自我介绍英文第一段：Goodafternoon,dearprofessors,thankyouforthechancetointroducemyself.MynameisYanZhenXing
沐风—云端行者·2024-02-20 05:45

【研究生复试】计算机&软件工程&人工智能研究生复试——资料整理（速记版）——计算机网络

1、JAVA2、计算机网络3、计算机体系结构4、数据库5、计算机租场原理6、软件工程7、大数据8、英文自我介绍2.计算机网络1.TCP如何解决丢包和乱序？
沐风—云端行者·2024-02-20 05:13

医药零售企业运营BI解决方案 连锁药房大数据解决方案 药店大数据解决方案

一、项目背景连锁药店大数据项目建设的背景可以从以下几个方面进行分析：行业趋势：随着医药行业的快速发展，连锁药店已成为药品零售的主要渠道。然而，随着市场竞争的加剧，连锁药店需要寻找新的竞争优势。
Data-Miner·2024-02-20 05:40

数据仓库、大数据平台、数据中台的区别

2、数据仓库、大数据平台、数据中台都是什么？3、大数据平台硬件架构如何设计？4、数据仓库、大数据平台、数据中台架构如何理解？
000X000·2024-02-20 05:30

我该建数仓、大数据平台还是数据中台？看完脑子终于清醒了

一、层出不穷的新名词现在各种新名词层出不穷：顶层的有数字城市、智慧地球、智慧城市、城市大脑；企业层面的有数字化转型、互联网经济，数字经济、数字平台；平台层面的有物联网，云计算，大数据，5G，人工智能，机器智能
zl1zl2zl3·2024-02-20 05:30

【30秒看懂大数据】数据标准

点击上方「蓝字」关注我们30秒看懂大数据专栏让您在有限的碎片化时间，快速看懂最火热的大数据简单说：数据标准数据标准是指对数据具有一定约束的规范，用以保证数据的一致性及准确性。
风姑娘数据说·2024-02-20 05:00

数据指标体系实战：社区团购浪潮下叮咚买菜如何运营突围

文章同步公众号：数据新商业专业有深度的实战文章带你晋升高阶岗位作者介绍：数分团队leader专业书籍《数据实践之美》作者之一欢迎通过公号联系我加入大数据交流群最近民生一大热点，社区团购。
风姑娘数据说·2024-02-20 05:29

【30秒看懂大数据】什么是数据运营

简单说数据运营是对企业数据进行一定的整理和分析，以便帮助企业解决业务难和决策难的问题。举例理解我们以做饭为例子做个简单的解释。妈妈说周末她的闺蜜来串门，因为她后面还有事所以能待的时间很短，让我准备一些菜来招待她，时间比较紧张，让我注意点，并且不能丢她的人。1、在有限的时间做好菜且味道可口是一个难题=数据运营中的业务问题。2、为了充分利用好时间和预算我先拟定了一个流程计划=数据运营制定策略。3、我决
风姑娘数据说·2024-02-20 05:29

【30秒看懂大数据】变量

简单说变量是指研究或观察中可能发生变化的事物、属性或特征，它们可以用来描述数据或现象的不同方面。举例理解一位热衷于烹饪的大厨老李，经常尝试不同的菜肴来满足不同顾客的口味。1.老李明白，每种食材都等同于一个重要的变量。他不仅关注食材的种类，还注重新鲜程度、产地和季节性。这些变量决定了菜肴的味道和质量。2.老李也认识到不同的烹饪方法属于另一组重要的变量。烹饪时间、温度和烹饪器具都会影响菜肴的口感和外观
风姑娘数据说·2024-02-20 05:29

【30秒看懂大数据】数据中台

点击上方「蓝字」关注我们30秒看懂大数据专栏让您在有限的碎片化时间，快速看懂最火热的大数据简单说：描述性分析中台是相对于前台和后台而言，数据中台就是对于数据进行加工、整理、分析、应用的一个中间平台，较于数据中台而言
风姑娘数据说·2024-02-20 05:58

以内存为核心的开源分布式存储系统

是一个以内存为核心的开源分布式存储系统，也是目前发展最迅速的开源大数据项目之一。
这次靠你了·2024-02-20 05:26
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他