大数据-HIVE

【0121读书清单】一本书读懂大数据2

1.数据和企业管理中，高层更看重重大数据，并根据数字读出其中的变化.2.目标管理中的量化-SMART原则中M-measurable，既将绩效指标量化或者行为话，并确保相关数据的可收集.3.管理员工最终最求的一个量化的结果
卖艺的小青年Ace剑心·2024-01-28 13:31

[AIGC大数据基础] Spark 入门

大数据处理已成为当代数据领域的重要课题之一。为了高效地处理和分析大规模数据集，许多大数据处理引擎应运而生。其中，Spark作为一个快速、通用的大数据处理引擎备受关注。
程序员三木·2024-01-28 12:32

超大分页优化

在数据库系统中进行大数据量的分页查询时，传统的分页方法（如使用LIMIT和OFFSET）可能会导致性能问题。随着OFFSET的增长，查询性能往往会线性下降。
辞暮尔尔-烟火年年·2024-01-28 12:22

【阿里巴巴】阿里妈妈联盟-Java研发工程师-杭州

杭州｜正式｜硕士｜研发-后端职位｜1年工作经验职位描述参与广告内容生产和分发工作，深入了解和优化电商广告业务；负责大数据计算、搜索推荐系统和业务应用系统设计；参与大型业务项目的设计和实施，推动业务快速迭代发展
探小虎·2024-01-28 12:20

oracle数据同步开源,阿里开源数据同步工具--DataX

：能够将MySQLsqlServerOracleHiveHBaseFTP之间进行稳定高效的数据同步。设计思路：网状连接-》星型连接看图：目前支持哪些数据同步？
海纳易拓·2024-01-28 12:09

mysql 同步 工具 开源_开源数据同步工具——datax

开源数据同步工具——dataxDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、
weixin_39942572·2024-01-28 12:08

Presto源码阅读——如何获取Hive中的Metadata(HMS+HDFS)

Presto源码阅读——如何获取Hive中的Metadata(HMS+HDFS)本文的Metadata定义SQLonHadoop系统在执行一个query时所需要的Metadata主要有两部分Hive中的
stiga-huang·2024-01-28 12:38

0.1折手游人气最多的是哪个 0.1手游官网哪个好

现在的手游折扣平台很多，每家几乎都是不一样的折扣水准，所以说选择一个靠谱的平台是玩家最基本的原则，本期小编就根据现在的大数据统计来盘点几个值得推荐的0.1折手游平台，一起来瞧瞧有哪些吧！
会飞的鱼儿·2024-01-28 12:36

Impala-shell卡顿分析——记一次曲折的Debug经历

Impala-shell卡顿分析——记一次曲折的Debug经历问题发现最近准备在Impala中增加对UTF-8的支持，以修正跟Hive、Spark等基于Java的系统在UTF-8字符串上的不兼容表现（如
stiga-huang·2024-01-28 12:06

Impala元数据简介

与其它SQL-on-Hadoop的ROLAP解决方案如Presto、SparkSQL等不同的是，Impala对元数据（Metadata/Catalog）做了缓存，因此在做查询计划生成时不再依赖外部系统（如Hive
stiga-huang·2024-01-28 12:05

Impala元数据缓存的生命周期

在Hive中建了个新表，但在Impala中不可见，如何解决？在Hive中建了个新的函数，
stiga-huang·2024-01-28 12:05

Impala依赖组件的客户端源码下载

比如Impala-4.3.0依赖的CDP_BUILD_NUMBER是44206393，在bin/impala-config.sh中也列出了组件版本，如Hive版本是3.1.3000.7.2.18.0-273
stiga-huang·2024-01-28 12:04

开源数据同步工具DataX

DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS
快乐江小鱼·2024-01-28 12:34

黑猴子的家：Hive 删除数据库

1、删除空数据库hive>dropdatabasedb_hive2;2、如果删除的数据库不存在，最好采用ifexists判断数据库是否存在hive>dropdatabasedb_hive2;FAILED
黑猴子的家·2024-01-28 11:12

hive之行转列与列转行的实现

一：前言在某些场景下比如报表的产出，为了更加易于理解，往往会行列互置这样显示，又或者我们需要将某个相同键的值，所属的属性进行合并显示，这样都会用到行转列或者列转行。二：行转列如何实现使用lateralview结合explode这样的UDTF进行实现，由于explode的参数要求是list()或者array()类型，所以往往还需要用到spilt函数进行分割。以下是一个演示：selectsplit(d
愤怒的谜团·2024-01-28 11:02

今日要闻

人民日报：区块链技术助推贫困地区产业发展据2月14日人民日报刊文《互联网技术落地助脱贫》消息称，人工智能、区块链、云计算、大数据等技术，也被越来越多地运用到贫困地区产业发展等多个方面。
倾成读书·2024-01-28 11:19

66.管理Hive外部表——Sentry

66.1演示环境介绍操作系统：CentOS6.5CM和CDH版本：5.12.1采用root用户操作集群运行正常，Kerberos/HDFS/Hive/Impala/Hue服务已与Sentry集成，Hive
大勇任卷舒·2024-01-28 11:57

浅谈Hive和HBase有哪些区别与联系及适用场景

在学大数据分析的过程中，Hive和HBase是两个非常重要的内容，对于初学者而言容易混淆。所以比较两者的联系与差别，能够帮助我们对这两个组件有一个清晰的认识和定位。
尚学先生·2024-01-28 11:19

亚马逊云科技在中国推出数字孪生服务；Aurora裁员3%；特斯拉2023年总营收967.73亿美元丨每日大事件...

‍大数据产业创新服务媒体——聚焦数据·改变商业企业动态亚马逊云科技在中国推出数字孪生服务1月25日消息，亚马逊云科技宣布，通过与光环新网的紧密合作，在亚马逊云科技（北京）区域推出数字孪生服务AmazonIoTTwinMaker
数据猿·2024-01-28 11:10

用友网络发布2023年业绩预告；Meta将新建价值8亿美元数据中心；2024年全球科技业裁员人数已超9500人丨每日大事件...

‍大数据产业创新服务媒体——聚焦数据·改变商业企业动态Cruise通报受美国司法部和证交会调查一事1月26日消息，通用汽车旗下无人驾驶部门Cruise通报了其受到美国司法部及美国证券交易委员会问询一事，
数据猿·2024-01-28 11:10

从创新者到引领者：探索第四范式的AI之旅

大数据产业创新服务媒体——聚焦数据·改变商业如今，人工智能已成为改变世界、驱动各行各业变革的核心源动力。
数据猿·2024-01-28 11:39

【机器学习笔记】1 机器学习概念

深度学习实现机器学习的一种技术机器学习的范围机器学习可以解决给定数据的预测问题，包括✓数据清洗/特征选择✓确定算法模型/参数优化✓结果预测）不能解决：x大数据存储/并行计算x做一个机器人机器学习的发展史总的来说
RIKI_1·2024-01-28 10:25

深度学习｜6.1 小批量梯度下降

把大数据集分成多批数据，每批数据分别计算他们的损失（可以并发处理，从而节省运行时间），最后将其取平均，作为整体的结果，然后参与到梯度下降的环节中去。
晓源Galois·2024-01-28 09:51

大模型｜基础——长短时记忆网络

文章目录LSTM遗忘门输入门整合信息特点实现神经单元的内部计算门控控制——可以动态选择信息在大数据量的情况下，可有效缓解梯度LSTM遗忘门遗忘门，是否进行遗忘。
晓源Galois·2024-01-28 09:51

计算机Java项目｜毕业生生活用品出售网站

领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、腾讯课堂常驻讲师主要内容：Java项目、Python项目、前端项目、人工智能与大数据
编程千纸鹤·2024-01-28 09:21

计算机Java项目｜SpringBoot网吧管理系统

领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、腾讯课堂常驻讲师主要内容：Java项目、Python项目、前端项目、人工智能与大数据
编程千纸鹤·2024-01-28 09:21

计算机node项目｜nodejs网上书城设计与实现

领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、腾讯课堂常驻讲师主要内容：Java项目、Python项目、前端项目、人工智能与大数据
编程千纸鹤·2024-01-28 09:21

计算机Java项目｜超市进销存管理系统

领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、腾讯课堂常驻讲师主要内容：Java项目、Python项目、前端项目、人工智能与大数据
编程千纸鹤·2024-01-28 09:19

2021-09-25

CellRepMet|算法设计探针定位、检测和分离病原体原创图灵基因图灵基因今天收录于话题#前沿生物大数据分析麦克马斯特大学（McMasterUniversity）的研究人员开发了一种先进的新工具，可以帮助提供环境中罕见和未知病毒的早期预警
图灵基因·2024-01-28 09:32

2021-10-02

NatMachIntell|基于深度学习的T细胞受体-抗原结合特异性预测原创huacishu图灵基因今天收录于话题#前沿生物大数据分析撰文：huacishuIF=15.501推荐度：⭐⭐⭐⭐⭐亮点：1、
图灵基因·2024-01-28 09:43

Hive SQL优化常见问题汇总

一、hive动态配置项hive.optimize.cp=true：列裁剪hive.optimize.prunner：分区裁剪hive.limit.optimize.enable=true：优化LIMITn
Luckyliboy·2024-01-28 09:07

hive常见问题汇总

>>>1、java.sql.SQLException:ColumnnamepatterncannotbeNULLorempty.在启动hive时，可能会遇到以下异常：java.sql.SQLException
weixin_34413802·2024-01-28 09:07

hive 常见问题汇总

1、hive的HiveMetaStore或者HiveServer2服务进程正常，但却不能提供相应服务原因：堆内存不足解决方案：在hive-env.sh中调整堆内存大小2、连接hivemetastore出现
cxy1991xm·2024-01-28 09:37

Hive常见问题汇总

Hive和Hadoop的关系Hive构建在Hadoop之上，HQL中对查询语句的解释、优化、生成查询计划是由Hive完成的所有的数据都是存储在Hadoop中查询计划被转化为MapReduce任务，在Hadoop
不加班程序员·2024-01-28 09:37

哪些网络安全方面的技术防止大数据泄露事件的发生

大数据时代让企业拥有了无比巨大的数据资源，但这同时也带来了严重的数据泄露风险。那么，哪些网络安全方面的技术防止大数据泄露事件的发生呢？这是一个需要每个企业都高度重视的问题。
蹦极的考拉·2024-01-28 08:55

临床医疗大数据治理框架

无论如何，大模型将是未来的行业的重要方向，而沉淀在各大医疗机构的临床数据极有可能在未来发挥更大的价值，在此梳理医疗大数据治理体系，仅作学习记录，欢迎同行专业人士阅后探讨与指点。
一刀道人·2024-01-28 08:24

100+套Axure数据可视化大屏展示原型模板

随着大数据的发展，可视化大屏在各行各业得到越来越广泛的应用。可视化大屏不再只是电影里奇幻的画面，而是被实实在在地应用在政府、商业、金融、制造等各个行业的业务场景中，切切实实地实现着大数据的价值。
招风的黑耳·2024-01-28 08:51

为了打到滴滴顺风车，我把头像换成自己最好看的自拍……

同样也是一个为了阅读量而奋不顾身的人，没有大数据的我，只能靠自己敏（chi
造三昧zerosame·2024-01-28 08:48

管理会计30讲之大数据读书笔记

大家好，我们今天所说的大数据主要是针对企业及企业财务人员的。作为一名专业财务人员，我们究竟要以什么样的姿态来面对大数据，而又有什么具体可操作的方法来运用大数据呢？
跳跳鱼_学习成长教练·2024-01-28 08:37

Axure数据可视化BI大屏看板原型 FUI动态大数据分析后台

入职新公司半年，经手的两个项目和已经立项的下一个项目都是与数据掘金、数字孪生相关，销售部为银行客户讲解项目时用的是高保真可交互的Axure原型，这就要求我设计出符合演示需求的原型，但由于涉及的可视化图表较多、交互效果较复杂、远程沟通效率低等原因，也为了更快就出图，用现成的可视化组件库/元件库来复用就成了我的基本需求。所以我找到了一套符合数据产品经理/B端交互设计师（BI方向）快速出图的可视化Axu
m0_54853420·2024-01-28 08:18

Spark——Spark/Hive向量化查询执行原理分析（Vectorization Query Execution）

文章目录什么是向量化查询执行列式存储Spark向量化查询执行Hive向量化查询执行参考什么是向量化查询执行在标准的查询执行系统中，每次只处理一行数据，每次处理都要走过较长的代码路径和元数据解释，从而导致
Southwest-·2024-01-28 08:47

Spark——Spark读写MongoDB

文章目录Spark直连MongoDB1.通过SparkConf2.通过ReadConfig3.通过DataFrameReaderHive中创建映射表mongoexport导出文件参考如果我们要想通过Spark
Southwest-·2024-01-28 08:46

宋绪杰：我的大数据成长之旅 | 提升之路系列（三）

导读为了发挥清华大学多学科优势，搭建跨学科交叉融合平台，创新跨学科交叉培养模式，培养具有大数据思维和应用创新的“π”型人才，由清华大学研究生院、清华大学大数据研究中心及相关院系共同设计组织的“清华大学大数据能力提升项目
数据派THU·2024-01-28 08:14

2024新版68套Axure RP大数据可视化大屏模板及通用组件+PSD源文件

AxureRP数据可视化大屏模板及通用组件库2024新版重新制作了这套新的数据可视化大屏模板及通用组件库V2版。新版本相比于V1版内容更加丰富和全面，但依然秉承“敏捷易用”的制作理念，这套作品也同样延续着我们对细节的完美追求，整个设计制作过程我们同样投入了大量的精力。作品制作前期整理各类素材和参考案例的就花费了大量的时间，相关的原始素材资源文件达到了数百G左右，消化这些内容便是一个很艰巨的任务，最
天天打码·2024-01-28 08:14

超流与大数据处理：架构与实践

1.背景介绍大数据处理是现代计算机科学和信息技术的一个重要领域。
OpenChat·2024-01-28 08:43

Spark——Spark读写Greenplum/Greenplum-Spark Connector高速写Greenplum

文章目录问题背景解决方式代码实现Spark写GreenplumSpark读Greenplum参考问题背景通过数据平台上的DataX把Hive表数据同步至Greenplum（因为DataX原生不支持GreenplumWriter
Southwest-·2024-01-28 08:42

Hive面试题*精选*！附答案！！！

HIVE面试一、Hive的基本概念1.什么是hiveHive是一款开源的基于hadoop的用于统计海量结构化数据的一个数据仓库，它定义了简单的类似SQL的查询语言，称为HQL，允许熟悉SQL的用户查询数据
yhy_only·2024-01-28 07:36

Hive面试题

Hive面试题1.Hive的架构2.Hive和数据库比较Hive和数据库除了拥有类似的查询语言，再无类似之处。1）数据存储位置Hive存储在HDFS。数据库将数据保存在块设备或者本地文件系统中。
肿么肥四啊哈·2024-01-28 07:34

Hive框架的搭建和使用_第三节_hive建表_分区_函数

Hive框架的搭建和使用_第三节_hive建表_分区_函数hive的相关操作分区建表函数系列化1.hive的内部外部表2.hive下的分区建表2.1单分区内部表2.2双分区内部表2.3外部表双分区2.4
下次遇见说你好·2024-01-28 07:34

2021-03-18

执行力系统的应用价值在这个互联网高速发展的时代，人工智能、大数据、云等诸多概念的提出，促使企事业单位都加快了信息化建设的进程。
b2byhm·2024-01-28 07:29
上一页 52 53 54 55 56 57 58 59 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他