大数据技术-Hadoop技术第14页

KaiwuDB 联合信通院数据库应用创新实验室召开数据库技术研讨沙龙

10月26日，KaiwuDB联合中国通信标准化协会大数据技术标准推进委员会（CCSATC601）、信通院数据库应用创新实验室主办的“夯实数据库技术底座，探索智能时代发展新篇章”主题技术沙龙在上海成功举办

KaiwuDB 数据库·2023-10-31 16:22

发布一站式反电诈工具，合合信息商业大数据技术助力银行守护群众“钱袋子”

近期，电影《孤注一掷》在社交媒体上引起了广泛的讨论，社会各界对于电信网络诈骗案件的关注度日益提升。真实世界中的电诈涉及金额之大、团伙成员之多，往往比电影更甚。为此，国家不断加大对电信诈骗的打击力度，出台《反电信网络诈骗法》等法案，并开展了系列专项活动。据媒体报道，成都市公安局成华分局于近期破获一起特大跨国“DCEP”数字人民币电信网络诈骗案，抓获跨国诈骗犯罪嫌疑人60余人；最高人民检察院、公安部也

合合技术团队·2023-10-31 11:10

Apache Doris (四十七）： Doris表结构变更-Schema变更

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。

IT贫道·2023-10-31 07:52

Apache Doris (四十八）： Doris表结构变更-替换表

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。

IT贫道·2023-10-31 07:17

新时代电商——大数据

同时系统内的智能搜索引擎，通过全网大数据技术匹配抓取相关线索。所有企业信息包括常用的维度以及、个性化企业画像，满足不同行业的拓客需求。一键导出目标企业联系方式至电话机器人平台。

gdnaig·2023-10-31 02:59

TDH 8.0 使用必读 1 ：为什么你需要存算解耦的多模型数据管理平台

帮助企业级数据平台用户更全面、深入地了解最新的大数据技术，更好地技术选型。【视频号视频】您也可以在星环科技官方视频号、星环社区服务号、以及bilibili、腾讯视频等站点看到我们的视频。

资讯汇·2023-10-31 00:06

云栖大会：两万人参会十大亮点抢先看

云计算和大数据技术正在释放科技的想象力，越来越多的企业先行者，开始在云平台上撬动世界的科技变革。而本次大会现场，到底会有哪些精彩内容?小编带你提

weixin_34110749·2023-10-30 21:40

本地windows操作虚拟机中的HDFS(伪分布式)

本文章是配合厦门大学林子雨的《大数据技术原理与应用》使用的本篇文章使用的环境如下:虚拟机：Ubuntu18.04百度网盘地址Hadoop:hadoop3.3.0阿里云网盘地址迅雷网盘地址windows:

CMCST·2023-10-30 18:10

智能巡检平台哪家好？为什么选择“的修”大数据管理平台

1、创新技术，提高工作效率“的修”大数据管理平台采用了先进的人工智能和大数据技术，能够实现自动化巡检和数据分析。与

dixiuapp·2023-10-30 09:43

【《数据库系统原理》学习笔记-第1章】

数据库系统概述概述基本概念数据数据库数据库管理系统数据库系统管理发展『人工管理阶段』『文件系统阶段』『数据库系统阶段』主页传送门：传送概述数据库系统原理课程是一门理论与实践相结合的课程，通过大数据技术

家有娇妻张兔兔·2023-10-30 01:21

《大数据导论：思维、技术和应用》摘要

对数据分析的新认识不是随机样本，而是全体数据不是纯净，而是混杂不是精确，而是趋势不是因果关系，而是相关关系大数据技术概述大

疯狂猪宝宝·2023-10-29 23:31

深入浅出：大妈也能看懂的大数据分布式计算

大数据技术虽然包含存储、计算和分析等一系列庞杂的技术，但分布式计算一直是其核心，想要了解大数据技术，不妨从MapReduce分布式计算模型开始。

你的社交帐号昵·2023-10-29 22:30

大数据技术综合分析：数据采集与预处理

大数据技术综合分析：数据采集与预处理在大数据时代，数据采集与预处理是构建可靠、高效的数据分析流程的关键步骤。

程序才子·2023-10-29 18:16

Uni-app智慧工地可视化信息平台源码

同时，智慧工地还可以通过人工智能和大数据技术，对工地数据进行深度分析和挖掘，发现潜在问题和规律，提出优化建议和预测预警，

源码技术栈·2023-10-29 02:47

[优秀文章]梅宏院士：大数据，发展现状与未来趋势

习近平总书记在十九届中共中央政治局第二次集体学习时的重要讲话中指出：“大数据是信息化发展的新阶段”，并做出了“推动大数据技术产业创新发展、构建以数据为关键

数据智能谷·2023-10-29 01:12

数据夜话之大数据OLAP数据库概览

当下大数据技术发展如火如荼，各种数据库处理技术层出不穷，可是各种数据库的大致分类清楚吗？能够结合项目数据的业务特点进行选型吗？今天先从OLAP型数据库说起，介绍相关的数据库。OLTP和OLAP分不清？

stillcoolme·2023-10-28 21:58

大数据技术之Hive

目录1.Hive入门1.1什么是Hive1.2Hive的数据存储1.3Hive的系统架构1.4Metastore1.5数据库与数据仓库的区别2.Hive安装部署2.1下载2.2安装MySQL2.3安装hive3.Hive基础使用3.1Hive操作之命令行方式3.2Hive操作之JDBC方式3.3查询后信息显示配置3.4Hive的日志配置4.Hive核心实战4.1数据库操作4.2表的操作4.2.1创

小猫不会去楼兰捉虫·2023-10-28 21:47

【大数据概述】Hadoop技术栈

目录1.Presto1.1.概述1.2.PrestoHive对比2.Hive2.1.Hive概述2.2.Hive与关系型数据库关系3.Hadoop3.1.概述3.2.Hadoop生态技术3.2.1.概述3.2.2.架构4.Spark4.1.概述4.1.1.统一的引擎5.数据存储及处理的发展5.1.数据仓库5.2.数仓+数据湖5.3.数仓一体化技术产生背景Kafka主要用来处理消息的（解耦异步削峰）

vk-fengz·2023-10-28 21:17

处理大数据的基础架构，OLTP和OLAP的区别，数据库与Hadoop、Spark、Hive和Flink大数据技术

处理大数据的基础架构，OLTP和OLAP的区别，数据库与Hadoop、Spark、Hive和Flink大数据技术2022找工作是学历、能力和运气的超强结合体，遇到寒冬，大厂不招人，可能很多算法学生都得去找开发

冰露可乐·2023-10-28 21:45

云计算与ai人工智能对高防cdn的发展

然而，随着人工智能（AI）和大数据技术的迅速发展，高防CDN技术也将面临新的挑战和机遇。本文将探讨未来AI和大数据技术对高防CDN技术的影响，并分析其可能的发展方向。

剑盾云安全专家·2023-10-28 21:02

java如何快速入门Hadoop大数据技术？

xyzkenan·2023-10-28 21:01

新手学习大数据技术如何入门?

新手学习大数据技术如何入门?

qq_38397646·2023-10-28 21:27

一名大数据新手，如何成为大数据工程师？附上学习路线

大数据技术最重要的核心在于如何设计可以高性能处理大量数据的程式(highlyscalableprograms.)目前大数据相关工作可以粗分几类。有资料系统串接者，设计大

juan333·2023-10-28 21:25

python数据分析学习心得

随着大数据技术和人工智能的不断发展，数据分析已经成为现代企业不可或缺的一部分。作为一名Python开发者，我也开始学习和探索数据分析的领域。

m0_74342615·2023-10-28 11:50

量分享| 你真的知道什么是“大数据”吗？

对于很多人来说，当他第一次听到“大数据”这个词，会自然而然从字面上去理解——认为大数据就是大量的数据，大数据技术就是大量数据的存储技术。但是，事实并非如此。大数据比想象中复杂。

金豆数据工程师·2023-10-28 09:05

第三课大数据技术之Fink1.13的实战学习-时间和窗口

第三课大数据技术之Fink1.13的实战学习-时间和窗口文章目录第三课大数据技术之Fink1.13的实战学习-时间和窗口第一节时间定义1.1Flink中的时间语义1.2两种时间语义的对比第二节水位线2.1

道教儒佛电磁波·2023-10-28 08:47

Kylin、Druid、ClickHouse核心技术对比

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！大数据真好玩点击右侧关注，大数据真好玩！

王知无(import_bigdata)·2023-10-28 08:28

大数据和智能数据应用架构系列教程之：大数据与社交网络分析

而近几年来，随着互联网公司将大数据平台作为重要竞争力，越来越多的企业开始采用大数据技术进行社会业务的分析与决策。尤其是基于社交网络的分析与挖掘具有十分重要的价值。

禅与计算机程序设计艺术·2023-10-28 07:16

Flink Streaming-Sink

大数据技术AIFlink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料100篇原创内容公众号圣诞节快乐该连接器提供了对Flink文件系统抽象支持的文件系统中的分区文件的访问.文件系统连接器本身就被包括在

hyunbar·2023-10-28 02:49

【遇见Doris】6.29线下开发者沙龙分享--Doris主创团队

6月29日，Doris有幸得到中国信通院云大所、大数据技术标准推进委员会的支持，在中国信通院举行了0.11.0新版本预览线下沙龙。各位嘉宾都带来了干货满满的分享。

ApacheDoris·2023-10-28 02:43

参加大数据培训需要多久勒

随着数据量日益暴增，大数据技术越来越火，吸引了很多其他传统行业的目光，大家都想在这个领域分的一杯羹。

在DT时代的路上·2023-10-28 00:55

数智化推送助力用户精准分层，MobPush是如何实现用户价值变现的

MobPush利用丰厚的大数据技术，通过用户标签和全链路数据统计，帮助众多APP

MobTech袤博科技·2023-10-27 19:42

数据管理解决方案 | 零售行业如何搭建全渠道大数据平台？

零售行业数据管理特点随着大数据技术的引进，零售商们的诉求集中在如何收集和利用与业务需求相关的数据，如何有效利用数据来促进业务增长等方面。但零售行业往往门店多、客户多、库存多，数据量大且繁杂，在数据管理

running_elephant·2023-10-27 01:40

【kafka技术篇】kafka数据到底会不会丢失？

博主介绍‍博主主页：淼淼_喵的博客_CSDN博客-Zookeeper,Hadoop,大数据技术领域博主✨主攻领域：【大数据开发】【数据仓库】【ETL】【数据分析】【面试分析】点赞➕评论➕收藏==养成习惯

chad__chang·2023-10-27 01:49

【唠唠嵌入式】__嵌入式方向真的“遥遥领先”吗？

No.1计算机科学与技术No.2数字媒体技术专业No.3信息安全专业No.4数据科学与大数据技术No.5软件工程总结嵌入式待遇如何？嵌入式容易晋升吗？

Rleco_·2023-10-26 23:24

大数据技术与实践

11.1大数据概述11.1.2大数据的定义大数据的“大”是相对而言的，是指所处理的数据规模巨大到无法通过目前主流数据库软件工具，在可以接受的时间内完成抓取、储存、管理和分析，并从中提取出人类可以理解的资讯。11.1.3大数据的4V特征业界普遍认同大数据具有4个V特征(数据量大Volume、变化速度快Velocity、多类型Variety与高价值Value)。简而言之，大数据可以被认为是数据量巨大且

 Mr. 劉℡·2023-10-26 13:10

大数据隐私保护技术综述 - 大数据

大数据隐私保护技术综述-大数据随着大数据技术的发展和广泛应用，人们对于大数据隐私保护的关注逐渐增加。在大数据环境下，个人和组织的隐私信息容易受到泄露和滥用的风险。

NoerrorCode·2023-10-26 08:03

Hadoop3.0大数据处理学习4（案例：数据清洗、数据指标统计、任务脚本封装、Sqoop导出Mysql）

案例需求分析直播公司每日都会产生海量的直播数据，为了更好地服务主播与用户，提高直播质量与用户粘性，往往会对大量的数据进行分析与统计，从中挖掘商业价值，我们将通过一个实战案例，来使用Hadoop技术来实现对直播数据的统计与分析

Huathy-雨落江南，浮生若梦·2023-10-26 07:33

大数据前端团队生存指南

开始前问几个问题：你了解大数据技术吗？为什么需要大数据前端团队（和大数据有什么关联）？大数据前端团队在前端团队中的定位？

悲伤日记·2023-10-26 07:39

大数据技术之Hadoop-入门

第1章Hadoop概述1.1Hadoop是什么分布式：多台服务器共同完成某一项任务。1.2Hadoop发展历史1.3Hadoop三大发行版本Hadoop三大发行版本：Apache、Cloudera、Hortonworks。Apache版本最原始（最基础）的版本，对于入门学习最好。2006Cloudera内部集成了很多大数据框架，对应产品CDH。2008Hortonworks文档较好，对应产品HDP

华尔街的幻觉·2023-10-26 06:14

尚硅谷大数据技术之电商用户行为数据分析

尚硅谷大数据技术之电商用户行为分析第1章项目整体介绍1.1电商的用户行为电商平台中的用户行为频繁且较复杂，系统上线运行一段时间后，可以收集到大量的用户行为数据，进而利用大数据技术进行深入挖掘和分析，得到感兴趣的商业指标并增强对风险的控制

okbin1991·2023-10-25 16:02

华为携手东方世纪开启防汛抗旱监测预警大数据时代

方案核心基于东方世纪19年来研发的通用洪水预报模型，搭载于华为鲲鹏云平台——实现了专业模型与大数据技术的完美结合，依托华为鲲鹏的强大算力提升了人类抵御洪涝灾害的能力。

祥云气象·2023-10-25 07:01

#后疫情时代的新思考#“大数据+行业”渗透融合全面展开，新业态正处酝酿期丨数据猿公益策划...

不仅各地政府及相关部门纷纷借助大数据技术助力疫

数据猿·2023-10-25 04:39

链动2+1模式：裂变增长，轻松吸引百万用户

链动2+1模式利用互联网大数据技术，采用合法裂变方式，推动业务快速发展。这种模式简单易懂，只需推荐两位朋友购买商城中的礼包即可升级为老板，轻松实现用户增长。该模式中的直接分润机制直接触及消费者内心。

DIZL11·2023-10-25 01:58

大数据技术导论|datawhale组队学习

学习链接：https://datawhalechina.github.io/juicy-bigdata/#/READMETask01阅读第一、二章第一章主要介绍了大数据的概念、应用以及其关键技术。第二章开始介绍hadoop的相关内容。附厦大子雨老师的mooc教程：https://dblab.xmu.edu.cn/blog/285/，提供一些安装步骤！安装过程中遇到的一个比较难搞的就是ssh配置那块

郑粗心·2023-10-24 20:43

测试饱和了? 大数据测试就业薪资和前景究竟怎么样？

只是最基础的岗位需求在慢慢变少了，但行业中比较深的细分岗位，仍存在着非常多的机会，比如大数据测试岗位，看看市场对大数据岗位招聘需求：1那什么是大数据测试随着业务规模越来越大，大数据是现在中大型企业实际面临的问题，大数据技术需要解决的是海量数据

软件测试老莫·2023-10-24 20:35

hadoop 伪分布式模式学习笔记

前言Hadoop在大数据技术体系中的地位至关重要，Hadoop是大数据技术的基础。这是一篇记录我自己学习的文章，Hadoop的学习方法很多，网上也有很多学习路线图。

金曜软件工程师·2023-10-24 16:44

【算法】加密解密算法（DES、3DES、SM2、SM3、SM4）以及RSA加密算法

DES算法的安全性在一定程度上受到了量子计算和大数据技术的冲击，因为它的密钥长度较短，容易被暴力破解。3DES（TripleDES）算法是DES算法的扩展，也称为三重DES。3DES算法使

奔向理想的星辰大海·2023-10-24 13:10

大数据技术学习笔记（三）—— Hadoop 的运行模式

目录1本地模式2伪分布式模式3完全分布式模式3.1准备3台客户机3.2同步分发内容3.2.1分发命令3.2.2执行分发操作3.3集群配置3.3.1集群部署规划3.3.2配置文件说明3.3.3修改配置文件3.3.4分发配置信息3.4SSH无密登录配置3.4.1配置ssh3.4.2无密钥配置3.5单点启动集群3.5.1启动HDFS集群3.5.2启动YARN集群3.6群起集群3.6.1配置workers

夏木夕·2023-10-24 09:06

大数据技术——Hadoop3.X入门搭建+安装调优（2.HDFS）

文章目录一、HDFS概述1.1HDFS产出背景及定义1.2HDFS优缺点1.3HDFS组成架构1.4HDFS文件块大小（面试重点）二、HDFS的Shell操作（开发重点）2.1基本语法2.2命令大全2.3常用命令实操2.3.1准备工作2.3.2上传2.3.3下载2.3.4HDFS直接操作三、HDFS的API操作3.1客户端环境准备3.2HDFS的API案例实操3.2.1HDFS文件上传（测试参数优

虚神公子·2023-10-24 08:56

推荐频道

大数据技术-Hadoop技术