大数据技术

个人笔记：分布式大数据技术原理（一）Hadoop 框架

大家想了解更多大数据相关内容请移驾我的课堂：大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理：剖析及实践数据建模剖析及实践数据资产运营平台ApacheHadoop软件库是一个框架，它允许使用简单的编程模型，实现跨计算机集群的大型数据集的分布式处理。它最初的设计目的是为了检测和处理应用程序层的故障，从单个机器扩展到数千台机器（这些机器可以是廉价的），每个机器提供本地计算和存储，
garagong·2024-01-09 22:15

NetDevOps的理解与学习路线

最近几年网络运维领域各种名字满天飞，SDN、SD-WAN、双态、智能运维、大数据技术、自动驾驶的网络、基于意图的网络、NAAS、数字孪生以及我们今天聊的NetDevOps。
九净·2024-01-09 21:42

基于AI+大数据技术的恶意样本分析（一）

阅读EnhancingState-of-the-artClassifierswithAPISemanticstoDetectEvolvedAndroidMalware翻译及笔记使用API语义增强最先进的分类器来检测不断发展的安卓恶意软件论文出处：CCS'20:Proceedingsofthe2020ACMSIGSACConferenceonComputerandCommunicationsSecu
Mo neyking·2024-01-08 22:16

大数据技术架构

1技术架构矩阵大数据技术栈虽然比较多，但可以抽象为输入（数据接入）--处理（数据处理、数据分析）--输出（数据应用）。
乘风踏羽·2024-01-08 17:47

2007-2022年上市公司数字化转型数据（区分年报和管理层讨论）（含原始数据+处理代码+结果）

2007-2022年上市公司数字化转型数据（年报和管理层讨论）（含原始数据+处理代码+结果）1、时间：2007-2022年2、指标：统计年度、证券代码、人工智能技术、区块链技术、云计算技术、大数据技术、
m0_71334485·2024-01-08 16:32

大数据技术期末复习第七章——MapReduce练习

习题1、【单选题】下列说法错误的是____B____。A、Map函数将输入的元素转换成形式的键值对B、Hadoop框架是用Java实现的，MapReduce应用程序则一定要用Java来写C、不同的Map任务之间不能互相通信D、MapReduce框架采用了Master/Slave架构，包括一个Master和若干个SlaveHadoop框架是用Java实现的，但是MapReduce应用程序不一定要用J
锦鲤儿·2024-01-08 12:01

2023进口婴儿奶粉十大品牌排行榜，口碑最好的进口婴儿奶粉

进口奶粉十大品牌依托大数据技术，综合品牌实力、产品销量、用户口碑、网友投票等近百项指标评选出了2023年进口奶粉十大品牌排行榜。
一起高省·2024-01-07 15:24

对JAVA行业的深度思考职业规划

其次，云计算和大数据技术的快速发展也对Java行业产生了积
Flying_Fish_roe·2024-01-07 12:16

个人笔记：分布式大数据技术原理（二）构建在 Hadoop 框架之上的 Hive 与 Impala

有了MapReduce，Tez和Spark之后，程序员发现，MapReduce的程序写起来真麻烦。他们希望简化这个过程。这就好比你有了汇编语言，虽然你几乎什么都能干了，但是你还是觉得繁琐。你希望有个更高层更抽象的语言层来描述算法和数据处理流程。于是就有了Pig和Hive。Pig是接近脚本方式去描述MapReduce，Hive则用的是SQL。它们把脚本和SQL语言翻译成MapReduce程序，丢给计
garagong·2024-01-07 07:16

ZB 级的大数据探索与应用实践「附 PPT」

11月30日UCan技术沙龙大数据专场（北京站）邀请了5位资深大数据技术专家分享他们对大数据的探索和应用实践。大数据业务常态化的处理手段与架构衍变很多开发人员在解决实际的业务问题时
UCloud_TShare·2024-01-07 03:44

ZB级的大数据探索与应用实践【附PPT】

11月30日UCan技术沙龙大数据专场（北京站）邀请了5位资深大数据技术专家分享他们对大数据的探索和应用实践。大数据业务常态化的处理手段与架构衍变很多开发人员在解决实际的业务问题时
浪尖聊大数据-浪尖·2024-01-07 03:44

分享2024大数据主要方向及岗位职责

根据大数据技术体系及对人才的需求，本标准围绕数据预处理、数据标注、数据分析、产品开发、项目实施与运维、平台建设、数据安全、数据管理、运营与应用、咨询服务等10个方向对人才的岗位能力进行说明。
泰迪智能科技·2024-01-07 01:14

《PySpark大数据分析实战》-23.Pandas介绍DataFrame介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-07 00:26

《PySpark大数据分析实战》-22.Pandas介绍Series介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-07 00:25

《PySpark大数据分析实战》-25.数据可视化图表Matplotlib介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-07 00:24

2020年的大数据趋势怎么样？倾向于那个方向，你知道吗？

因此，对于零基础想学IT技术的人而言，直接选择学习大数据技术是符合潮流和就业需求的选择。
Python大数据工程师·2024-01-05 22:28

数字化助力，聚道云软件连接器实现软件公司人事信息自动同步

公司依托先进的云计算和大数据技术，为公交企业提供全面的数字化转型服务，助力提升公共交通运营效率和服务质量。
聚道云连接器·2024-01-05 22:15

Apache Doris (六十一）： Spark Doris Connector - (1)-源码编译

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 14:40

Apache Flink连载（八）：Apache Flink架构

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 14:36

《PySpark大数据分析实战》-24.数据可视化图表介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-05 13:02

大数据开发个人简历范本（2024最新版-附模板）

大数据运维工程师背景，熟悉相关技术和工具具备良好的团队合作能力，善于沟通和协作具有快速学习新知识和解决问题的能力对于数据科学和分析充满热情，喜欢研究和探索新技术专业技能大数据熟悉Hadoop、Spark、Hive等大数据技术栈
itLeeyw·2024-01-05 13:53

“区块链+大数据”如何构建智慧城市生态圈

随着信息技术的发展和移动互联网的迅速普及，可以收集和存储越来越多的数据，大数据技术已经得到越来越广泛的应用。“智慧城市”的建设源于信息与城市的结合，在大数据时代，智慧城市具有明显的数据特征。
CyberVein·2024-01-05 08:24

本科大学生的大数据专业学习路线

普通的二本学校，专业是数据科学与大数据技术，2020级入学，目前大三，所以我会更多站在本专业进行分享首先，我的目标是毕业之后就业，所以一切努力的方向都是为了就业，仅仅只能为考研考公的同学提供借鉴，不适用于大多数同学
LeonieLY·2024-01-05 08:11

Apache Doris (五十八）： Doris - Join优化原理

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 04:49

Apache Doris (五十九）： Doris - BITMAP精准去重

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 04:49

Apache Doris (六十）： Doris - 物化视图

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 04:48

数字孪生与大数据和分析技术的结合

1.实时数据分析：数字孪生系统可以与大数据技术集成，实时分析从物联网设备、传感器等源头收集的大量实时数据。这有助于及时了解物理实体的状态，支持实时决策。2.历史数据分析：大数据技
super_Dev_OP·2024-01-04 20:54

数据湖和传统数仓区别及湖仓一体

1.数据仓库早期系统采用关系型数据库来存放管理数据，但是随着大数据技术的兴起，人们对于多方面数据进行分析的需求愈加强烈，这就要求建立一个能够面向分析、集成保存大量历史数据的新型管理机制，这一机制就是数据仓库
土豆马铃薯·2024-01-04 20:04

大疆无人机飞控系统的原理、组成及各传感器的作用

如今，随着芯片、人工智能、大数据技术的发展，无人机开始了智能化、终端化、集群化的趋势，大批自动化、机械电子、信息工程、微电子的专业人材投入到了无人机研发大潮中，
小熊coder·2024-01-04 11:23

客户画像及标签体系

随着大数据技术的广泛应用，企业的关注点日益聚焦在如何通过精细化运营，实现精准营销。首当其冲的就是需要建立客户画像。01、什么是客户画像客户画像，即客户信息标签化，通过收集客户的社会属性、消费习惯、偏好
Kalyn李大平·2024-01-04 08:38

尚硅谷大数据技术-数据湖Hudi视频教程-笔记01

大数据新风口：Hudi数据湖（尚硅谷&ApacheHudi联合出品）尚硅谷数据湖Hudi视频教程B站直达：https://www.bilibili.com/video/BV1ue4y1i7na百度网盘：https://pan.baidu.com/s/1NkPku5Pp-l0gfgoo63hR-Q?pwd=yyds阿里云盘：https://www.aliyundrive.com/s/uMCmjb8n
upward337·2024-01-04 08:52

大数据技术应用思考

引言：如何应用大数据技术，从事大数据工作多年，这是一个自问，也是一个讨论。
i7杨·2024-01-04 03:07

2024年统一大数据应用场景的技术

大数据技术正处于高速发展时期，有些应用场景基本已经统一了技术选型，有些技术场景的赛道正在互相角力，本文基于特定技术统一应用场景这个目的展开讨论；对于应用场景默认技术选型的技术，我们可以当做大数据基础能力学习
i7杨·2024-01-04 03:07

2024年大数据技术分析选型

市场上对于各种应用场景的大数据技术正在蓬勃发展，有些已经成熟，有些还在优化，如果站在2024年去解决大数据应用场景技术选型，我们该如何做？一、技术场景分类大数据技术能做什么？
i7杨·2024-01-04 03:03

GBASE南大通用数据库-GBase8a虚拟集群镜像技术

随着云计算和大数据技术的发展，虚拟集群环境下的数据同步和备份问题日益凸显。如何在保证数据一致性的同时，实现高效、可靠的数据管理？今天，我们为大家介绍一款强大且实用的技术——GBase8a虚拟集群镜像。
GBASE数据库·2024-01-04 02:23

什么是大数据？ 大数据就业方向分析

什么是大数据大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。
yoku酱·2024-01-04 00:23

2024上海国际智慧城市,物联网,大数据博览会（上海智博会）

作为国内最具影响力的科技展会之一，2024上海国际智慧城市,物联网,大数据博览会（简称:世亚智博会）汇聚了全球顶尖的智慧城市、物联网与大数据技术，为人们展示了一个未来生活的美好蓝图。
高登先生·2024-01-03 08:59

大数据技术原理与应用期末考试题

大数据技术原理与应用期末考试题一、单选题1.下面哪个选项属于大数据技术的“数据存储和管理”技术层面的功能?
无敌海苔咪·2024-01-03 08:03

纠删码ReedSolomon

随着大数据技术的发展，HDFS作为Hadoop的核心模块之一得到了广泛的应用。为了数据的可靠性，HDFS通过多副本机制来保证。
旅僧·2024-01-03 07:14

大数据要学习什么知识？大数据学习的内容有哪些？

（资料在尾部）大数据技术体系太庞杂了，基础技术覆盖数据采集、数据预处理、分布式存储、NOSQL数据库、多模式计算（批处理、在线处理、实时流处理、内存处理）、多模态计算（图像、文本、视频、音频）、数据仓库
Java程序员YY·2024-01-03 00:19

全面解读数据中台、数据仓库和数据湖

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵
公众号:肉眼品世界·2024-01-03 00:44

基于协同过滤算法的人才资源大数据分析与挖掘平台毕设源码

目录开发背景：国外研究现状分析：国内研究现状分析：社会可行性：功能：数据库表设计：K-means算法实现：代码实现：开发背景：随着人才市场的不断扩大和竞争的加剧，如何更好地利用大数据技术，实现人才资源
sj52abcd·2024-01-02 22:18

基于大数据的招聘数据分析与可视化实现 （毕业设计 爬虫 大数据）

为了更好地理解招聘市场和优化招聘流程，许多企业开始利用大数据技术进行招聘数据分析与可视化。大数据技术可以帮助企业对海量的招聘数据进行收集、清洗、存储和分析。
sj52abcd·2024-01-02 22:17

最In干货大赏，SDCC 2017·深圳站完整版日程大放送

2017年6月10-11日，SDCC2017·深圳站火热开启，拥有互联网应用架构实战峰会、大数据技术实战峰会两大峰会，秉承干货实料的内容原则，邀请业内顶尖的架构师和数据技术专家，共话高可用/高并发/高性能的系统架构设计
仲培艺·2024-01-02 07:00

Apache Flink连载（二十三）：Flink HA - Flink基于Yarn HA

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-02 04:42

Apache Doris (五十七）： Doris - Runtime Filter

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-02 04:42

Apache Flink连载（二十二）：Flink HA - Flink基于Standalone HA

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-02 04:11

大数据软件开发软件架构设计思路

文章目录大数据技术和传统的软件开发技术在架构思路上有很大不同如何解决PB级数据进行计算的问题呢？移动计算程序到数据所在位置进行计算是如何实现的呢？
善守的大龙猫·2024-01-02 02:45

云宏大讲坛 | Ceph分布式存储高性能设计

当代网络，云计算、大数据技术的应用使得数据呈指数增长，每天增长达百万兆背景字节的数据量是常见的情况。我们迫切需要一种更有效的解决方案，如可伸缩扩展的软件定义存
chennbwin·2024-01-02 01:48

大数据技术与应用开发赛项笔记

各种启动命令修改mysql数据库编码：alterdatabaseshtd_resultCHARACTERSETutf8;hadoop:start-all.shhive服务：hive--servicemetastorehive客户端：hivedolphinscheduler服务：./bin/dolphinscheduler-daemon.shstartstandalone-server浏览器访问地址
南城守护·2024-01-01 17:56
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他