【大数据技术】

大数据技术原理与应用 期末复习 知识点全总结（林子雨版

第一章大数据概述：（一）三次信息化浪潮（二）人类社会数据产生方式的3个阶段（三）大数据的3个发展阶段（四）大数据4V概念（五）数据存储单位之间的换算关系（六）大数据对科学研究的影响（七）大数据对思维方式的影响（八）大数据技术的不同层面及其功能
天玑y·2024-01-13 14:35

大数据系列 | CDH6.3.2（Cloudera Distribution Hadoop）部署、原理和使用介绍

大数据系列|CDH6.3.2（ClouderaDistributionHadoop）部署、原理和使用介绍1.大数据技术生态中Hadoop、Hive、Spark的关系介绍2.CDN（ClouderaDistributionHadoop
降世神童·2024-01-13 10:50

Spark Streaming

SparkStreaming随着大数据技术的不断发展，人们对于大数据的实时性处理要求也在不断提高，传统的MapReduce等批处理框架在某些特定领域，例如实时用户推荐、用户行为分析这些应用场景上逐渐不能满足人们对实时性的需求
奋斗的蛐蛐·2024-01-13 06:13

Hadoop 的核心 —— HDFS（1）

Hadoop是一个开源的大数据框架Hadoop是一个分布式计算的解决方案Hadoop=HDFS（分布式文件系统）+MapReduce（分布式计算）Hadoop的两个核心：HDFS分布式文件系统：存储是大数据技术的基础
土冥王·2024-01-12 16:13

边缘计算挑战和机遇

方向一：数据安全与隐私保护1.背景介绍随着数据的产生和收集量日益增加，大数据技术在各个领域的应用也不断拓展。然而，这也带来了数据安全和隐私保护的问题。
ღ᭄陽先生꧔ꦿ᭄·2024-01-12 14:04

车端实时数据上报云平台未来可能的发展方向浅谈

提升智能化水平：随着人工智能和大数据技术的不断发展，车端实时数据上报云平台将更加注重智能化服务的提供。将采用更加先进的人工智能技术，
MarkHD·2024-01-12 14:06

冰河开始对Dubbo下手了！

部分核心知识已总结到我出版的两本书籍——《海量数据处理与大数据技术实战》和《MySQL技术大全：开发、优化与运维实战》中。
冰河团队·2024-01-12 08:52

综合智慧能源监测管理平台，实现能源管理“透明”化

平台采用微服务架构，整合物联网、工业互联网、计算机网络、软件开发以及大数据技术等，提供在线监测、能效评价、设备监控、能源规划等功能。
jiasoftware·2024-01-12 08:55

什么是大数据测试？有哪些类型？应该怎么测?

随着目前世界上各个国家使用大数据应用程序或应用大数据技术场景的数量呈指数增长，相应的，对于测试大数据应用时所需的知识与大数据测试工程师的需求也在同步增加。
跟我一起学测试呀·2024-01-12 05:33

《PySpark大数据分析实战》-27.数据可视化图表Pyecharts介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-11 16:21

Hadoop中的数据治理策略与实践

Hadoop中的数据治理策略与实践随着大数据技术的快速发展，Hadoop已成为企业存储和处理大规模数据集的首选平台。然而，随着数据量的不断增长，数据治理问题也日益凸显。
乌龙饼干·2024-01-11 01:15

用Java爬取新房二手房数据看总体大环境

目录一、引言二、准备工作三、数据爬取四、数据分析五、总结一、引言随着互联网的普及和大数据技术的发展，网络数据已经成为反映社会经济现象的重要来源之一。
小小卡拉眯·2024-01-10 18:25

油烟在线监测系统-油烟浓度在线监测仪-旭华智能

油烟在线监测云平台是一种集实时监测、数据采集、云计算和大数据技术于一体的在线监测系统。它可以实时监测厨房油烟的排放情况，并将数据通过云平台进行展示，从而实现实时、远程监控烹饪油烟的排放，
旭华智能·2024-01-10 14:12

《PySpark大数据分析实战》-26.数据可视化图表Seaborn介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-10 14:58

对一个数据统计产品的设想

微信是个好产品，但它用到的技术无非就是大数据技术吧，还有各种云计算技术。支付宝也是好产品，但它的核心技术也是数据库一致性技术，大数据和云计算技术。Google浏览器很不错。它用到了大
12_05·2024-01-10 08:38

大数据OLAP引擎发展原因及特性分析

前言：谈到当下应用最广的大数据技术，很多人都会说是数据分析；而体现大数据分析能力的则是OLAP。
i7杨·2024-01-10 01:31

“郑”汇人才

围绕我市“4+6”战略主导优势产业，航空经济、互联网技术、大数据技术、智能化制造等战略性
郑有你·2024-01-09 23:39

《Hadoop大数据技术原理与运用》知识点总结

Hadoop学习过程中的一些笔记参考书籍《Hadoop大数据技术原理与应用》清华大学出版社黑马程序员/编著1.什么是大数据？大数据的四个特征是什么？
呆小黎·2024-01-09 22:47

笔记：分布式大数据技术原理（一）Hadoop 框架

ApacheHadoop软件库是一个框架，它允许使用简单的编程模型，实现跨计算机集群的大型数据集的分布式处理。它最初的设计目的是为了检测和处理应用程序层的故障，从单个机器扩展到数千台机器（这些机器可以是廉价的），每个机器提供本地计算和存储，而不是依靠硬件提供高可靠性。Hadoop中有3个核心组件：分布式文件系统：HDFS——实现将文件分布式存储在很多的服务器上分布式运算编程框架：MapReduce
WeeeicheN·2024-01-09 22:17

笔记：分布式大数据技术原理（三）Spark

ApacheSpark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势：运行速度快：Spark拥有DAG执行引擎，支持在内存中对数据进行迭代计算；官方提供的数据表明，如果数据由磁盘读取，速度是Hadoop
WeeeicheN·2024-01-09 22:17

大数据技术学习笔记之Hadoop框架基础1-Hadoop介绍及伪分布式部署

一、学习建议-》学习思想-》设计思想：分布式-》数据采集-》数据存储-》数据计算-》数据可视化-》学习阶段-》了解功能简单使用-》java、java变量-》安装部署配置环境-》开发-》熟练的使用，了解基本原理-》java集合、线程、javaweb-》深入了解架构、设计思想、性能调优-》堆、栈、JVM，内存优化，架构设计-》方法：-》掌握hadoop设计思想-》安装部署、简单使用：大部分框架都是类似
黄剑锋1996·2024-01-09 22:16

大数据技术原理与应用学习笔记（八）

大数据技术原理与应用学习笔记（八）本系列历史文章Hadoop再探讨Hadoop的优化与发展Hadoop1.0到Hadoop2.0不断完善的Hadoop生态系统HDFS2.0新特性HDFSHA（高可用性）
Ragnaros the Firelord·2024-01-09 22:46

大数据技术原理与应用笔记

参考：课程教学（林子雨老师）程序羊大数据学习路线HDFS入门Hbase入门NoSql入门文章目录一、大数据概述1.1大数据时代1.2大数据的概念和影响1.3大数据的应用1.4大数据的关键技术1.5大数据,物联网和云计算1.5.1云计算1.5.2物联网检测题二、大数据处理架构Hadoop2.1hello，Hadoop2.1.1Hadoop简介2.1.2ApacheHadoop版本演变2.2Hadoo
Moliay·2024-01-09 22:16

个人笔记：分布式大数据技术原理（一）Hadoop 框架

大家想了解更多大数据相关内容请移驾我的课堂：大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理：剖析及实践数据建模剖析及实践数据资产运营平台ApacheHadoop软件库是一个框架，它允许使用简单的编程模型，实现跨计算机集群的大型数据集的分布式处理。它最初的设计目的是为了检测和处理应用程序层的故障，从单个机器扩展到数千台机器（这些机器可以是廉价的），每个机器提供本地计算和存储，
garagong·2024-01-09 22:15

NetDevOps的理解与学习路线

最近几年网络运维领域各种名字满天飞，SDN、SD-WAN、双态、智能运维、大数据技术、自动驾驶的网络、基于意图的网络、NAAS、数字孪生以及我们今天聊的NetDevOps。
九净·2024-01-09 21:42

基于AI+大数据技术的恶意样本分析（一）

阅读EnhancingState-of-the-artClassifierswithAPISemanticstoDetectEvolvedAndroidMalware翻译及笔记使用API语义增强最先进的分类器来检测不断发展的安卓恶意软件论文出处：CCS'20:Proceedingsofthe2020ACMSIGSACConferenceonComputerandCommunicationsSecu
Mo neyking·2024-01-08 22:16

大数据技术架构

1技术架构矩阵大数据技术栈虽然比较多，但可以抽象为输入（数据接入）--处理（数据处理、数据分析）--输出（数据应用）。
乘风踏羽·2024-01-08 17:47

2007-2022年上市公司数字化转型数据（区分年报和管理层讨论）（含原始数据+处理代码+结果）

2007-2022年上市公司数字化转型数据（年报和管理层讨论）（含原始数据+处理代码+结果）1、时间：2007-2022年2、指标：统计年度、证券代码、人工智能技术、区块链技术、云计算技术、大数据技术、
m0_71334485·2024-01-08 16:32

大数据技术期末复习第七章——MapReduce练习

习题1、【单选题】下列说法错误的是____B____。A、Map函数将输入的元素转换成形式的键值对B、Hadoop框架是用Java实现的，MapReduce应用程序则一定要用Java来写C、不同的Map任务之间不能互相通信D、MapReduce框架采用了Master/Slave架构，包括一个Master和若干个SlaveHadoop框架是用Java实现的，但是MapReduce应用程序不一定要用J
锦鲤儿·2024-01-08 12:01

2023进口婴儿奶粉十大品牌排行榜，口碑最好的进口婴儿奶粉

进口奶粉十大品牌依托大数据技术，综合品牌实力、产品销量、用户口碑、网友投票等近百项指标评选出了2023年进口奶粉十大品牌排行榜。
一起高省·2024-01-07 15:24

对JAVA行业的深度思考职业规划

其次，云计算和大数据技术的快速发展也对Java行业产生了积
Flying_Fish_roe·2024-01-07 12:16

个人笔记：分布式大数据技术原理（二）构建在 Hadoop 框架之上的 Hive 与 Impala

有了MapReduce，Tez和Spark之后，程序员发现，MapReduce的程序写起来真麻烦。他们希望简化这个过程。这就好比你有了汇编语言，虽然你几乎什么都能干了，但是你还是觉得繁琐。你希望有个更高层更抽象的语言层来描述算法和数据处理流程。于是就有了Pig和Hive。Pig是接近脚本方式去描述MapReduce，Hive则用的是SQL。它们把脚本和SQL语言翻译成MapReduce程序，丢给计
garagong·2024-01-07 07:16

ZB 级的大数据探索与应用实践「附 PPT」

11月30日UCan技术沙龙大数据专场（北京站）邀请了5位资深大数据技术专家分享他们对大数据的探索和应用实践。大数据业务常态化的处理手段与架构衍变很多开发人员在解决实际的业务问题时
UCloud_TShare·2024-01-07 03:44

ZB级的大数据探索与应用实践【附PPT】

11月30日UCan技术沙龙大数据专场（北京站）邀请了5位资深大数据技术专家分享他们对大数据的探索和应用实践。大数据业务常态化的处理手段与架构衍变很多开发人员在解决实际的业务问题时
浪尖聊大数据-浪尖·2024-01-07 03:44

分享2024大数据主要方向及岗位职责

根据大数据技术体系及对人才的需求，本标准围绕数据预处理、数据标注、数据分析、产品开发、项目实施与运维、平台建设、数据安全、数据管理、运营与应用、咨询服务等10个方向对人才的岗位能力进行说明。
泰迪智能科技·2024-01-07 01:14

《PySpark大数据分析实战》-23.Pandas介绍DataFrame介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-07 00:26

《PySpark大数据分析实战》-22.Pandas介绍Series介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-07 00:25

《PySpark大数据分析实战》-25.数据可视化图表Matplotlib介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-07 00:24

2020年的大数据趋势怎么样？倾向于那个方向，你知道吗？

因此，对于零基础想学IT技术的人而言，直接选择学习大数据技术是符合潮流和就业需求的选择。
Python大数据工程师·2024-01-05 22:28

数字化助力，聚道云软件连接器实现软件公司人事信息自动同步

公司依托先进的云计算和大数据技术，为公交企业提供全面的数字化转型服务，助力提升公共交通运营效率和服务质量。
聚道云连接器·2024-01-05 22:15

Apache Doris (六十一）： Spark Doris Connector - (1)-源码编译

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 14:40

Apache Flink连载（八）：Apache Flink架构

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 14:36

《PySpark大数据分析实战》-24.数据可视化图表介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-05 13:02

大数据开发个人简历范本（2024最新版-附模板）

大数据运维工程师背景，熟悉相关技术和工具具备良好的团队合作能力，善于沟通和协作具有快速学习新知识和解决问题的能力对于数据科学和分析充满热情，喜欢研究和探索新技术专业技能大数据熟悉Hadoop、Spark、Hive等大数据技术栈
itLeeyw·2024-01-05 13:53

“区块链+大数据”如何构建智慧城市生态圈

随着信息技术的发展和移动互联网的迅速普及，可以收集和存储越来越多的数据，大数据技术已经得到越来越广泛的应用。“智慧城市”的建设源于信息与城市的结合，在大数据时代，智慧城市具有明显的数据特征。
CyberVein·2024-01-05 08:24

本科大学生的大数据专业学习路线

普通的二本学校，专业是数据科学与大数据技术，2020级入学，目前大三，所以我会更多站在本专业进行分享首先，我的目标是毕业之后就业，所以一切努力的方向都是为了就业，仅仅只能为考研考公的同学提供借鉴，不适用于大多数同学
LeonieLY·2024-01-05 08:11

Apache Doris (五十八）： Doris - Join优化原理

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 04:49

Apache Doris (五十九）： Doris - BITMAP精准去重

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 04:49

Apache Doris (六十）： Doris - 物化视图

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 04:48

数字孪生与大数据和分析技术的结合

1.实时数据分析：数字孪生系统可以与大数据技术集成，实时分析从物联网设备、传感器等源头收集的大量实时数据。这有助于及时了解物理实体的状态，支持实时决策。2.历史数据分析：大数据技
super_Dev_OP·2024-01-04 20:54
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他