大数据生态圈

Python基础知识进阶之正则表达式_头歌python正则表达式进阶

知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是
前端陈萨龙·2024-09-13 13:50

2024年最全使用Python求解方程_python解方程(1)，字节面试官迟到

知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是
2401_84569545·2024-09-12 02:33

大数据生态圈里的一致性算法

大数据生态圈中，保证一致性的方式举不胜举Hadoop用Zookeeper（Zab，Paxos+事务顺序）ElasticSearch用Hash路由算法（非一致性Hash）Cassandra用Gossip闲话算法
宇宙湾·2024-09-05 07:35

大数据——技术生态体系

随着大数据行业的发展，大数据生态圈中相关的技术也在一直迭代进步，希望能通过本文帮助大家快速构建大数据生态圈的完整知识体系。ApacheHive是一个用于数据查询和分析的数据仓库工具。
Imrea·2023-12-26 01:56

Flink数据类型&&序列化&&序列化器

官网：https://ci.apache.org/projects/flink/flink-docs-master/zh/dev/types_serialization.html背景：在Java和大数据生态圈中
@可能·2023-12-24 08:50

大数据生态架构：探索未来科技的无限可能。

1、大数据生态圈技术框架大数据生态圈技术是指在大数据领域中，涉及到的技术体系。
知识分享小能手·2023-12-19 22:54

大数据生态圈kafka在物联网中的应用测试

背景由物联网项目中使用到了Tbox应用管理车辆，在上报数据的过程中，需要将终端产生的数据通过kafka的producetopiccustomer对数据进行处理后，放置到mysql中。完成数据二进制到json转换工作。Kafka的使用查看kafka的topic./kafka-topics--bootstrap-server10.1.9.84:9092--list查看topic信息./kafka-to
小赖同学啊·2023-12-16 05:37

大数据生态圈及分布式文件系统HDFS实践-part1

Hadoop入门第一章大数据概述1.1大数据概念“人类正在从IT时代走向DT时代”。大数据（BigData）：指的是传统数据处理应用软件不足以处理（存储和计算）它们的大而复杂的数据集。主要解决，海量数据的存储和海量数据的运算问题。1.2大数据特征容量大，种类多，速度快，价值高1、容量（Volume）：数据的大小决定所考虑的数据的价值和潜在的信息微博，5亿用户，每天上亿条微博朋友圈，10亿用户，每天
落叶飘雪2014·2023-12-04 15:40

HDFS详解

HDFS架构剖析HDFS，HadoopDistributeFileSystem（Hadoop分布式文件系统）的简称，它是Hadoop核心组件之一，是大数据生态圈最底层的分布式存储服务。
liuhanyuu·2023-11-30 20:09

HBase生产环境从入门到熟练使用，这一篇文章就够了

作为大数据生态圈的资深老兵，也积累了一众信徒，社区也相当活跃和完善，在某些场景下也是NOSQL数据库的首选。作为2013年入行大数据的老玩家，笔者从HBase0.92版本就开始接触和使用HBase。
梦回从前·2023-11-26 06:42

HDFS、MapReduce原理--学习笔记

也就是说，Hadoop指的是大数据生态圈整体。
祈愿lucky·2023-11-20 06:33

2️⃣Zookeeper（动物管理员）

管理者）是一个分布式应用程序提供一致性（统一的进行管理，保证数据的一致性，容错率低）的服务的软件，封装了大量复杂关键的技术（服务），将简单的接口（API）暴露，高效的使用Zookeeper，稳定性非常高在大数据生态圈
WovJf·2023-11-19 17:40

Flume（一）【Flume 概述】

那就学点新的东西Flume，虽然Kafka还没学完，但是大数据生态圈的基础组件也基本就剩这倆了。
让线程再跑一会·2023-11-16 01:46

HBase 原理与应用场景

在Hadoop大数据生态圈中，H
禅与计算机程序设计艺术·2023-10-24 01:56

从 0 到 1 学习 elasticsearch

github：https://github.com/BigDataScholar/TheKingOfBigData，里面有我准备的大数据高频考点，Java一线大厂面试题资源，上百本免费电子书籍，作者亲绘大数据生态圈思维导图
这个操蛋的人生！！！·2023-10-15 18:06

Hadoop生态圈 大数据文档

文档基于介绍基于Hadoop的大数据生态圈。介绍下图每一个组件的使用场景及使用方法，同时还对每一个组件有更深入的介绍。
BigData_XiaoBai·2023-10-11 07:06

基于 Kafka 的实时数仓在搜索的实践应用

一、概述ApacheKafka发展至今，已经是一个很成熟的消息队列组件了，也是大数据生态圈中不可或缺的一员。
谁叫我土豆了·2023-10-06 14:30

一文看懂大数据生态圈

“大数据”这个词并不陌生，近几年可以说耳濡目染，开始了大爆发之路。各互联网公司大力发展自身的大数据相关技术，各种大数据开源技术也是层出不穷，甚至国家也是大力支持大数据产业的发展。那到底啥是大数据？大数据有哪些技术呢？让我们一起走进大数据的生态圈吧！所谓大数据其实有各种各样的定义，但无论哪种定义都突出了“大”字。一般认为，当数据量超过了单台计算机的处理能力的时候可以称之为大数据。而对于这些数据的收集
MCNU云原生·2023-09-29 02:01

Scala学习 一（变量、数据类型、操作符和表达式）

：运行阶段确定）和静态类型语言java.scala(变量a的数据类型：编译阶段确定的)基于JVM(aa.scala->aa.class(java))->JVM为什么要学（1）速度快（2）优雅（3）融入大数据生态圈
IT蔡·2023-09-22 10:27

Impala负载均衡方案——zookeeper

在大数据生态圈中zookeeper是一个必不可少的自身具有高可用保证的组件，本文探讨如
教练_我要踢球·2023-09-01 04:37

4、大数据系统组件

大数据生态圈首先是Hadoop，它是大数据系统的基础组件，很多其他组件都依赖它分布式存储、计算，它是Apache旗下一套开源软件平台，在这个平台之下还包括了HDFS（分布式文件系统
朗如行玉山_5b30·2023-08-30 16:08

基于 Kafka 的实时数仓在搜索的实践应用

一、概述ApacheKafka发展至今，已经是一个很成熟的消息队列组件了，也是大数据生态圈中不可或缺的一员。
vivo互联网技术·2023-08-16 17:55

SparkSQL－从DataFrame说起

转自：http://hbasefly.com/2017/02/16/sparksql-dataframe/写在文章之前本着更好地理解大数据生态圈的本意以及工作的需要，前段时间熟悉了SQL查询引擎SparkSQL
严国华·2023-08-12 18:52

大数据技术学习笔记（一）——初识大数据

2大数据的特点大数据的特点简称4V特征：Volume（数据量大）Velocity（速度快）Variety（种类繁多）Value（价值密度低）3大数据生态圈3.1
夏木夕·2023-08-07 04:59

大数据开发：Flink API编程初级入门

作为大数据生态圈越来越活跃的框架，Flink的热度持续走高，自然也成为大数据学习阶段必须攻克的一大重难点。
成都加米谷大数据·2023-08-02 00:49

Hadoop技术之HDFS分布式文件系统基础

Hadoop离线是大数据生态圈的核心与基石，是整个大数据开发的入门。本次分享内容让初学者能高效、快捷掌握Hadoop必备知识，大大缩短Hadoop离线阶段学习时间，下面一起开始今天的学习！
黑马程序员官方·2023-07-23 14:13

大数据测试基本知识

大数据生态圈1.基于hadoop的大数
小赖同学啊·2023-06-20 18:10

【大数据之路1】Hadoop 入门

1.Hadoop入门1.大数据概述1.大数据相关说明2.Hadoop及大数据生态圈3.Hadoop核心组件4.Hadoop生态圈5.集群安装模式6.Hadoop运行模式7.Hadoop工作流程8.Hadoop
程序员胖五·2023-06-13 18:13

大数据组件笔记 -- Hadoop

文章目录一、Hadoop入门1.1基础架构1.2大数据生态圈二、Hadoop集群部署2.1准备2.2配置2.3启动2.4监控页面三、HDFS3.1组成架构3.2HDFSShell3.3HDFS客户端3.4HDFS
L小Ray想有腮·2023-06-13 04:02

大数据大纲&大数据生态圈所涉及的技术

大数据特征：1）大量化（Volume）：存储量大，增量大TB->PB2）多样化（Variety）：来源多:搜索引擎，社交网络，通话记录，传感器格式多:(非）结构化数据，文本、日志、视频、图片、地理位置等3）快速化（Velocity）：海量数据的处理需求不再局限在离线计算当中4）价值密度低（Value）：但是这种价值需要在海量数据之上，通过数据分析与机器学习更快速的挖掘出来大数据带来的革命性变革：1
摩羯青春我掌握·2023-04-21 05:17

Hadoop HDFS 分布式文件系统

SecondaryNameNodeNameNode职责DataNode职责HDFS写数据流程HDFSHDFS(HadoopDistributedFileSystem)，Hadoop分布式文件系统是ApacheHadoop的核心组件之一，作为大数据生态圈最底层的分布式存储
VenYy·2023-04-09 05:46

盘点Hadoop生态中 6 个核心的大数据组件

大数据生态圈中有很多优秀的组件，可谓琳琅满目，按组件类别可分为存储引擎、计算引擎，消息引擎，搜索引擎等；按应用场景可分为在线分析处理OLAP型，在线事务处理OLTP型，以及混合事务与分析处理HTAP型等
大数据技术架构·2023-04-07 00:32

《Scala开发快速入门》书籍出版

ApacheSpark、ApacheKafka等基于Scala语言实现的框架在大数据生态圈内占有举足轻重的地位，它们一定程度上引领着大数据最前沿技术方向，另外Akka、ApacheGearpump等基于
zhouzhihubeyond·2023-04-05 19:49

flume安装配置与应用

若需要相应的其他工具的配置，详细请看《hadoop大数据生态圈工具配置与应用》文章目录1、flume安装配置2、初步自定义采集方案测试flume负载均衡测试案例日志采集1、flume安装配置解压出来，mv
侬本多情。·2023-04-05 03:24

大数据Hadoop入门03——HDFS分布式文件系统基础

是ApacheHadoop核心组件之一，作为大数据生态圈最底层的分布式存储服务而存在。也可以说大数据首先要解决的问题就是海量数据的存储问题。HDFS主要是解决大数据如何存储问题的。
程序猿七度·2023-04-01 02:55

欢迎来到大数据时代-----赶快来了解一些大数据的基础知识

Hadoop离线是大数据生态圈的核心与基石，是整个大数据的入门。linux、hadoop、hive三者形成一体，掌握这些知识就可以独立基于数据仓库是实现离线数据分析的可视化报表开发。
Aggressive-Cute·2023-03-09 21:15

Hadoop 及Spark 分布式HA运行环境搭建

作者：京东物流秦彪工欲善其事必先利其器，在深入学习大数据相关技术之前，先手动从0到1搭建一个属于自己的本地Hadoop和Spark运行环境，对于继续研究大数据生态圈各类技术具有重要意义。
·2023-02-21 11:56

HADOOP大数据技术栈简介

一、大数据技术图谱大数据.jpgHadoopHadoop狭义指Apacha的一款软件，广义指的是Hadoop大数据生态圈。Hadoop三大组件：HDFS、YARN、MapReduce。
奋斗的韭菜汪·2023-02-02 15:54

spark技术简介

大数据生态圈存储主要包括hdfs、Kafka计算主要包括MapReduce、Spark、Flink查询主要为Nosql和Olap，Nosql主要包括Hbase、Cassandra等:其中olap包括kyline
花凡·2022-12-15 11:55

PySpark——开启大数据分析师之路

实际上"名不副实"这件事在大数据生态圈各个组件中是很常见的，例如Hive（蜂巢），从名字中
IT农民工1·2022-12-14 10:50

大数据面试题汇总【持续更新】

前言本文内容是根据自身对相应知识的浅薄理解，如有错误欢迎指正~大数据生态圈Hadoop架构HDFS（分布式文件系统）:解决海量数据的存储问题NameNode：集群当中的主节点，管理元数据，主要用于管理集群当中的各种数据
Kazi_1024·2022-10-12 10:45

如何从零开始优雅整合SpringBoot框架与Kafka消息中间件

自学教程参见B站尚硅谷大数据生态圈开发课程，https://www.bilibili.com/video/BV17t411W7wZ真就B站大学，B站流批！
码代码的乔木·2022-08-26 21:08

一文看懂大数据生态圈完整知识体系【大数据技术及架构图解实战派】

一文看懂大数据生态圈完整知识体系徐葳随着大数据行业的发展，大数据生态圈中相关的技术也在一直迭代进步，作者有幸亲身经历了国内大数据行业从零到一的发展历程，通过本文希望能够帮助大家快速构建大数据生态圈完整知识体系
bigdata1024·2022-08-18 01:37

大数据生态圈技术组件解析

大数据文摘投稿作品作者：小山猪的沙塔这是一篇技术杂谈类的文章。下面是食用须知：本文适合还不十分了解大数据的你，同样适合不确定要不要学习大数据的你，将带你了解行业的需求以及与之相关的岗位，也同样适合刚刚踏入大数据领域工作的你，欢迎收藏并将文章分享给身边的朋友。笔者从事大数据开发和培训多年，曾为多家机构优化完整大数据课程体系，也为多所高校设计并实施大数据专业培养方案，并进行过多次大数据师资培训、高校骨
weixin_38754337·2022-08-18 01:07

【大数据】一文看懂大数据生态圈完整知识体系

随着大数据行业的发展，大数据生态圈中相关的技术也在一直迭代进步，作者有幸亲身经历了国内大数据行业从零到一的发展历程，通过本文希望能够帮助大家快速构建大数据生态圈完整知识体系。
机智的小天文·2022-08-18 01:06

一文看懂大数据生态圈完整知识体系

随着大数据行业的发展，大数据生态圈中相关的技术也在一直迭代进步，作者有幸亲身经历了国内大数据行业从零到一的发展历程，通过本文希望能够帮助大家快速构建大数据生态圈完整知识体系。
小晨说数据·2022-08-18 01:06

大数据生态圈完整知识体系

随着大数据行业的发展，大数据生态圈中相关的技术也在一直迭代进步，作者有幸亲身经历了国内大数据行业从零到一的发展历程，通过本文希望能够帮助大家快速构建大数据生态圈完整知识体系。
000X000·2022-08-18 01:36

大数据生态圈简介

大数据平台架构大数据平台架构大致可分为五个层级。顶层为应用层，提供数据服务与可视化，解决企业实际问题。第二层是大数据处理核心，包括数据处理、交互式分析以及机器学习与数据挖掘。第三层是资源调度，为了充分利用系统资源，提高全系统的资源利用率以及增强系统扩展性，需要进行统一的资源管理与调度。第四层是数据存储，如何解决海量数据的读写问题，是实现大数据平台的构建的基础。第五层是数据获取，快速、高效获取到海量
JeremyHeria·2022-08-15 09:08

Hadoop，hive，spark分别都是什么

Hadoop，hive，spark在大数据生态圈的位置如何用形象的比喻描述大数据的技术生态？Hadoop、Hive、Spark之间是什么关系？
昨日啊萌·2022-07-11 09:52

一篇文章带你了解大数据生态圈---大数据组件图谱

小编一篇文章带你了解大数据生态圈—大数据组件图谱转载地址：http://blog.csdn.net/u010039929/article/details/70157376文章目录小编一篇文章带你了解大数据生态圈
小哪吒的BD·2022-07-02 09:20
上一页 1 2 3 4 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他