大数据存储

【数据库04】中级开发需要掌握哪些SQL进阶玩法

立志坚持写10年博客，专注于java后端☕专栏简介：相当硬核，黑皮书《数据库系统概念》读书笔记，讲解：1.数据库系统的基本概念(数据库设计过程、关系型数据库理论、数据库应用的设计与开发…)2.大数据分析(大数据存储系统
半旧518·2022-11-03 22:43

阿里Tablestore概览

BigTable解决大数据存储的问题，Lucene解决搜索和排序的问题。
早睡早起的黑猫·2022-11-02 11:26

【数据库】02——关系模型是什么东东

立志坚持写10年博客，专注于java后端☕专栏简介：相当硬核，黑皮书《数据库系统概念》读书笔记，讲解：1.数据库系统的基本概念(数据库设计过程、关系型数据库理论、数据库应用的设计与开发…)2.大数据分析(大数据存储系统
半旧518·2022-10-27 14:43

【数据库】03——初级开发需要掌握哪些SQL语句

立志坚持写10年博客，专注于java后端☕专栏简介：相当硬核，黑皮书《数据库系统概念》读书笔记，讲解：1.数据库系统的基本概念(数据库设计过程、关系型数据库理论、数据库应用的设计与开发…)2.大数据分析(大数据存储系统
半旧518·2022-10-27 14:06

【数据库】01——精通数据库需要掌握这九个维度

立志坚持写10年博客，专注于java后端☕专栏简介：相当硬核，黑皮书《数据库系统概念》读书笔记，讲解：1.数据库系统的基本概念(数据库设计过程、关系型数据库理论、数据库应用的设计与开发…)2.大数据分析(大数据存储系统
半旧518·2022-10-18 08:18

大数据工程师应掌握的技能

本文结合大数据技术架构与企业实际应用，梳理出大数据工程师需要掌握的技能，包括大数据主流开发语言、大数据平台的构建、大数据采集、大数据存储与交换、大数据离线和实时计算。一、大数据主流开发
梯度科技·2022-10-13 15:01

JuiceFS 在数据湖存储架构上的探索

大家好，我是来自Juicedata的高昌健，今天想跟大家分享的主题是《JuiceFS在数据湖存储架构上的探索》，以下是今天分享的提纲：首先我会简单的介绍一下大数据存储架构变迁以及它们的优缺点，然后介绍什么是
Juicedata·2022-10-11 09:15

每秒7亿次请求，阿里新一代数据库如何支撑？

阿里妹导读：Lindorm，就是云操作系统飞天中面向大数据存储处理的重要组成部分。
阿里云云栖号·2022-10-04 11:01

Hadoop专业解决方案之构建Hadoop企业级应用

这主要是因为一下原因：1.传统应用的基础设施是基于传统数据库访问模式设计的，它不支持Hadoop；2.数据存储在Hadoop之上，实时访问集群中部分数据是可行的；3.Hadoop大数据存储能力使得你可以存储数据集的多个版本
第五个号·2022-10-03 17:10

我眼中的大数据（二）——HDFS

这些年来，各种计算框架、各种算法、各种应用场景不断推陈出新，让人眼花缭乱，但是大数据存储的王者依然是HDFS。为什么HDFS的地位如此稳固呢？在整个大数据体系里面，最宝贵、最难以代替的资
平 凡 程 序 猿·2022-09-28 09:55

什么是大数据系统存储及管理？

根据数据存储和管理的内容范围，大数据存储及管理技术需要重点研究如何解决大数据的可存储、可表示、可处理、可靠性及有效传输等。
我想去吃ya·2022-09-24 14:21

【技术】高级测试需要知道的Redis知识--基础篇

Redis是一个高性能的key-value数据库，也是一个NOSQL类型数据库，是为解决高并发、高扩展、大数据存储等一系列的问题而产生的数据
测试专享·2022-09-19 22:40

开源云原生分布式文件系统 - JuiceFS

随着云计算的发展成熟，数据上云成为趋势，但由于对象存储和文件存储的结构不同，在云上要进行大数据存储时会遇到很多问题：查询性能慢、数据不能保证一致性。
七包辣条·2022-09-19 16:23

HDFS的灵魂33问

2分布式文件系统解决了什么问题大数据存储的问题它们是横跨在多台计算机上的存储系统能够为存储和处理超大规模数据提供所需的扩展能力。
九味桔梗花·2022-08-22 23:20

6W+字记录实验全过程 | 探索Alluxio经济化数据存储策略

大数据存储引擎从2006年发布以来，百花齐放，计算侧
·2022-08-19 12:48

大数据入门：Hadoop HDFS存储原理

在大数据处理当中，最核心要解决的其实就是两个问题，大数据存储和大数据计算。在Hadoop生态当中，解决大数据存储，主要依靠就是HDFS，再配合数据库去完成。
加米谷大数据张老师·2022-08-02 09:32

大数据运维架构师培训（5）：大数据管理平台（Cloudera CM/CDH/CDP）

课程目标：本套风哥大数据运维架构师实战培训课程，分5个阶段，分别是大数据Hadoop核心架构运维实战、大数据存储管理与查询分析实战、大数据计算框架与消息搜索实战、大数据安全调度与数据采集实战、大数据集群管理平台运维实战
风哥2号·2022-07-29 09:16

Apache Doris在网易互娱的应用实践

离线平台小组目前为广州互娱的大数据离线计算提供了接近EB级别的大数据存储集群服务，以及Hive/Spark/Presto/Doris/ClickHouse等计算框架的开发与业务支持。
ApacheDoris·2022-06-17 10:03

数据中台之结构化大数据存储设计

前言任何应用系统都离不开对数据的处理，数据也是驱动业务创新以及向智能化发展最核心的东西。这也是为何目前大多数企业都在构建数据中台的原因，数据处理的技术已经是核心竞争力。在一个完备的技术架构中，通常也会由应用系统以及数据系统构成。应用系统负责处理业务逻辑，而数据系统负责处理数据。传统的数据系统就是所谓的『大数据』技术，这是一个被创造出来的名词，代表着新的技术门槛。近几年得益于产业的发展、业务的创新、
阿里云云栖号·2022-05-31 15:17

JuiceFS 在数据湖存储架构上的探索

大家好，我是来自Juicedata的高昌健，今天想跟大家分享的主题是《JuiceFS在数据湖存储架构上的探索》，以下是今天分享的提纲：首先我会简单的介绍一下大数据存储架构变迁以及它们的优缺点，然后介绍什么是
·2022-05-05 13:23

JuiceFS 在数据湖存储架构上的探索

大家好，我是来自Juicedata的高昌健，今天想跟大家分享的主题是《JuiceFS在数据湖存储架构上的探索》，以下是今天分享的提纲：首先我会简单的介绍一下大数据存储架构变迁以及它们的优缺点，然后介绍什么是
JuiceFS·2022-05-05 13:00

Hive 简介

1.Hive简介构建在hadoop之上,用来满足企业大数据存储和数据分析需求的数仓工具.
Doooooing·2022-04-24 15:10

都2022年了，HDFS为何还如此能战！

摘要：HDFS也许不是最好的大数据存储技术，但依然是最重要的大数据存储技术。本文分享自华为云社区《HDFS为何在大数据领域经久不衰？》，作者：JavaEdge。
华为云开发者社区·2022-04-11 14:00

简简单单用一下 Hbase

hadoop数据库：分布式、可伸缩、大数据存储。二、Hbaseclient最开始引入hbase-client，服务有使
WindWant·2022-04-06 20:00

最新大厂数据湖面试题，知识点总结

八、数据湖挑战九、湖仓一体十、目前有哪些开源数据湖组件十一、三大数据湖组件对比一、什么是数据湖数据湖是一种不断演进中、可扩展的大数据存储、处理、分析的基础设施；以数据为导向，实
五分钟学大数据·2022-03-31 21:00

BookKeeper PMC 成员翟佳受邀参与 DataFunSummit 大数据存储架构峰会

2022年3月26日，第二届DataFunSummit大数据存储架构峰会即将于线上举办，StreamNative联合创始人、ApachePulsarPMC成员、ApacheBookKeeperPMC成员翟佳受邀出席本次大数据存储架构峰会
·2022-03-26 16:21

Hadoop原生对象存储Ozone

背景HDFS是业界默认的大数据存储系统，在业界的大数据集群中有非常广泛的使用。HDFS集群有着很高的稳定性，得益于它较简单的构架，集群也很容易扩展。业界包含几千
为了生活，加油·2022-03-11 15:00

Redis到底是单线程还是多线程？

一、什么是Redisredis是一个高性能的key-value数据库，它是完全开源免费的，而且redis是一个NOSQL类型数据库，是为了解决高并发、高扩展，大数据存储等一系列的问题而产生的数据库解决方案
程序员小羊·2022-03-04 14:35

大数据开发，聊聊离线数仓和实时数仓

进入大数据时代，大数据存储的解决方案，往往涉及到数据仓库的选型策略。从传统时期的数据仓库，到大数据环境下的数据仓库，其核心的技术架构是在随着最新技术趋势而变化的。
加米谷大数据张老师·2022-02-28 09:39

2018-05-14

大数据存储课--单撸大程ojbk蒙特卡洛启动！////////////////////////////////////////////////////////前面基本就是一些简单的介绍？
deathneverdie·2022-02-18 22:39

数据科学与大数据技术专业实训解决方案

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保障、产业创新大数据应用、跨行业大数据
00d34451b19b·2022-02-16 15:32

大数据存储领导厂商创新科加入，携手龙蜥社区共建开源生态

UIT创新科是一家以大数据存储系统为基础，集数据中心、服务器、云服务和大数据服务为一体的高新技术企业，致力成为中国云计算和大数据解决方案领导厂商。
·2022-02-14 10:22

高校大数据专业教学实训平台建设

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保障、产业创新大数据应用、跨行业大数据
00d34451b19b·2022-02-11 02:35

元数据性能大比拼：HDFS vs OSS vs JuiceFS

其中HDFS是被广为使用的大数据存储方案，已经经过十几年的沉淀和积累，是最合适的参考标杆。
JuiceFS·2022-02-09 16:42

元数据性能大比拼：HDFS vs OSS vs JuiceFS

其中HDFS是被广为使用的大数据存储方案，已经经过十几年的沉淀和积累，是最合适的参考标杆。
·2022-02-09 16:26

元数据性能大比拼：HDFS vs OSS vs JuiceFS

其中HDFS是被广为使用的大数据存储方案，已经经过十几年的沉淀和积累，是最合适的参考标杆。
JuiceFS·2022-02-09 16:00

lucene技术简介

顶级项目，旨在解决企业中对于文件的全文检索问题，但是他是一个解决全文检索的工具包，提供了完整的查询引擎和索引引擎，为何说他是一个工具包呢，因为对于全文检索方案的设计还关乎高并发实现即分布式高可用问题，极大数据存储问题
Charles_Shang·2022-02-06 11:05

初识分库分表

单表数据上亿，查询性能下降；解决大数据存储，提高访问性能；超大容量问题性能问题：单一数据库，服务器的CPU、磁盘、内存、IO都有极限如何去做垂直切分、水平切分垂直切分1.垂直分库：按模块分库，每个功能模块按照业务领域区分
味道_3a01·2022-02-06 02:48

Hadoop 单节点部署 （二）HBase

HBaseApacheHBase™：Hadoop数据库，一个分布式，可扩展，大数据存储。当需要对大数据进行随机、实时读写访问的时候，就需要使用ApacheHBase™。
偷油考拉·2022-02-05 14:04

适合低学历的大数据学习方法：大数据采集，大数据分析，大数据存储就该这样学！

大数据采集01—概览02—相关延展系统日志数据的采集Scribe是Facebook开源的日志收集系统，在Facebook内部已经得到大量的应用。它够从各种日志源上收集日志，存储到一个中央存储系统上，以便于进行集中的统计分析处理。Scribe为日志的“分布式收集，统一处理”提供了一个可扩展的、高容错的方案。（老师收学生信息表，需要班长代理收集的例子）。Chukwa提供了一个对大数据量日志类数据采集、
yoku酱·2022-02-05 09:53

分表分库（百亿级大数据存储）

NewLife.XCode是一个有15年历史的开源数据中间件，支持netcore/net45/net40，由新生命团队(2002~2019)开发完成并维护至今，以下简称XCode。整个系列教程会大量结合示例代码和运行日志来进行深入分析，蕴含多年开发经验于其中，代表作有百亿级大数据实时计算项目。开源地址：https://github.com/NewLifeX/X（求star,938+）XCode是重
·2022-01-11 13:37

Redis详解【包含：B站面试问题及详解】

Redis可能出现的问题Redis缓存击穿Redis缓存雪崩Redis的持久化方式Jedis连接集群Redis常用命令有哪些Redis字节面试题前言：什么是NoSql为了解决高并发、高可扩展、高可用、大数据存储问
一马什么梅一·2021-11-16 11:27

文档数据库（nosql）学习笔记（1）--简述

5.文档数据库广泛应用于大数据存储与处理场景，如：日志数据存储、订单数
阿洋太爱大数据·2021-11-03 16:48

大数据开发涉及到的技术分类有哪些

大数据关键技术涵盖数据存储、处理、应用等多方面的技术，根据大数据的处理过程，可将其分为大数据采集、大数据预处理、大数据存储及管理、大数据处理、大数据分析及挖掘、大数据展示等。大数据采集技术大数据
·2021-09-16 14:16

基于 MySQL + Tablestore 分层存储架构的大规模订单系统实践-架构篇

这种方案支持大数据存储、高性能数据检索、SQL搜索、实时与全量数据分析，且部署简单、运维成本低。
·2021-09-06 11:23

二、HDFS 概述与基本使用

HDFS作为最早的大数据存储系统，存储着宝贵的数据资产，各种新的算法、框架要想得到人们的广泛使用，必须支持HDFS才能获取已经存储在里面的数据。
阿文灬·2021-08-31 15:35

开源大数据技术线上Meetup

本次Meetup由白玉兰开源与示说网联合主办，众多社区大力支持，特邀约大数据领域的前沿技术专家，就大数据存储的关键技术、挑战和当前应用展开交流讨论，阵容强大、内容全面。活动亮点1.超豪华嘉宾阵容！
·2021-08-17 23:38

认识数据实时同步神器—Canal～

作者：幻好来源：恒生LIGHT云社区随着系统业务量的不断扩大，都会使用分布式的方式，同时会有非常多的中间件，如redis、消息队列、大数据存储等，但是实际核心的数据存储依然是存储在数据库，多个数据库之前就会存在数据实时同步的问题
·2021-07-27 20:21

教你在Kubernetes中快速部署ES集群

摘要：ES集群是进行大数据存储和分析，快速检索的利器，本文简述了ES的集群架构，并提供了在Kubernetes中快速部署ES集群的样例；对ES集群的监控运维工具进行了介绍，并提供了部分问题定位经验，最后总结了常用
·2021-07-27 19:59

字节跳动10万节点HDFS集群多机房架构演进之路

背景现状HDFS全称是HadoopDistributedFileSystem，其本身是ApacheHadoop项目的一个模块，作为大数据存储的基石提供高吞吐的海量数据存储能力。
字节跳动技术团队·2021-07-02 10:59
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他