大数据存储

reids面试题

redis是一个高性能的key-value数据库，它是完全开源免费的，而且redis是一个NOSQL类型数据库，是为了解决高并发、高扩展，大数据存储等一系列的问题而产生的数据库解决方案，是一个非关系型的数据库
宇浩_7658·2023-06-21 20:40

【大数据存储】ORC和Parquet区别

https://blog.csdn.net/qq_15111861/article/details/103025418ORC官网https://orc.apache.org/Parquet官网https://parquet.apache.org/Hive数仓建表该选用ORC还是Parquet，压缩选LZO还是Snappy？https://zhuanlan.zhihu.com/p/257917645
JH_Zhai·2023-06-19 14:39

HBase 介绍

Apache的Hadoop数据库，是一个分布式的、可扩展的、支持大数据存储的数据库。当需要对大数据进行随机访问、实时读写时使用。HBase的目标是在廉价的商品硬件上管理非常大的表，数十亿行*数百万列。
金刚_30bf·2023-06-16 18:44

大规模时序数据存储（一）| 监控场景的时序数据

作者简介运小尧百度高级研发工程师负责百度运维大数据存储平台的设计和研发，致力于追求大规模存储系统的高性能和高可用。
AIOPstack·2023-06-14 19:13

基于Hadoop + Hive框架进行电子商务数据分析的设计与实现

大数据存储，处理和处理的研究已是企业未来发展的趋势，因此，将开展基于Hadoop+Hive框架进行电子商务数据分析，搭建一个大数据集群平台，用于通过电商案例的存储，处理，分析和可视化展示的实验迎向困难该挑战数仓的总体设计数据仓库概念
悟空打码·2023-06-14 10:44

《嵌入式存储器架构、电路与应用》----学习记录(三)

第4章嵌入式内存4.1Flash的发展背景Flash是非易失存储器，具有存储密度高、容错能力强和读写速度相对较慢等特点，传统Flash广泛应用于外部大数据存储。
鲁棒最小二乘支持向量机·2023-06-08 01:15

java面试题全覆盖-顺序调整版

short：16位，int：32位，最大数据存储容量是2的32次方减1，数据范围是负的2的31次方到正的2的31次方减1。
@湖·2023-06-07 07:55

大数据存储与处理技术探索：Hadoop HDFS与Amazon S3的无尽可能性【上进小菜猪大数据】

本文将探索两种重要的大数据存储与处理技术：HadoopHDFS和AmazonS3。我们将深入了解它们的特点、架构以及如何使用它们来构建可扩展的大数据解决方案。
上进小菜猪·2023-06-07 05:59

大数据存储方式有哪些？

写在前面本文隶属于专栏《大数据从0到1》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！本专栏目录结构和文献引用请见《大数据从0到1》正文数据常用的存储介质为磁盘和磁带。数据存储组织方式因存储介质不同而异。在磁带上数据仅按顺序文件方式存取，在磁盘上则可按使用要求采用直接存取方式。数据存储方式与数据文件组织密切相关，其关键在于建立记录的逻辑与物理顺序间对应关系，确定存储地
Shockang·2023-06-07 02:07

如何搭建视频网站

用于视频存储、缓存的数据量，一般是TB级，需要用合适的技术方法做大数据存储管理，需要有合适的技术方法做好存储设备的高速读写优化。2）需要的带宽大。普通网站
语言专家·2023-04-21 00:33

2021春招没有项目可写？6大企业级实战项目，让你拿下面试offer！

一、大数据存储云盘系统（QT）项目技术内容：1.云盘架构设计与实现2.
Yttsam·2023-04-20 22:08

Hbase1.1：HBase官网、HBase定义、HBase结构、HBase依赖框架、HBase整合框架

特点：大HBase定义HBase结构HBase依赖框架hadoopHBase整合框架PhoenixHiveHBase官网Hbase官网地址HBase是Hadoopdatabase，一个分布式、可扩展的大数据存储
郝开·2023-04-20 15:35

IPFS + Ethereum(下篇)：IPFS + Ethereum存储和获取图片

truffleunboxreact创建项目，安装ipfs-api，将图片存储到ipfs，将图片hash存储到Ethereum区块链，取数据时先从区块链读取图片hash，再通过hash从ipfs读取数据，解决了区块链大数据存储成本高昂的问题
yuyangray·2023-04-20 08:34

阿里云大数据分析师ACP考试内容是什么？考试题型是什么？

阿里云ACP大数据分析师概述是面向大数据分析师、BI工程师的专业技能认证，涵盖数据分析相关的知识体系，如大数据基础知识、大数据存储技术、数据分析工具、数据可视化、数据编程、数据质量控制、数据分析项目管理
·2023-04-20 00:43

DITO：打假仿冒产品 树立品牌诚信

DITOSYSTEM官网：www.ditochain.org白皮书：www.ditochain.org/DITO.pdfDITOSYSTEM是全球第一家区块链落地应用，区块链防伪溯源应用，它是目前唯一的适合较大数据存储的底层区块链
RcardoMS·2023-04-19 05:37

Hadoop学习_day01_基础概念

HadoopHadoop是Apache软件基金会旗下的一款Java开源软件框架，提供了大数据存储、计算的一套解决方案。
mango660·2023-04-19 03:39

Spark、Flink、CarbonData技术实践最佳案例解析

CarbonData是一种高性能大数据存储方案，已在20+企业生产环境上部署应用，其中最大的单一集群数据规模达到几万亿。
weixin_34198797·2023-04-18 07:44

区块链是如何溯源打假的?

DITOSYSTEM官网：www.ditochain.org白皮书：www.ditochain.org/DITO.pdfDITOSYSTEM是全球第一家区块链落地应用，区块链防伪溯源应用，它是目前唯一的适合较大数据存储的底层区块链
RcardoMS·2023-04-16 03:44

教育大数据总体解决方案（2）

数据存储大数据存储平台以数据存储为核心，具有集群特性，具有互联网平台的分布式特性，提供对各类结构化、非结构化数
FRDATA1550333·2023-04-13 16:31

Yandex 正式开源大数据存储和处理平台 YTsaurus

导读因为众所周知的原因，俄罗斯开发者在开源领域遭到了各种“不公正”的对待。但即便如此，俄罗斯大型科技公司Yandex近日依然在GitHub上开源了一个项目，该项目名为YTsaurus，这是一个用于存储和处理大数据的平台，大多数Yandex服务均在使用。Yandex分布式计算的负责人MaximBabenko表示：Yandex自2010年以来一直在开发YTsaurus（在内部称之为YT）。因为市场上没
分享IT资源·2023-04-13 13:44

redis介绍

键值类型：String字符类型hashMap散列类型list列表类型set集合类型sortedSet有序集合类型什么是Nosql为了解决高并发、高可用、高可扩展、大数据存储等一系
cc7f78569e0d·2023-04-10 03:14

hadoop架构总结（二）

那么在大数据的背景下就需要有对应的大数据存储架构。以往的数据
苍鹰嘉措·2023-04-09 15:23

Redis安装

1、什么是NoSqlNoSql，全名：NotOnlySql，是一种非关系型数据库，它不能替代关系弄数据库，只是关系型数据库的一个补充，是可以解决高并发、高可用、高扩展、大数据存储等一系列问题而产生的数据库解决方案
Myw_1293977293·2023-04-08 11:55

【无标题】

同样是当前三大数据存储发展方向（玻璃存储、全息存储和DNA存储）之一，差距为什么就这么大呢？女怕嫁错郎，男怕入错行，笔者真有一种“悔不该当初选择机电自动化专业，为什么不选择生物专业”的痛心疾首感！
鸿翼Macrowing·2023-04-08 00:02

数据湖，大数据的下一个变革！

大数据存储已经走到了一个新的阶段，肯定会有新的革命性技术来替换它。更
傅一平·2023-04-07 16:09

大数据存储组件TiDB原理+实战篇

文章目录1.TiDB引入1.1.数据库技术发展简史1.2.从MySQL到TiDB1.3.TiDB概述1.4.数据库种类简介2.TiDB架构特性2.1.TiDB整体架构2.2.TiDB核心特性2.3.存储和计算能力3.TiDB安装部署3.1.TiDB-Local单机版3.2.TiDB-Docker集群版4.TiDB实践案例4.1.TiDB-SQL操作4.2.TiDB-读取历史数据4.3.TiDB整合
互联网小阿祥·2023-04-05 19:41

MongoDB - 简单了解

NoSQL常用于具有庞大数据存储需求的分布式数据存储，通常是大数据和实时Web应用程序等场景。
csdn_manong1·2023-04-05 13:32

Java技术栈-服务四层技术

技术栈-服务四层技术服务四层中包括中间件（Kafka、Mycat）、计算（Spark、Neo4j、Hive）、索引、微服务、大数据存储等重难点技术运用SpringBoot快速开发框架，构建项目工程；并结合
java涛仔·2023-04-04 20:16

云上大数据存储：探究 JuiceFS 与 HDFS 的异同

HDFS作为Hadoop提供存储组件，已经成为大数据生态里面数据存储最常用的选择，通常在机房环境部署。JuiceFS是一个基于对象存储的分布式文件系统，用户可以在云上快速地搭建按需扩容的弹性文件系统。如果企业正在考虑在云上构建大数据平台，了解这两种产品的差异和优缺点，可以为企业迁移或切换存储产品提供参考。这篇文章将从技术架构、功能特性、使用场景等多个方面来解析HDFS和JuiceFS的异同。1.架
Juicedata·2023-04-04 13:19

三、大数据存储——HBase

目录一、NOSQL引入1.1.NoSQL数据库简介1.2.混合持久化1.3.数据模型的转变2.HBASE2.1.Hbase是什么2.2.Hbase实践2.3.HBase列式存储模型2.4.Hbase架构2.5.Region分裂及StoreFile合并2.6.负载均衡2.7.Hbase读写寻址3.分布式CAP理论4.图数据库一、NOSQL引入传统的关系型数据库需要显示某数据时，有时需要查找多张表，关
百颂伊·2023-04-04 06:28

Kudu（分布式数据存储引擎）

kudu定位是「FastAnalyticsonFastData」，是一个既支持随机读写、又支持OLAP分析的大数据存储引擎。
砸锅卖铁上论坛·2023-04-04 02:47

Hadoop架构和原理

简介Hadoop使由Apache研发的一套分布式存储和计算框架，目前被广泛应用于大数据存储和计算业务中。
松myth·2023-04-03 20:26

Hadoop——HDFS介绍、特性、基本操作

分布式文件系统解决的问题就是大数据存储。它们是横跨在多台计算机上的存储系统。分布式文件系统在大数据时代有着广泛的应用前景，它们为存储和处理超大规模数据提供所需
北极猿·2023-04-02 06:04

BS1064-基于大数据存储实现互联网电子商城网站及数据分析系统

本基于大数据存储实现互联网电子商城网站及数据分析系统，系统主要采用java，hbase，springboot，mysql，mybatis，商品推荐算法，数据分析存储技术，实现基于互联网商品实现针对用户购买推荐
Q计算机程序优异哥_2934918046·2023-04-02 06:09

茴字有四种写法，HTAP呢？

HTAP一直都是数据库领域的热门技术话题，在3月26日的DataFun大数据存储峰会上，矩阵起源CTO张颖峰首次对外亮相介绍了整个数据库领域实现HTAP的五种技术路线，以及矩阵起源的MatrixOne项目的实现思路
MatrixOrigin·2023-03-31 23:50

大型网站架构 - LAMP

一网站大访问量1.负载均衡：大的访问量平均分流到多台PC机LinuxLVS负载均衡2.冗余技术：服务器集群，一台服务器宕机，另一台服务器会被激活（防止单点故障）二网站大数据存储1.Mysql数据库集群（
zdp072·2023-03-31 06:09

京东零售大数据云原生架构实践

通常谈到大数据，想到的是大数据平台、Hadoop生态或者数据湖技术，关注于大数据存储、大数据计算方向上的技术发展与应用；谈到云原生，想到的是微服务架构、容器化或者SRE（SiteReliabilityEngineer
特仑苏_T·2023-03-29 18:12

大数据存储与处理——配置HADOOP伪分布式

链接:https://pan.baidu.com/s/1j4nwwTne1AeAfa7x5zpEZQ提取码:qdpj首先了解hadoop的几种分布模式1、本地模式：本地模式就是解压源码包，不需要做任何的配置。通常用于开发调试，或者感受hadoop2、伪分布模式：在学习当中一般都是使用这种模式，伪分布模式就是在一台机器的多个进程运行多个模块。虽然每一个模块都有相应的进程，但是却还是运行在同一个系统里
取个程序猿的名字·2023-03-26 18:44

LSM树原理、应用与优化（转载）

前言：为什么传统数据库使用B树较多，而大数据存储使用LSM树较多？kudu为什么比hbase更适合支持OLAP查询？
胖虎大哥·2023-03-25 00:06

权威检验确认，星辰天合 SDS 产品通过可信云分布式存储软件全类型评估

，2022下半年第四批可信云·云基础设施与云软件领域评估结果公布，中国信通院和泰尔实验室联合出具了检验报告，星辰天合SDS产品XEDPV6通过了可信云分布式存储软件全类型（块存储、文件存储、对象存储、大数据存储
XSKY星辰天合·2023-03-24 02:14

Hadoop大数据存算分离下，如何解决新旧存储共存？

在传统的ApacheHadoop集群系统中，计算和存储资源是紧密耦合的，HDFS为大数据存储带来便利的同时，也面临着一些挑战：当存储空间或计算资源不足时，只能同时对两者进行扩容。
XSKY星辰天合·2023-03-24 02:41

GeoMesa 从GDELT中写入数据

GDELT介绍GDELT是国外一个大数据存储项目，它提供了自1979年至今的全球广播、印刷和网络新闻媒体报道的事件，并按时间和位置索引。其数据量十分庞大，类别也很丰富。
涛O_O·2023-03-19 19:07

Hadoop三大核心组件——HDFS、YARN、MapReduce原理解析

原理什么是MapReduce完整工作流程图流程详细描述MapTask流程Shuffle流程ReduceTask流程总结一、简介Hadoop主要在分布式环境下集群机器，获取海量数据的处理能力，实现分布式集群下的大数据存储和计算
笑里笑外~·2023-03-09 07:35

大数据之大数据的典型应用

上一期我们从数据流转的过程对大数据采集技术、大数据存储技术、大数据处理技术、大数据建模和治理技术、大数据可视化等技术做了一个简要的介绍。下面，我们来看一下大数据几个典型的应用。
梦中的远方·2023-02-26 07:46

DITO：烟草防伪新应用 开创溯源新格局

DITOSYSTEM官网：www.ditochain.org白皮书：www.ditochain.org/DITO.pdfDITOSYSTEM是全球第一家区块链落地应用，区块链防伪溯源应用，它是目前唯一的适合较大数据存储的底层区块链
RcardoMS·2023-02-18 20:16

大数据学习之(十二)HBase快速上手

HBase快速上手前言Hbase是Hadoop数据库，一种分布式、可扩展的大数据存储。
往事如雷灌顶·2023-02-17 14:21

轨迹云全新发布 ：外业车辆、人员、设备轨迹高效管理

而要实现轨迹的管理应用，需要具备定位、大数据存储、空间检索、轨迹纠偏算法、道路数据体系，导航路线计算等多方面能力的才能实现，而这对于开发者而言却是很难达到的。
·2023-02-17 12:54

iot融合多媒体边缘p2p组网服务

gb28181rtsprtmpwebrtc等推流h264h265aacopus，实现树状，网状p2p组网，将iot实时数据及音视频数据融合在网络并发分发，按需消费，逻辑和网络路由由客户端定制，利用时序数据库tdengine强大iot大数据存储分析能力
superxxd·2023-02-06 19:08

应对AI与混合多云的工作负载，IBM推多项存储技术

图片来源于网络IBM正不断强化AI和大数据存储解决方案，以便客户充分利用本地和云中日益增长的数据。近日，IBM宣布了一系列创新举措。
存储界·2023-02-05 05:09

万亿级日志与行为数据存储查询技术剖析——Hbase系预聚合方案、Dremel系parquet列存储、预聚合系、Lucene系...

utm_source=infoq&utm_medium=popular_widget&utm_campaign=popular_content_list&utm_content=homepage目前大数据存储查询方案大概可以分为
djph26741·2023-02-05 04:44
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他