大数据存储

2018年区块链革命性项目VRBT是一种什么样的技术架构？

技术分析总体架构我们需要基于现有的区块链BTC1.0技术与ETH2.0智能合约技术进行深度重构和优化，BTS石墨烯等技术优势，开发出我们自己的高性能、高推展性的基础链，以满足我们VR现实场景与虚拟商场的及时支付需求、和庞大数据存储需求
weixin_42335436·2020-07-10 10:28

数据可视化分析软件开发_大数据系统建设解决方案

大数据分析的过程包括：大数据采集——预处理——大数据存储管理——大数据建模——大数据可视化分析。1.大数据采集：大数据的采集主要有4种来源，管理
weixin_33973609·2020-07-10 08:33

大数据技术与实践

大数据技术与实践11.1大数据概述11.1.1大数据产生的背景11.1.2大数据的定义11.1.3大数据产生的4V特征11.2大数据存储平台11.2.1HDFS11.2.2HBase11.2.3Cassandra1
qq_41837608·2020-07-10 00:16

Hadoop大数据存算分离下，如何解决新旧存储共存？

在传统的ApacheHadoop集群系统中，计算和存储资源是紧密耦合的，HDFS为大数据存储带来便利的同时，也面临着一些挑战：当存储空间或计算资源不足时，只能同时对两者进行扩容。
wx5ed486b1a9423·2020-07-09 17:21

大数据处理之荷兰三剑客

大数据现在是业内炙手可热的话题，随着技术的发展，大数据存储技术已经不再是难点，但是对大数据如何做好存储后的下一步处理将是未来竞争的焦点，目前比较受欢迎的Storm,Spark,Hadoop三个大数据处理工具都是
千山独行·2020-07-09 16:36

Hadoop的NameNode和SecondaryNameNode的功能描述

怎么实现的大数据存储？怎么实现的大数据计算？首先我们来看构造NameNode和SecondaryNameNode，这俩是hadoop的管理者，我们来主要研究下这俩小兄弟都做了什么工作？
wjyyawjx·2020-07-09 00:39

主流大数据存储解决方案评析

EMCIsilon：横向扩展性能突出大数据存储不是一类单独的产品，它有很多实现方式。
weixin_34253539·2020-07-08 17:39

IT干货||大数据关键技术分析

大数据处理关键技术一般包括：大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用（大数据检索、大数据可视化、大数据应用、大数据安全等）。
IT奶爸·2020-07-07 23:39

大数据开发笔记

EMR-阿里云大数据平台/工业场景下的大数据工具HDFS-分布式文件系统MapReduce-分布式数据处理引擎HBase-分布式数据库/NoSQL数据库Hive-数据仓库软件/NOSQL数据库Kudu-大数据存储引擎
Fighter Fong·2020-07-07 22:54

初识 HBase

HBase与Hadoop中的其他组件一样，可以运行在廉价硬件上，并可提供数10亿行X数百万列的大数据存储、管理能力，以及随机访问和实时读/写能力。HBase的设计模型参考了Go
端碗吹水·2020-07-07 19:32

大数据存取的选择：行存储还是列存储？

目前大数据存储有两种方案可供选择：行存储和列存储。业界对两种存储方案有很多争持，集中焦点是:谁能够更有效地处理海量数据，且兼顾安全、可靠、完整性。从目前发展
hjckevin·2020-07-07 09:06

百度海量日志处理——任务调度实践与优化

作者简介运小军百度高级研发工程师负责百度运维部大规模日志处理、海量事件数据存储相关设计研发工作，在分布式系统架构、大数据存储计算、高性能网络服务和即时通讯服务有广泛实践经验。
AIOps智能运维·2020-07-07 08:52

Hadoop大数据平台入门——HDFS和MapReduce

所以今天来学习一下大数据存储和处理。随着数据的不断变大，数据的处理就出现了瓶颈：存储容量，读写速率，计算效率等等。
Alukar·2020-07-07 07:26

大数据存取的选择：行存储还是列存储？

http://developer.51cto.com/art/201209/358008.htm目前大数据存储有两种方案可供选择：行存储和列存储。
程江玉·2020-07-07 06:27

技能学习

至少掌握一种前端框架Server后端开发，至少掌握一种后端框架Server运维，掌握LinuxServer的搭建与维护客户端开发，iOS和Android至少掌握一种数据库，掌握SQL和NoSQL数据库大数据存储
ZenMonk·2020-07-06 21:47

参考一下(转载)

数据模型HBase在淘宝的应用和优化小结[Hadoop]如何为你的企业选择正确的Hadoop版本[HBase]数据模型（逻辑结构）[Hadoop]实际应用场景之-阿里HBase的特征和优点笔者带你剖析大数据存储
????0528·2020-07-06 10:00

基于炼铁大数据智能互联平台推动传统工业转型升级

北京东方国信科技股份有限公司，北京100102摘要：通过炼铁物联网子系统采集高炉现场监控系统、检化验系统、生产运营系统的基础数据，根据工艺流程建立相关机理数学模型及信息物理系统，研发了基于数据驱动和机理模型的大数据存储和智能互联平台
唐名威·2020-07-06 06:06

FPGA实现的SDRAM驱动

SDRAM的时钟频率能达到100MHz以上，主要用于程序的运行空间、大数据存储等；Memory工作需要同步时钟，又由于信息存放在电容上，所以需要不断地刷新来维持当前保存的数据。
向阳花木木·2020-07-06 02:42

主流大数据系统在后台的层次角色及数据流向

大数据是一个比较宽泛的概念，它包含大数据存储和大数据计算，其中大数据计算可大致分为计算逻辑相对简单的大数据统计，以及计算逻辑相对复杂的大数据预测。
Msro·2020-07-06 00:07

利用Spark SQL实现轻量级用户数据查询

简介当人们把越来越多的大数据存储在HDFS或者AWS的S3上，通常下一个问题是如何让全公司范围的员工能够方便的查询这些数据。
weixin_34025151·2020-07-05 23:34

MapGis如何实现WebGIS分布式大数据存储的

作为解决方案厂商，MapGis是如何实现分布式大数据存储的呢?
weixin_30843605·2020-07-05 22:04

Hadoop专业解决方案之构建Hadoop企业级应用

这主要是因为一下原因：1.传统应用的基础设施是基于传统数据库访问模式设计的，它不支持Hadoop；2.数据存储在Hadoop之上，实时访问集群中部分数据是可行的；3.Hadoop大数据存储能力使得你可以存储数据集的多个版本
weixin_30292843·2020-07-05 20:22

使用python实现二叉搜索树

二叉查找（搜索）树是一种把较小数据存储在左节点二较大数据存储在右节点的二叉树。二叉搜索树要求：每个节点都不比它左子树的任意元素小，而且不比它的右子树的任意元素大。
荒漠上的柏油路·2020-07-05 18:43

数据采集与预处理技术考点复习——第一、二章

数据增长速度快，处理速度也快，时效性要求高（5）准确性：数据处理结果保证一定的准确性和可信赖度（6）复杂：由于数据大量、多样，产生速度快，对数据处理和分析的难度大2.简述大数据处理过程①大数据采集②大数据预处理③大数据存储
手捧宇宙星河·2020-07-05 11:37

哪些大数据岗位最有前途？

1、大数据系统研发工程师大数据系统研发工程师是负责大数据系统研发，包括大规模非结构化数据业务模型构建、大数据存储、数据库构设、优化数据库构架、解决数据库中心设计等，同时，还要
西线学院·2020-07-05 10:47

大数据系统及分析

大数据分析主要涉及两个不同的领域：一是如何将海量的数据存储起来，二是如何在短时间内处理大量不同类型的数据，即解决大数据存储与大数据处理等问题大数据概览大数据的主要特征大量化(Volume)
Sues·2020-07-04 08:17

如何用Spark SQL完成轻量级用户数据查询

当人们把越来越多的大数据存储在HDFS或者AWS的S3上，通常下一个问题是如何让全公司范围的员工能够方便的查询这些数据。
谢雪葵·2020-07-04 02:34

hadoop + hbase架构和源码分析

数据模型HBase在淘宝的应用和优化小结[Hadoop]如何为你的企业选择正确的Hadoop版本[HBase]数据模型（逻辑结构）[Hadoop]实际应用场景之-阿里HBase的特征和优点笔者带你剖析大数据存储
幽灵之使·2020-07-02 09:37

云计算（1.2）Google云计算三大核心技术 - 分布式数据处理MapReduce

前言GFS解决了Google的大数据存储问题针对大数据进行计算并获得预期结果的技术就是MapReduceGoogle的MapReduce不开源后面可以通过使用HadoopMapReduce深入理解MapReduce
有机后浪·2020-07-02 06:07

Mongodb与GridFS

一、概述GridFS是基于mongodb存储引擎是实现的“分布式文件系统”，底层基于mongodb存储机制，和其他本地文件系统相比，它具备大数据存储的多个优点。
iteye_19607·2020-07-02 04:54

hbase全分布式集群的搭建

1.简介ApacheHBase™是Hadoop数据库，这是一个分布式，可扩展的大数据存储。当你需要随机、实时读取/写入海量数据时使用ApacheHBase™。
盗梦者_56f2·2020-07-02 03:43

100TB大数据存储方案

HiveHbase存储介质：https://www.zhihu.com/question/46392643?sort=created请问，在家里攒一套100TB-200TB的存储有什么架构方案可以借鉴的？预算10万以内，性价比越高越好带宽和吞吐量不是很重要，USB3.0/千兆LAN单出口都可以接受，软raid硬raid都行可以是机柜形式，有单间机房耗电无所谓，噪声小一点可靠，2-3年内只需要更换坏
haimianjie2012·2020-07-02 01:39

深入浅出系列Hbase之原理及概念（1）

我们先来看看官网是如何介绍Hbase组件，其官网：http://hbase.apache.org/ApacheHBase™是Hadoop数据库，这是一个分布式，可扩展的大数据存储。
流一恩典·2020-07-01 21:10

大数据专业建设方案

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保
像我这样的人_5783·2020-07-01 15:55

旧电脑固态硬盘升级，快速稳定之首选 — 东芝 Q200 EX 240GB SSD

SSD固态硬盘具有数据传输快的特点，适合运行大数据，缺点是容量小，不适合大数据存储。SSD固态硬盘，成为操作系统以及大数据传输的最佳选择。——开箱感受——振兴您的计算机与更快的效能，是东芝(T
在线江湖体验评测室·2020-07-01 06:44

GPB简介

GPB的全称为GoogleProtocolBuffer，是谷歌公司用于在大数据存储及交换方面的一个开源的协议和开发库。
lunlunl·2020-07-01 01:08

70个大数据集

以下是70多家可以获得免费大数据存储库的网站。Wikipedia:Database：向感兴趣的用户提供
zrjdds·2020-06-30 19:12

大数据实验室建设方案

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保障、产业创新大数据应用、跨行业大
小电池·2020-06-30 18:22

hadoop学习笔记

基于hadoop，可以组建单台到多台服务器的集群，来提供大数据存储和计算方案。
bpker·2020-06-30 18:47

大数据处理的五大关键技术及其应用

其中主要工作环节包括：大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用(大数据检索、大数据可视化、大数据应用、大数据安全等)。一、大数据采集技术数据是指通过RFID射频数
阿里十年程序员生活·2020-06-30 11:35

Yotta企业云盘企业智能化办公

近年来，在技术与市场的共需催生下，全球的数据量呈现出了爆炸式增长，同时大数据存储需求也应运而生，而云环境下的大数据存储将逐步走向大众视野。
wx5ed476a98d9f8·2020-06-30 10:46

大数据存储的两个实战场景

因此HBase被广泛使用在大数据存储的解决方案中。HBase的优点：-列可以动态增加，并且列为空就不存储数据，节省存储空间。-Hbase自动切分数据，使得数据存储自动具有水平scalability。
此id已存在·2020-06-30 05:29

关系型数据的收集

为了能利用大数据技术处理和存储关系型数据（如mysql，oracle），首先需将这些数据导入到像HDFS、HBase这样的大数据存储系统中，以便使用MapReduce、Spark这样的分布式计算技术进行高效分析和处理
熙客·2020-06-30 02:22

大数据可以考哪些证书？

大数据领域包括：大数据系统管理、Hadoop、分析、数据科学、大数据存储/安全等，物联网的发展推动了对大数据技能的更多需求，特别是在分析领域，用人需求量之大达到创记录的水平，薪资也水涨船高。
wwdede·2020-06-29 21:47

1.大数据存储选型——何时用hbase

数据库发展NoSQLSharding-nothing存储选型要搞懂大数据存储选型，首先必须得了解数据库的发展历史，了解关系数据库的优势和缺点，才能进一步考虑如何处理这些问题。
文大侠·2020-06-29 17:56

如何用Apache Spark和LightGBM构建机器学习模型来预测信用卡欺诈

编译：抚月，阿里巴巴计算平台事业部EMR高级工程师，ApacheHDFSCommitter，目前从事开源大数据存储和优化方面的工作。本文出现的所有链接，可点击文末“阅读原文”直达。
weixin_45906054·2020-06-29 16:39

专题导读：大数据的系统结构

本专题汇集了国内活跃在一线的系统结构研究者的5篇文章，从大数据处理的并发索引结构、分布式查询框架、大数据存储系统、大数据
唐名威·2020-06-29 16:28

数字时代云计算与边缘计算的区别

从那时起，它经历了许多阶段，为企业提供大型、集中的大数据存储服务器。相反，边缘
腼腆的小老虎·2020-06-29 16:00

Hadoop学习笔记-Hadoop入门和HDFS的原理（8月5号）

3.1大数据存储的难题3.2HDFS的解决方案3.3HDFS读写的基本单位：数据块3.3.1为什么要分块管理?3.3.2为什
Yuchao Huang·2020-06-29 07:23

服务器运维之服务器Raid状态监控报警附监控附脚本

服务器运维之服务器Raid状态监控报警概述对于大数据存储，可选的方式有很多，比如分布式存储，服务器软链接，但今天我要说的是硬盘阵列(Raid)，它可以把很多硬盘组合成一个大的盘，几百T的存储空间，相信对于大多数公司来说可以用一生了
lywsun68·2020-06-29 01:32
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他