大数据存储

[转]万亿级日志与行为数据存储查询技术剖析

所以，在笔者的工作经历中，本着以下的目标，寻找更优的大数据存储和查询方案：数据无损：数据分析挖掘都依赖于我们
x_no_one·2020-02-02 21:35

Hadoop学习-基础篇

Hadoop大数据平台与架构功能与优势Hadoop是大数据存储与分析的架构，是分布式存储和分布式计算平台两个核心组成HDFS：分布式文件系统，用于存储海量的数据MapReduce：并行处理框架，实现任务的分解和调度应用可用于搭建数据仓库
I_李岩·2020-01-19 21:30

Geomesa 索引

我们了解到Geomesa是一个分布式地理大数据存储框架，它通过与许多分布式数据库整合，并提供标准化的接口，使得用户能方便、高效地在这些分布式数据库中查询、检索、处理时空大数据。
涛O_O·2020-01-12 22:23

大数据存储格式的进化之旅

本文来自OPPO互联网技术团队，转载请注名作者。同时欢迎关注我们的公众号：OPPO_tech，与你分享OPPO前沿互联网技术及活动。自03年开始，大数据三驾马车纷至沓来，同志们第一次拥有了分布式计算存储能力。这种暴发户式的转变，让人们莫名有了十足的底气：“数据量大什么的怕你呀，数据格式什么的，赶紧放进来就是了；别管了，就就就那个csv吧，快糙猛搞起来呀，大不了读的时候再解析校验啥的，读时校验(sc
OPPO互联网技术·2020-01-11 03:02

初识 HBase

HBase与Hadoop中的其他组件一样，可以运行在廉价硬件上，并可提供数10亿行X数百万列的大数据存储、管理能力，以及随机访问和实时读/写能力。HBase的设计模型参考了Google的Bigt
ZeroOne01·2020-01-08 18:30

Geomesa学习1- 概要

一、需求背景时空数据存储的需求愈发庞大，80%的信息与空间信息有关；时空数据时用于整合其他各种类型数据的基础；对完善的时空大数据存储解决方案的需求日益迫切。
汤圆毛毛·2020-01-07 19:52

十、文件上传

一、文件上传介绍要将客户端（浏览器）大数据存储到服务器端，不将数据直接存储到数据库中，而是要将数据存储到服务器所在的磁盘上，这就要使用文件上传。作用:减少了数据库服务器的压力，对数据的操作更加灵活。
圣贤与无赖·2020-01-06 04:30

java基本数据类型

short：16位，最大数据存储量是65536，数据范围是-32768~32767之间。int：32位，最大数据存储容量是2的32次方减1，数据范围是负的2的31次方到正的2的31次方减1。
junwu_123·2020-01-06 00:50

入行IT，为什么建议你选择Java？

专注于高并发架构设计和大数据存储方向的研究。我们为什么选择Java大多数人选择Java可能只是因为听说Java前景好、Java比较好找工作、Java语言在T
OSET我要编程·2020-01-05 20:25

大数据存储的两个实战场景

现如今各种数据存储方案层出不穷，本文仅仅是结合两个实战场景就基于HBase的大数据存储做了简单的分析，并对HBase的原理做了简单的阐述。
栀子花_ef39·2020-01-05 02:06

无标题文章

NoSQL数据库是为了解决高并发、高可扩展、高可用、大数据存储问题而产生的解决方案。NoSQ
我只是旁白·2020-01-03 15:35

DITO：应用区块链技术购买奢侈正品不再奢侈

DITOSYSTEM官网：www.ditochain.org白皮书：www.ditochain.org/DITO.pdfDITOSYSTEM是全球第一家区块链落地应用，区块链防伪溯源应用，它是目前唯一的适合较大数据存储的底层区块链
RcardoMS·2020-01-02 02:28

大数据存储的秘密之分区

分区，又称为分片，是解决大数据存储的常见解决方案，大数据存储量超过了单节点的存储上限，因此需要进行分区操作将数据分散存储在不同节点上，通常每个单个分区可以理解成一个小型的数据库，尽管数据库能同时支持多个分区操作
luoxn28·2020-01-01 17:00

[hive]一种基于Hive日志分析的大数据存储优化方法_王正也_百度文库

一种基于Hive日志分析的大数据存储优化方法王正也百度文库http://wenku.baidu.com/link?
葡萄喃喃呓语·2019-12-30 18:51

大数据核心技术---Map技术

大数据处理关键技术一般包括：大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用（大数据检索、大数据可视化、大数据应用、大数据安全等）。
程序o07·2019-12-29 14:55

大数据相关技术及应用实践

大数据可以抽象的分为大数据存储和大数据分析，这两者的关系是：大数据存储的目的是支撑大数据分析。存储技术大数据可以抽象的分为大数据存储和大数据分析，这两者的关系是：大数据存储的目的是支撑大数据分析。
大数据架构师·2019-12-28 20:40

【巨杉数据库SequoiaDB】巨杉⼯具系列之一 | ⼤对象存储⼯具sdblobtool

本文作为系列第一篇，将分享巨杉数据库大数据存储工具sdblobtool的基本介绍和应用实践。
SequoiaDB巨杉数据库·2019-12-25 22:22

开源数据同步神器——canal

前言如今大型的IT系统中，都会使用分布式的方式，同时会有非常多的中间件，如redis、消息队列、大数据存储等，但是实际核心的数据存储依然是存储在数据库，作为使用最广泛的数据库，如何将mysql的数据与中间件的数据进行同步
IT米粉·2019-12-21 00:47

2个G的大数据和AI学习资料免费赠送

已收集的资源资源会不断进行更新大数据相关大数据时代：生活、工作与思维的大变革大数据之路：阿里巴巴大数据实践白话大数据与机器学习大数据：互联网大规模数据挖掘与分布式处理大数据存储MongoDB实战指南大数据架构师指南大数据架构详解
我不是大婶·2019-12-20 08:17

大数据 HDFS

分布式文件系统，Hadoop存储组件特性1.高容错性：认为硬件总是不可靠的（硬件一出问题，数据全没了，所以不相信硬件，这也是Hadoop精髓）2.高吞吐量：为大量数据访问的应用提高吞吐量支持3.大数据存储
dawsonenjoy·2019-12-19 18:17

什么工具能让你采集BS网页或CS软件系统的数据时，事半功倍？

大数据处理关键技术一般包括：大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用（大数据检索、大数据可视化、大数据应用、大数据安全等）。
xiaobangtongxue·2019-12-17 17:00

Hadoop 之 小象诞生

提及Hadoop这一大数据存储和处理工具，自然要从它的爸爸DougCutting说起。DougCutting不仅仅是Hadoop的创始人，还是大名鼎鼎的搜索引擎工具Lucene的开创者。
彤庆·2019-12-17 08:11

精艺熔炼，笃行致远——美和易思34期大数据技术师资项目成功举行

培训为期5天，分为云计算大数据基础、python数据分析及可视化、大数据存储与处理三个模块进行。美和易
美和易思教育·2019-12-14 02:48

每秒7亿次请求，阿里新一代数据库如何支撑？

阿里妹导读：Lindorm，就是云操作系统飞天中面向大数据存储处理的重要组成部分。
阿里云云栖号·2019-12-12 01:37

【译】使用Spark SQL 运行大规模基因组工作流

编译:诚历，阿里巴巴计算平台事业部EMR技术专家，ApacheSentryPMC，ApacheCommonsCommitter，目前从事开源大数据存储和优化方面的工作。
阿里云官网·2019-12-11 22:54

Hadoop开发--Sqoop1.4.7

当大数据存储器
无剑_君·2019-12-09 11:26

一文学会目前最火热的大数据技术

Elasticsearch是当前主流的分布式大数据存储和搜索引擎，可以为用户提供强大的全文本检索能力，广泛应用于日志检索，全站搜索等领域。
腾讯云加社区·2019-12-08 00:56

hadoop ozone入门

简介众所周知，HDFS是大数据存储系统，并在业界得到了广泛的使用。
wellDoneGaben·2019-12-04 14:00

Hadoop_HDFS_02

HadoopDistributeFileSystem的简称,意为:Hadoop分布式文件系统.是Hadoop三大核心组件之一,作为最底层的分布式存储服务而存在,是Hadoop领域最基础的部分.分布式文件系统解决的问题就是大数据存储
大数据界第一ADC·2019-12-02 21:00

分布式数据库HBase以及HBase的单机模式，伪分布式模式和完全分布式模式

HBase简介HBase是一个分布式的，面向列，可扩展的大数据存储的开源数据库，该技术来源于FayChang所撰写的Google论文《Bigtable：一个结构化数据的分布式存储系统》。
意识流丶·2019-12-02 04:11

SQL Server 2019怎么安装？SQL Server 2019详细安装使用教程及SSMS连接

与之前版本相比，新版本的SQLServer2019具备以下重要功能：在Linux和容器中运行的能力，连接大数据存储系统的PolyBase
·2019-11-28 22:04

[2] HBase的概念和定位

一、概念HBase™istheHadoopdatabase,adistributed,scalable,bigdatastore.一个分布式、可拓展的、的大数据存储的hadoop数据库。
东皇Amrzs·2019-11-28 01:08

【巨杉数据库SequoiaDB】巨杉⼯具系列之一 | ⼤对象存储⼯具sdblobtool

本文作为系列第一篇，将分享巨杉数据库大数据存储工具sdblobtool的基本介绍和应用实践。
OliverFinn·2019-11-20 15:50

大数据存储引擎笔记

大数据存储引擎之哈希数据结构就是键值对优点：检索快缺点：不支持范围扫描如果数据都在内存中，那就很快的，比如常用redis作为缓存组件（数据转到硬盘就另说了）如果要放到硬盘中存储，以bitcask为例，每次操作都是追加文件
Josen_Qu·2019-11-07 08:11

Hadoop相关学习笔记

大数据架构体系结构及开源组件HadoopHDFS：大数据存储Mapreduce：大数据计算-批量计算Spark：计算引擎,速度快于HadoopHbase：存储对形式和格式；查询非常快，与Hive比较Zookeeper
咸鱼干lili·2019-11-06 18:48

JAVA原子操作

short：16位，最大数据存储量是65536，数据范围是-32768~32767之间。int：32位，最大数据存储容量是2的32次方减1，数据范围是负的2的31次方到正的2的31次方减1。
米途小码·2019-11-06 13:10

2018-01-07西安北邮在线大数据学完后可以做哪些工作？

请点击此处输入图片描述大数据学完后可以做哪些工作：(1)大数据系统研发工程师：负责大数据系统研发工作，包括大规模非结构化数据业务模型构建、大数据存储、数据库架构设计以及数据库详细设计、优化数据库
大海_18a0·2019-11-06 08:33

JindoFS解析 - 云上大数据高性能数据湖存储方案

作者：殳鑫鑫，花名辰石，阿里巴巴计算平台事业部EMR团队技术专家，目前从事大数据存储以及Spark相关方面的工作。
大涛学长·2019-11-05 15:05

让时空大数据不再神秘——如何直连使用ArcGIS时空大数据存储

如果只想了解如何连接请跳过基础章节直接ctrl+F"如何连接ArcGIS时空大数据存储中的Elasticsearch"Elasticsearch基础Elasticsearch有几个核心概念。
Xuds·2019-11-05 08:46

HDFS基本介绍

分布式文件系统解决的问题就是大数据存储。它们是横跨在多台计算机上的存储系统。分布式文件系统在大数据时代有着广泛的应用前景，它们为存储和处理超大规模数据提供所需的扩展能力。
kkkakio·2019-11-04 09:55

redis

NoSQL数据库是为了解决高并发、高可扩展、高可用、大数据存储问题而产生的解决方案。NoSQL特点，使用场景数据模型比较简单需要灵活性更强的IT系统对数据
无聊新生·2019-11-02 16:22

关于云存储网盘，企业不得不考虑的四大要素

前记：云存储自云计算兴起逐渐为人熟知，在移动互联网、物联网发展迅猛，各行业领域对大数据存储提出了新的需求，目前云存储行业已从最初的云盘、云端笔记，走向云存储系统，行业发展日渐成熟。什么是云存储？
镭速·2019-10-28 18:35

Apache Kudu入门

提起大数据存储，我们能
黑马程序员广州·2019-10-17 03:35

八大基本数据类型及包装类（装箱拆箱）

short：16位，占用空间为2字节，最大数据存储量为65536，数据范围为-32768~32767。int：32位，占用空
MrHH·2019-10-13 12:00

上周热点回顾（9.9-9.15）

(编码砖家)·你多久更新一次简历，决定了你的收入多久能提升(hsm_computer)·（六十）c#Winform自定义控件-鼓风机（工业）(冰封一夏)·[NewLife.XCode]分表分库（百亿级大数据存储
博客园团队·2019-09-16 09:00

适合低学历的大数据学习方法：大数据采集，大数据分析，大数据存储就该这样学！

大数据采集01—概览02—相关延展系统日志数据的采集Scribe是Facebook开源的日志收集系统，在Facebook内部已经得到大量的应用。它够从各种日志源上收集日志，存储到一个中央存储系统上，以便于进行集中的统计分析处理。Scribe为日志的“分布式收集，统一处理”提供了一个可扩展的、高容错的方案。（老师收学生信息表，需要班长代理收集的例子）。Chukwa提供了一个对大数据量日志类数据采集、
wwdede·2019-09-09 21:01

首发！《长安十二时辰背后的技术秘籍》正式公开，速来下载

靖安司本身是大数据存储，传递消息的望楼是数据加密和数据传输，长安沙盘是数据可视化，还有最重要的大案牍术则是智能推荐系统。除此之外，你知道演员雷佳音是“北斗星”选出来的吗？
阿里云云栖社区·2019-09-05 11:17

首发！《长安十二时辰背后的技术秘籍》正式公开，速来下载

靖安司本身是大数据存储，传递消息的望楼是数据加密和数据传输，长安沙盘是
chikuai9995·2019-09-05 11:00

首发！《长安十二时辰背后的技术秘籍》正式公开，速来下载

靖安司本身是大数据存储，传递消息的望楼是数据加密和数据传输，长安沙盘是数据可视化，还有最重要的大案牍术则是智能推荐系统。除此之外，你知道演员雷佳音是“北斗星”选出来的吗？
阿里云云栖社区·2019-09-05 00:00

HDFS NameNode的启动过程加速：多索引下的并行加载

文章目录前言HDFSNN的启动过程FSImage多索引下的并行加载优化引用前言对于大部分使用HDFS作为大数据存储系统的用户而言，NameNode的启动过程缓慢已经可以算是一个十分痛点的问题。
Android路上的人·2019-08-27 22:05
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他