大数据存储

大数据存储单位介绍(TB、PB、EB、ZB、YB有多大

大数据作为时下最火热的IT行业的词汇，随之数据仓库、数据安全、数据分析、数据挖掘等等围绕大数量的商业价值的利用逐渐成为行业人士争相追捧的利润焦点“大数据”作为时下最火热的IT行业的词汇，随之数据仓库、数据安全、数据分析、数据挖掘等等围绕大数量的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。笔者愚钝，大数据有多大，一直没有清晰的概念，故此简单的科普研究，分享至此：最小的基本单位是Byte应该没多
数据大学·2021-06-26 17:30

上海职位：大数据基础设施研发工程师/数仓工程师/机器学习工程师/大数据存储研发工程师/数据业务全栈开发工程师， 视频面试，非996/997

上海职位：大数据基础设施研发工程师/数仓工程师/机器学习工程师/大数据存储研发工程师/数据业务全栈开发工程师，视频面试，非996/997大数据基础设施研发工程师工作职责1.负责数据平台的系统高可用架构和规划
IT猎头fancyfrees·2021-06-23 17:19

大数据学习方向知多少

第一章：Hadoop在大数据存储和计算中Hadoop可以算是开山鼻祖，现在大多开源的大数据框架都依赖Hadoop或者与它能很好的兼容。关于Hadoop，你至少需要搞
kuntoria·2021-06-21 22:00

浅析大数据Hadoop之YARN架构

YARN提供了资源管理和资源调度等机制1.1原HadoopMapReduce框架对于业界的大数据存储及分布式处理系统来说，Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架，对于Hadoop框架的介绍在此不再累述
yoku酱·2021-06-19 18:43

大数据专业共建方案

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保
像我这样的人_5783·2021-06-19 08:35

教你在Kubernetes中快速部署ES集群

摘要：ES集群是进行大数据存储和分析，快速检索的利器，本文简述了ES的集群架构，并提供了在Kubernetes中快速部署ES集群的样例；对ES集群的监控运维工具进行了介绍，并提供了部分问题定位经验，最后总结了常用
·2021-06-18 22:55

来自大数据时代的招聘启事

研发相应的工作：负责大数据系统的研发，包括大规模非结构化数据业务模型构建、大数据存储、数据库构设、优化数据库构架、解决数据库中心设计
陆嘉_大美嘉·2021-06-15 12:31

大数据实训室建设方案

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全
像我这样的人_5783·2021-06-15 01:42

大数据时代移动互联网广告精准营销分析

在大数据时代最为主要的特征就是大数据存储以及大数据分析，而基于这两点进行广告的营销是一种全新的方式与手段，是一种与大数据发展较为文化的广告营销模式。1.大数据时代广告营销的现状在大数据时代的广告营销就
卓战科技·2021-06-14 21:19

大数据架构技术地图-学习大纲

传统的大数据三件套大数据采集大数据存储大数据计算也有说大数据可视化的，一般来说可视化的工作仍属于传统前端展示，与“
朝朝Mumu·2021-05-18 16:45

大数据与云计算整理

目录大数据大数据基础大数据概述大数据处理架构Hadoop大数据采集大数据存储分布式文件系统HDFS分布式数据库HBASENoSQL数据库云数据库大数据处理与分析MapReduceSpark流计算图计算数据可视化大数据应用云计算云概念云架构云组件云技术云端技术终端技术云安全信息管理与数据安全计算可用性互操作性和可移植性云应用云方案大数据大数据基础大数据概述数据产生方式经历的几个阶段运营式系统阶段用户
vircorns·2021-05-12 18:47

FMDB Release时大数据存储掉数据

这几天项目进行数据存储时使用FMDB框架时发现Release时会出现有很多数据存储不上，Degug状态时没问题。FMDB提示的报错原因为error:14！主要原因是Degug状态不会清除缓存，Release时编译规格默认较严格，会自动清除缓存导致错误出现。设置如下：将其中的Release改成None!就可以了！
霖麟枫0·2021-05-10 10:00

数据复制与一致性的基本原则与设计理念

在大数据存储系统中，为了增加系统高可用性，往往会将同一数据存储多份副本，工业界的常规做法是三备份。
神呐_宽恕我把·2021-04-22 16:58

大数据管理与应用专业教学实训平台建设

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保障、产业创新大数据应用、跨行业大数据
00d34451b19b·2021-04-17 23:38

大数据技术与应用专业实训系统

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保障、产业创新大数据应用、跨行业大数据
00d34451b19b·2021-04-17 16:13

开讲啦！TDengine 10 倍性能的背后故事：内核技术剖析

2021年4月17日，DataFunSummit——大数据存储架构峰会将如约而至。
涛思数据·2021-04-14 17:00

大数据入门：大数据数据仓库主流选择

大数据时代，大数据存储的解决方案，往往涉及到数据仓库的选型策略。从传统时期的数据仓库，到大数据环境下的数据仓库，其核心的技术架构是在随着最新技术趋势而变化的。
成都加米谷大数据·2021-04-13 21:49

掘金大数据存储市场,供应商还需解决哪些难题?

2021年全球存储产品全线提价。2月底的DRAM、内存模块、NANDFLASH、NORFlash等的价格均出现调涨。以内存的价格为例——DRAMeXchange数据显示，截至今年2月3日，8GbDDR4内存颗粒报价达到3.93美元，去年8月的报价仅为2.54美元。去年下半年因疫情管控、停电、产能紧张、超额预订等问题突显，加上晶圆代工产能吃紧、原厂释放到SSD渠道市场的NANDFlash资源较少、大
·2021-03-24 15:47

大数据开发-深入理解大数据Lambda架构

解决的是线下搬到线上的效率问题，而下一个阶段是数据时代，处理这些各大平台积累的数据，积累的数据，一般比较大，大数据做的是什么，大规模的数据处理，主要是离线为主，所以就出现了hadoop的三大基础组件，分别解决大数据存储
·2021-03-19 22:27

大数据开发-深入理解大数据Lambda架构

解决的是线下搬到线上的效率问题，而下一个阶段是数据时代，处理这些各大平台积累的数据，积累的数据，一般比较大，大数据做的是什么，大规模的数据处理，主要是离线为主，所以就出现了hadoop的三大基础组件，分别解决大数据存储
·2021-03-19 22:59

微服务想用好，先把分布式和微服务之间的关系搞清楚

一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广，我理解的部分：不同进程之间的互相通信，不同主机的分布式对象之间调用，用于大数据存储的分布式文件系统，用于网络之间相互识别的命名服务，集群中计算或存储的无中心对等模型
·2021-03-11 08:42

微服务想用好，先把分布式和微服务之间的关系搞清楚

一、分布式和微服务架构的定义分布式应用场景涵盖的面非常广，我理解的部分：不同进程之间的互相通信，不同主机的分布式对象之间调用，用于大数据存储的分布式文件系统，用于网络之间相互识别的命名服务，集群中计算或存储的无中心对等模型
·2021-03-09 22:31

10亿+文件数压测，阿里云JindoFS轻松应对

简介：ApacheHadoopFileSystem(HDFS)是被广为使用的大数据存储方案，其核心元数据服务NameNode将全部元数据存放在内存中，因此所能承载的元数据规模受限于内存，单个实例所能支撑的文件个数大约
·2021-02-08 10:06

10亿+文件数压测，阿里云JindoFS轻松应对

简介：ApacheHadoopFileSystem(HDFS)是被广为使用的大数据存储方案，其核心元数据服务NameNode将全部元数据存放在内存中，因此所能承载的元数据规模受限于内存，单个实例所能支撑的文件个数大约
阿里云云栖号·2021-02-08 10:10

10亿+文件数压测，阿里云JindoFS轻松应对

简介：ApacheHadoopFileSystem(HDFS)是被广为使用的大数据存储方案，其核心元数据服务NameNode将全部元数据存放在内存中，因此所能承载的元数据规模受限于内存，单个实例所能支撑的文件个数大约
·2021-02-08 10:17

大数据方面的核心技术

目录分类1一、大数据采集二、大数据预处理三、大数据存储四、大数据分析挖掘分类2一、数据采集与预处理二、数据存储三、数据清洗四、数据查询分析五、数据可视化分类1简单来说，从大数据的生命周期来看，无外乎四个方面
xuankuxiaoyao·2021-01-23 17:39

大佬入场！华为宣布总投资超4亿入局IPFS！

华为服务器集群基础设施建设，为构建全新的大数据存储生态体系作出贡献。据介绍，沧州华为云服务器集群将引入世界最先进的IPFS分布式存储技术搭建。
weixin_53951070·2021-01-06 16:44

大数据存储复习

文章目录第一、二章1.大数据的特点2.大数据需要怎样的存储系统3.基于“中间件”的客户/服务器的体系结构（举例说明）4.关系型分布式数据库系统的模式结构5.分布式数据库系统的数据透明性（定义，举例）6.多数据库系统和分布式数据库系统的区别与联系第三章（1）HBase解决了HDFS的哪些问题？具有哪些特点？（2）HBase数据库中region的含义及其特性。同一个表不同行的数据可以存放在不同的服务器
CUMT-BD-Mfj·2021-01-06 15:55

滴滴在HBase性能与可用性上的探索与实践

1.背景HBase是一个基于HDFS的低成本、分布式LSM结构数据库，可以支持毫秒级别查询；支持海量的PB级的大数据存储，适用于高QPS的随机
滴滴技术·2020-12-21 22:12

Java中的8大基本数据类型详解

整数类型：short，2字节，16位，最大数据存储量是65536，数据范围是-32768~32767之间。
·2020-12-21 11:20

一键带你了解Yotta企业云盘大数据存储

Yotta企业云盘不同于其他，Yotta云盘采用的是区块链存储，并且有加密去重技术。Yotta企业云盘为大数据时代数据安全高效存储添砖加瓦随着信息技术的普及，越来越多的文档在企业中被数字化，各种电子文档已经成为工作中不可或缺的工具。经常发生计算机硬盘损坏，文件丢失，恶意删除，机密泄漏等。如何保证文档的安全性是企业信息管理的重点。什么样的云盘更好用？企业云盘是基于云计算理念推出的企业数据网络存储和管
lqyanna·2020-12-16 12:10

Hadoop平台搭建和大数据分析-网络配置

其中,HDFS具有高容错性，负责大数据存储;MapReduce则负责对HDFS中的大量数据进行复杂的分布式计算。其中，HDFS具有高容错性，负责大数据存储:MapReduce则负责对HDFS中的
啾啾啾七·2020-12-03 09:40

使用 Iceberg on Kubernetes 打造新一代云原生数据湖

现今大数据存储和处理需求越来越多样化，在后Hadoop时代，如何构建
腾讯云原生·2020-11-19 11:14

C/C++六大企业级实战项目-助你在2021春招脱颖而出拿到Offer，这样它不香吗？

一、大数据存储云盘系统（QT）项目技术内容：云盘架构设
QT程序员·2020-11-14 22:14

C/C++六大企业级实战项目-助你在2021春招脱颖而出拿到Offer，这样它不香吗？

一、大数据存储云盘系统（QT）项目技术内容：云盘架构设
QT程序员·2020-11-13 11:42

esp8266 sdk入门指南_Apache Beam实战指南 | 手把手教你玩转大数据存储HdfsIO

VincentAI前线导读：本文是ApacheBeam实战指南系列文章的第三篇内容，将对Beam框架中的HDFSIO和MySQLIO源码进行剖析，并结合应用示例和代码解读带你进一步了解如何结合Beam玩转大数据存储重要组件
weixin_39752157·2020-11-12 08:11

使用 Iceberg on Kubernetes 打造新一代云原生数据湖

现今大数据存储和处理需求越来越多样化，在后Hadoop时代，如何构建
腾讯云原生·2020-11-06 18:42

大数据技术和python开发工程师

一：大数据技术简单来说，从大数据的生命周期来看，无外乎四个方面：大数据采集、大数据预处理、大数据存储、大数据分析，共同组成了大数据生命周期里最核心的技术，下面分开来说：一、大数据采集大数据采集，即对各种来源的结构化和非结构化海量数据
stay_foolish12·2020-11-02 10:19

python在财务中的应用实训报告-数据科学与大数据技术专业实训解决方案

2018年9月工信部公示“2018年大数据产业发展试点示范项目名单”，公布了包括大数据存储管理、大数据分析挖掘、大数据安全保障、产业创新大数据应用、跨行业大数据
weixin_37988176·2020-11-01 12:38

FISU全球首家运动鞋通证联盟以区块链技术应用赋能鞋服产业升级

全球首家运动鞋通证联盟FISU（全称：FIRSESPORTSHOESTOKENUNION）与国内外区块链科学家通力合作，经过一年半的时间开发出全球第一个以运动鞋产品防伪溯源应用、运动鞋产业供应链服务、运动鞋产业大数据存储
区块链蓝海·2020-10-21 21:21

阿里、京东、华为、微软纷纷布局IPFS？Filecoin有望成为主流币吗？

沧州将建华为云服务器集群共同建设服务器集群基础设施，为构建新的大数据存储生态系统做出贡献。据报道，沧州华为云服务器集群将引入世界上最先进的IPF分布式存储技术。
念念念念念念念`安·2020-10-12 18:21

NoSql

什么是NoSql为了解决高并发、高可扩展、高可用、大数据存储问题而产生的数据库解决方案，就是NoSql数据库。
养码哥·2020-10-11 15:52

Hadoop框架：HDFS简介与Shell管理命令

本文源码：GitHub·点这里||GitEE·点这里一、HDFS基本概述1、HDFS描述大数据领域一直面对的两大核心模块：数据存储，数据计算，HDFS作为最重要的大数据存储技术，具有高度的容错能力，稳定而且可靠
知了一笑·2020-10-09 13:59

Hadoop框架：HDFS简介与Shell管理命令

本文源码：GitHub·点这里||GitEE·点这里一、HDFS基本概述1、HDFS描述大数据领域一直面对的两大核心模块：数据存储，数据计算，HDFS作为最重要的大数据存储技术，具有高度的容错能力，稳定而且可靠
知了一笑·2020-09-29 15:35

Hadoop框架：HDFS简介与Shell管理命令

本文源码：GitHub·点这里||GitEE·点这里一、HDFS基本概述1、HDFS描述大数据领域一直面对的两大核心模块：数据存储，数据计算，HDFS作为最重要的大数据存储技术，具有高度的容错能力，稳定而且可靠
知了一笑·2020-09-29 15:00

FusionInsight

大数据整体介绍FusionInsight是华为企业级大数据存储，插叙，分析的统一平台，能够帮助企业快速构建海亮数据信息处理系统，通过对海量信息数据实时与非实时的分析挖掘，发现全新价值点和企业商机FusionInsightHD
zhouzhenwei9·2020-09-17 05:57

02云计算与大数据学习之大数据关键技术与应用

文章目录1、应知应会2、大数据总体框架架构设计原则总体架构特点3、大数据存储技术4、大数据处理技术大数据处理模式大数据处理Storm平台5、大数据分析技术大数据分析特点大数据分析过程大数据分析方法6、参考文献
布布灵·2020-09-17 04:16

大数据日知录理解(1)

我们接触的大多数大数据存储与计算系统一般采用第一种方式来提高拓展性。
今晚的月色很美·2020-09-17 00:16

聊起 BigTable，让你不再胆怯

GFS作为其中一驾宝车，解决了大数据存储的难题。它能够把大量廉价的普通机器，聚在一起，充分让每台廉价的机器发挥光和热。
大盗零妖qaq·2020-09-16 22:10

python3如何随机生成大数据存储到指定excel文档里

本次主要采用的是python3的第三方库xlwt，来创建一个excel文件。具体步骤如下：1、确认存储位置，文件命名跟随时间格式2、封装写入格式3、实现随机数列生成4、定位行和列把随机数写入5、统一写入条目数，实现入参确认条目6、封装对文件夹内多余数据表的删除操作。说明：最大支持60000条，这个是由于excel格式限制的，如果对大数据有更高要求的如，写入6000000数据的话可以进行循环获取到1
pujen_yuan·2020-09-16 21:15
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他