E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据存储
处理高并发、
大数据存储
的网站技术架构
本文转载自:https://zhuanlan.zhihu.com/p/24669514大型网站技术架构剖析高并发,大流量40亿。PV。pageview。3.5亿,IP。高可用,高可用MySQL。7*24小时不间断运行。海量数据用户分布广泛,网络情况复杂安全环境恶劣需求快速变更,发布频繁渐进式发展网站架构演化发展历程初始阶段的网站(特点:没人)应用程序、数据库、文件都在一个服务器上应用服务和数据服务
ClareQi
·
2017-10-18 19:51
java
处理高并发、
大数据存储
的网站技术架构
本文转载自:https://zhuanlan.zhihu.com/p/24669514大型网站技术架构剖析高并发,大流量40亿。PV。pageview。3.5亿,IP。高可用,高可用MySQL。7*24小时不间断运行。海量数据用户分布广泛,网络情况复杂安全环境恶劣需求快速变更,发布频繁渐进式发展网站架构演化发展历程初始阶段的网站(特点:没人)应用程序、数据库、文件都在一个服务器上应用服务和数据服务
ClareQi
·
2017-10-18 19:51
java
《分布式计算、云计算与大数据》笔记
chapter11大数据技术与实践大数据4V特征数据量大-Volume,变化速度快-Velocity,多类型-Variety,高价值-Value
大数据存储
平台1、HDFS(HadoopDistributedFileSystem
蝉鸣时节
·
2017-10-09 10:37
大数据和固态硬盘在公共云存储市场上的发展
新的数据库,
大数据存储
工具,以及存储更快的固态硬盘(SSD)不断涌现,
DemonHunter211
·
2017-09-30 10:14
深度学习
redis系列(一)- 安装与启动
1、什么是NoSqlNoSql,全名:NotOnlySql,是一种非关系型数据库,它不能替代关系弄数据库,只是关系型数据库的一个补充,是可以解决高并发、高可用、高扩展、
大数据存储
等一系列问题而产生的数据库解
GitLqr
·
2017-09-27 00:26
JavaEE
redis系列(一)- 安装与启动
1、什么是NoSqlNoSql,全名:NotOnlySql,是一种非关系型数据库,它不能替代关系弄数据库,只是关系型数据库的一个补充,是可以解决高并发、高可用、高扩展、
大数据存储
等一系列问题而产生的数据库解
GitLqr
·
2017-09-27 00:47
CNUTCon福利大放送&精彩回顾
【大数据运维】百度运维
大数据存储
平台设计与实践4.【智能化运维】基于日志trace的智能故障定位系统5.【运维自动化】百度大规模时序数据自动异常检测实战9月10-11日,5位
AIOps智能运维
·
2017-09-15 00:00
为何大数据在当今世界如此重要?
武汉飔拓,就是一家专注于大数据与人工智能的公司,该公司的SDP
大数据存储
平台业界有名,堪比Hortonworks的HDP,其自主研发的分布式机器学习平台
武汉飔拓科技
·
2017-09-13 11:31
关于企业文化的建设和深度转型(深度抉择)
企业的最终极形态,一种是成为
大数据存储
在云端的服务器之中,还有自己的独立程序和特色代码,不断的运行着;另外一种出存储在人们的大脑CPU之中,被称为意识形态和“记忆”的东西,和这个人是谁紧密的相连,或成为最重要区别自己与别人的一部分
北京世豪信诚环境科技大学
·
2017-08-26 22:39
Hbase 详解(上)
Apache HBase™istheHadoop database,adistributed,scalable,bigdatastore.ApacheHbase是hadoop数据库,一个分布式的,可扩展的
大数据存储
A_Eternal
·
2017-08-21 15:12
Hbase
阿里5位嘉宾3个分享:HBaseCon Asia 2017干货满满
HBaseCon是ApacheHBase官方举办的技术会议,主要目的是分享,交流HBase这个开源分布式
大数据存储
的使用和开发以及发展。HBaseCon发起于2012年。
雪夜凋零
·
2017-08-10 09:37
2017
HBaseCon
Asia
现场报道
基于HBase的
大数据存储
的应用场景分析
因此HBase被广泛使用在
大数据存储
的解决方案中。为何使用HBase HBase的优点:列可以动态增加,并且列为空就不存储数据,节省存储空间。
benxiaohai529
·
2017-08-04 00:00
大数据
第二次分享内容--数据分片与数据路由
而目前主流的
大数据存储
与计算系统通常采用横向拓展的方式支持系统可拓展性,即通
熊熊要更努力
·
2017-08-03 03:51
创业公司如何做好监控报警
以前公司里有完善的框架体系,涵盖了分布式log、监控、实时报警、
大数据存储
等等方面,并且有成熟的团队来运营,使用者大部分时间只要做好集成就行;换到了小公司,以我们bigsec岂安科技为例,初始的技术团队只有
岂安科技
·
2017-05-25 00:00
saas
metrics
grafana
报警
监控
快速玩转大数据_顺利渡过34岁裁退危机
阿里云有一款大数据产品,云HBase,其是基于Hadoop的一个分布式数据库,支持海量的PB级的
大数据存储
,适用于高吞吐的随机
bystarlight
·
2017-05-19 14:49
centos7基础文档一
而是对未来爆炸式的增长的数据量,ext的文件系统已经不能满足存储了,而XFS的文件系统完全是为大数据而生的,单个文件系统最大可以支持到8EB大小,单个文件的大小为16T,并且提供了丰富的日志系统,是应对
大数据存储
的强大文件
挚爱linux
·
2017-05-11 19:57
网络管理
接口
管理系统
Hadoop大数据平台入门——HDFS和MapReduce
所以今天来学习一下
大数据存储
和处理。随着数据的不断变大,数据的处理就出现了瓶颈:存储容量,读写速率,计算效率等等。
a60782885
·
2017-05-06 21:57
Hadoop
大数据
大数据处理之荷兰三剑客
阅读更多大数据现在是业内炙手可热的话题,随着技术的发展,
大数据存储
技术已经不再是难点,但是对大数据如何做好存储后的下一步处理将是未来竞争的焦点,目前比较受欢迎的Storm,Spark,Hadoop三个大数据处理工具都是
sharong
·
2017-04-25 20:00
hadoop
mapreduce
storm
spark
yarn
大数据处理之荷兰三剑客
阅读更多大数据现在是业内炙手可热的话题,随着技术的发展,
大数据存储
技术已经不再是难点,但是对大数据如何做好存储后的下一步处理将是未来竞争的焦点,目前比较受欢迎的Storm,Spark,Hadoop三个大数据处理工具都是
sharong
·
2017-04-25 20:00
hadoop
mapreduce
storm
spark
yarn
“==”和equals方法究竟有什么区别?
short:16位,最
大数据存储
量是65536,数据范围是-32768~32767之间。int:32位,最
大数据存储
容量是2的32次方减1,数据范围是负的2
自然鸟神
·
2017-04-21 15:26
JAVA进阶--基础查缺补漏
redis安装、集群搭建等
1Redis介绍1.1什么是NoSql为了解决高并发、高可扩展、高可用、
大数据存储
问题而产生的数据库解决方案,就是NoSql数据库。
克鲁德李
·
2017-04-12 15:13
hbase基础小结
阅读更多hbase简介HBase(HadoopDatabase)是一个高可靠性、高性能、面向列、可伸缩的分布式
大数据存储
系统。具有最理想化的写和极好的读性能。
welcomezhang
·
2017-04-10 22:00
hbase
nosql
hbase基础小结
阅读更多hbase简介HBase(HadoopDatabase)是一个高可靠性、高性能、面向列、可伸缩的分布式
大数据存储
系统。具有最理想化的写和极好的读性能。
welcomezhang
·
2017-04-10 22:00
hbase
nosql
hbase基础小结
阅读更多hbase简介HBase(HadoopDatabase)是一个高可靠性、高性能、面向列、可伸缩的分布式
大数据存储
系统。具有最理想化的写和极好的读性能。
welcomezhang
·
2017-04-10 22:00
hbase
nosql
Redis 介绍
NoSql什么是NoSql为了解决高并发、高可用、高可扩展,
大数据存储
等一系列问题而产生的数据库解决方案,就是NoSql。NoSql,叫非关系型数据库,它的全名Notonlysql。
douunderstand
·
2017-04-07 10:47
Redis
Redis 介绍
NoSql什么是NoSql为了解决高并发、高可用、高可扩展,
大数据存储
等一系列问题而产生的数据库解决方案,就是NoSql。NoSql,叫非关系型数据库,它的全名Notonlysql。
douunderstand
·
2017-04-07 10:47
Redis
一个小改进,解决Redis数据在线加载大痛点
作者介绍顾伟涛,曾任职于百度、奇虎360,现为杭州铭师堂教育资深DBA,擅长数据库监控、备份、高可用架构设计和自动化运维,对Redis和MongoDB方面有深入研究,关注分布式存储、
大数据存储
、消息队列
99527
·
2017-03-30 02:00
redis
运维干货
HUAWEI认证资深存储工程师(HCNP-Storage)
虚拟化存储网关系统部署与管理4、统一存储与主机连接5、统一存储系统故障诊断6、统一存储系统性能与优化7、统一存储方案规划与设计8、OceanStor18000存储系统安装及维护二、构建大数据解决方案1、大数据概论3、
大数据存储
系统部署与管理
qq_37958723
·
2017-03-26 15:42
Android数据存储之SQLite数据库存储
文件存储和SharedPreferences存储只适应保存简单的数据和键值对,而SQLite数据库是专门应对
大数据存储
。
小红妹
·
2017-03-25 09:58
Android
数据持久化
(第3篇)HDFS是什么?HDFS适合做什么?我们应该怎样操作HDFS系统?
本章内容:1)HDFS文件系统的特点,以及不适用的场景2)HDFS文件系统重点知识点:体系架构和数据读写流程3)关于操作HDFS文件系统的一些基本用户命令1.HDFS特点:HDFS专为解决
大数据存储
问题而产生的
I加加
·
2017-03-06 17:38
hadoop
HDFS
大数据
redis--介绍及安装
redis介绍1、什么是NoSql为了解决高并发、高可扩展、高可用、
大数据存储
问题而产生的数据库解决方案,就是NoSql数据库。
csdn_hcx
·
2017-02-18 16:01
JavaEE
redis
深入浅出大数据–课本学习 two
大数据关键技术大数据技术包括大数据采集与预处理,
大数据存储
与管理,大数据分析与挖掘,大数据应用与展现。大数据采集与预处理这是大数据价值挖掘最重要的一环。
中关村一男子
·
2017-01-21 16:12
课本学习
大数据
分布式计算
大数据存储
Sqlserver 高并发和
大数据存储
方案
随着用户的日益递增,日活和峰值的暴涨,数据库处理性能面临着巨大的挑战。下面分享下对实际10万+峰值的平台的数据库优化方案。与大家一起讨论,互相学习提高!案例:游戏平台.1、解决高并发当客户端连接数达到峰值的时候,服务端对连接的维护与处理这里暂时不做讨论。当多个写请求到数据库的时候,这时候需要对多张表进行插入,尤其一些表达到每天千万+的存储,随着时间的积累,传统的同步写入数据的方式显然不可取,经过试
码码乎乎
·
2017-01-11 14:27
业务架构
会员经营等阶段收集数据三、
大数据存储
精准投放跟进提醒资源配置项目联动客户经营交易分析四、从不同维度进行处理360度画像典型客户人群预测实时监控
HackerVirus
·
2017-01-06 07:00
ofo 破解 android ios 版 (类似 wifi 万*能*钥*匙 )
阅读更多ofo破解androidios版(类似wifi万*能*钥*匙)使用七牛云做一个破解ofo的
大数据存储
平台举例说明http://oi5lgyv8t.bkt.clouddn.com/327994.json
knight_black_bob
·
2016-12-14 10:00
ofo
破解
android
ios
ofo 破解 android ios 版 (类似 wifi 万*能*钥*匙 )
阅读更多ofo破解androidios版(类似wifi万*能*钥*匙)使用七牛云做一个破解ofo的
大数据存储
平台举例说明http://oi5lgyv8t.bkt.clouddn.com/327994.json
knight_black_bob
·
2016-12-14 10:00
ofo
破解
android
ios
刚学Redis 记录下.
NoSql是一种用来解决高并发,高可用,高扩展性,
大数据存储
等一系列问题而产生的一种数据库解决方案。典型应用:内容缓存,主要用于处理大量数据的高访问负载。数据模型:一系列键值对。
LiZhiToDianFeng
·
2016-12-03 19:07
Redis介绍、安装、客户端
1.Redis介绍1.1什么是NoSql为了解决高并发、高可用、高可扩展,
大数据存储
等一系列问题而产生的数据库解决方案,就是NoSql。NoSql,叫非关系型数据库,它的全名Notonlysql。
key_zhaojd
·
2016-11-16 02:32
Redis
java web文件上传
什么是文件上传要将客户端(浏览器)
大数据存储
到服务器端,不将数据直接存储到数据库中,而是要将数据存储到服务器所在的磁盘上,这要使用文件上传为什么使用文件上传通过文件上传,可以将浏览器端的大数据直接保存到服务器端
持续进步者
·
2016-11-10 14:53
初识大数据
Hadoop就是近年来发展出的
大数据存储
和处理的分布式计
_xingzhe_
·
2016-10-12 21:20
Fast DFS系统简介
FastDFS是一个C语言实现的开源轻量级分布式文件系统,作者余庆(happyfish100),支持Linux、FreeBSD、AID等Unix系统,解决了
大数据存储
和读写负载均衡等问题,适合存储4KB
悬崖三千尺
·
2016-09-20 21:44
分布式文件系统
Alluxio(前Tachyon)北京Meetup
2016年8月7日上午09:30-中午12:30北京市海淀区学院路37号北京航空航天大学如心楼会议中心二层(北航体育馆对面)Alluxio(前Tachyon)是一个开源内存级虚拟
大数据存储
系统,其源自UCBerkeleyAMPLab
数盟
·
2016-08-05 00:00
易观CTO郭炜:从0到N,建立高性价比大数据平台-CSDN公开课-专题视频课程
易观CTO郭炜:从0到N,建立高性价比大数据平台—2722人已学习课程介绍每个大数据平台都不是凭空而起的,每个企业也不是从开始就上hadoop、Spark等开源
大数据存储
的。
CSDN学院官方账号
·
2016-07-13 11:07
视频教程
Java程序员修炼之路
专注于高并发架构设计和
大数据存储
方向的研究。
陈秋歌
·
2016-07-05 15:40
大数据的仓库Hive学习(一)
之前说到了NoSql的HBase数据库以及Hadoop中的HDFS存储系统,可是我们发现这跟我们平时常用的关系型数据库有很大区别,为了使用方便,产生了针对
大数据存储
的数据仓库Hive。
u010168160
·
2016-06-20 14:00
hadoop
hive
大数据
数据仓库
大数据日知录--数据分片与路由
概念目前主流的
大数据存储
与计算系统通常采用横向扩展(ScaleOut)的方式支持系统可扩展性,即通过增加机器数目来获得水平扩展能力。
czliuming
·
2016-05-23 16:57
BigData
开始学习Hadoop
对于我们新手入门学习hadoop
大数据存储
的朋友来说,首先了解一下云计算和云计算技术是有必要的。
kuchensheng
·
2016-05-16 12:19
hadoop
入门
学习
云计算
大数据存取的选择:行存储还是列存储?
目前
大数据存储
有两种方案可供选择:行存储和列存储。业界对两种存储方案有很多争持,集中焦点是:谁能够更有效地处理海量数据,且兼顾安全、可靠、完整性。
gongpulin
·
2016-05-13 09:00
大数据存储
之分表分库
随着访问量和数据量的增长,即使一台单机能服务高达几个TB的数据、提供几万QPS的服务能力,也不足以满足大型系统的需求,便要开始实现分表分库。常用分表分库方法:一、水平分库对主键进行hash或者取模(其实是一种特殊的hash),把数据分布到不同的DB服务器上,客户端通过路由或规则访问特定的数据库,将整个系统的数据和访问负载分散到多台服务器上,降低了单台机器的负载压力。缺点:第一, 数据和负载增加
zyt_1978
·
2016-05-06 10:00
磁盘阵列恢复方法以及注意事项
想要弄清楚磁盘阵列恢复,首先就得知道什么是磁盘阵列,磁盘阵列多用于存储服务器,数据服务器等企业级
大数据存储
领域,磁盘阵列是把多块独立的物理硬盘按不同方式组合起来形成一个逻辑硬盘,当磁盘瘫痪或硬件损坏后,
qq_33983359
·
2016-05-04 17:00
磁盘阵列数据恢复
上一页
13
14
15
16
17
18
19
20
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他