E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据架构
后Hadoop时代的
大数据架构
阅读全文摘要: 提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化,版本也从0.x进化到目前的2.6版本。我把2012年后定义成后Hadoop平台时代,这不是说不用Hadoop,而是像NoSQL(NotOnlySQL)那样,有其他的选型补充。提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化
l15234269605
·
2017-06-09 13:00
深度分享 | DT浪潮下,大数据在交通管理中的应用实践
作者|侯长林,海颐软件智能交管产品部经理、济南交警科学研究所
大数据架构
师来源|2017永洪科技济南大数据峰会非常荣幸有机会给大家分享一下我们在智慧城市、智慧交通方面的大数据应用案例。
道听涂涂说
·
2017-05-25 12:09
大数据架构
和模式(五)对大数据问题应用解决方案模式并选择实现它的产品
作者:Divakar等来源:DeveloperWorks原文链接摘要:本文使用了一个基于场景的方法,概述了可能有助于定义大数据解决方案的解决方案模式。每个场景都从一个业务问题开始,并说明为什么需要大数据解决方案。本文会将一个具体的解决方案模式(由原子模式和复合模式组成)应用到业务场景。这个逐步分析的方法有助于用户确定解决方案所需的组件。在文章的末尾,提供了一些建议使用的典型产品和工具。简介本系列的
Arlight
·
2017-05-23 20:36
大数据/云计算
大数据架构
和模式(四)了解用于大数据解决方案的原子模式和复合模式
作者:Divakar等来源:DeveloperWorks原文链接摘要:本文中介绍的模式有助于定义大数据解决方案的参数。本文将介绍最常见的和经常发生的大数据问题以及它们的解决方案。原子模式描述了使用、处理、访问和存储大数据的典型方法。复合模式由原子模式组成,并根据大数据解决方案的范围进行分类。由于每个复合模式都有若干个维度,所以每个模式都有许多变化。复合模式使得业务和技术用户可以应用一个结构化方法为
Arlight
·
2017-05-23 20:00
大数据/云计算
大数据架构
和模式(三)理解大数据解决方案的架构层
概述这个“
大数据架构
和模式”系列的第2部分介绍了一种评估大数据解决方案可
Arlight
·
2017-05-23 20:23
大数据/云计算
大数据架构
和模式(一)大数据分类和架构简介
相关文章:
大数据架构
和模式(一)——大数据分类和架构简介
大数据架构
和模
Arlight
·
2017-05-23 20:01
大数据/云计算
大数据架构
技术
阅读更多下图是近来学习和用到的大数据方面的技术,现在做一个总结。并且在总结的过程中,也进行更加进一步的学习和了解。以上为个人所接触到的大数据相关的一些技术,后续的章节将围绕这些技术展开,具体的介绍方式是从应用和原理两个方面进行。1、大数据实时流架构(1)消息队列消息队列是在不同的应用间做数据传递的,现在常用的主要包括Kafka,redis队列,RabbitMQ,ZeroMQ,ActiveMQ等。(
商人shang
·
2017-05-19 11:00
大数据架构
Hadoop
spark
Java
redis
大数据架构
入门总结(Flume + Kafka + ZooKeeper + Spark Streaming + Drools + ELK)
这两天学习了Flume+Kafka+ZooKeeper+SparkStreaming+Drools+ELK进行
大数据架构
,有很多的体会和总结。
神经质的盛宴
·
2017-04-25 19:34
平安技术开放日质量保证技术专场第一期 [附部分 ppt]
4月8号在上海平安大厦,平安证券和Tester联合举办了一场质量保证技术专场,附上部分PPT平安技术开放日介绍ppt下载A/B测试的
大数据架构
实践链接:http://pan.baidu.com/s/1gfuZXJH
oscarxie
·
2017-04-20 14:00
无状态
大数据架构
下的AWS与Azure使用对比
ApacheKylin是中国顶尖的一个大数据项目,最近我有幸参与到ApacheKylin的架构设计中,由此来谈论一下我对ApacheKylin的架构设计的想法。简单介绍下ApacheKylin,他是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维在线分析(OLAP)能力,支持超大规模数据上的亚秒级交互式分析。Kylin的概念就是要建立一个cube,利用回returntime的空
丘秉宜keith
·
2017-04-07 17:22
大数据人才的类型
(1)偏重基建与架构的“
大数据架构
”方向。(2)偏重建模与分析的“大数据分析”方向。(3)偏重应用实现的“大数据开发”方向。
车库听风
·
2017-03-19 16:16
基于 Hive / ES 金融大数据指标系统
hadoop/hive/storm/spark等开源组件,自主开发核心调度系统&SQLStorm,每天处理万亿数据;2015年加入平安证券,负责金融互联网大数据团队,使平安证券由传统的数据架构向互联网
大数据架构
转型
javastart
·
2017-02-21 13:23
大数据
大数据下基于Tensorflow框架的深度学习示例教程
本文就以大数据作为场景,通过自底向上的教程详述在
大数据架构
体系中如何应用深度学习这一技术。
大数据架构
中采用的是hadoop系统以及Kerb
csdn郭芮
·
2017-02-08 13:49
灰度发布_和 abtest (属于
大数据架构
部) 可衍生至 一键降级
流量选取适用于灰度发布,对选中的流量再次分组适用于AB测试及其他需要的场景。处理方式:通常有物理隔离和逻辑隔离两种,物理隔离是将不同版本部署在不同集群,这样可以减少对代码的侵入,但是不够灵活,也难以支持大量的灰发或者实验并发;逻辑隔离就是在代码里通过ifelse的方式对功能进行隔离,这种方式更为灵活,Apollo推荐的也是这种处理方式。这种灰度设计好挫.最好的灰度设计是通过dns解析或者流量路由到
个人渣记录仅为自己搜索用
·
2017-02-07 12:42
架构
微服务
经验人生
11-25CSDN独家直播:《
大数据架构
师之实战电商项目》大咖&干货!11-23限时获取:CSDN“剁手”
对吃没兴趣
·
2016-12-09 15:51
我眼中的架构师:一个优秀的架构师应该具备什么?
随便多翻几个招聘网站,你可以看到:前端架构师、后端架构师、Android架构师、iOS架构师、php架构师、运维架构师、DB架构师、搜索架构师、中间件架构师、
大数据架构
师。。。五花八门,不一而足。
travi
·
2016-12-04 20:34
分布式架构-思想与理论
喜大普奔,《
大数据架构
详解》一书 登陆 当当,京东热卖榜
讲点高兴的事情,我的新书《
大数据架构
详解》登陆当当,京东热卖榜。1、先看当当:计算机类,新书热卖榜第七名!2、京东大数据和云计算类热卖榜第14位(不止新书,统计所有的,刚上架一个月,这个还行。
jiezhu2007
·
2016-12-04 18:00
喜大普奔,《
大数据架构
详解》一书 登陆 当当,京东热卖榜
讲点高兴的事情,我的新书《
大数据架构
详解》登陆当当,京东热卖榜。1、先看当当:计算机类,新书热卖榜第七名!2、京东大数据和云计算类热卖榜第14位(不止新书,统计所有的,刚上架一个月,这个还行。
jiezhu2007
·
2016-12-04 18:00
喜大普奔,《
大数据架构
详解》一书 登陆 当当,京东热卖榜
讲点高兴的事情,我的新书《
大数据架构
详解》登陆当当,京东热卖榜。1、先看当当:计算机类,新书热卖榜第七名!2、京东大数据和云计算类热卖榜第14位(不止新书,统计所有的,刚上架一个月,这个还行。
jiezhu2007
·
2016-12-04 18:00
manager
大数据架构
越来越火的大数据时代,人工智能开创的时代,如何管理大数据集群成为一个非常重要的问题,现今通用的大数据平台大致的架构我简单说一下,希望对大家有帮助。大数据集群架构大概分为3层1、管理层(也就是所谓的manager界面),这一层主要是对集群服务的管理(比如说hdfs、yarn、hive、spark、hbase、solr、hue、oozie、zookeeper等),在这一层,可以对服务进行配置,节点管理
chj_xc
·
2016-12-01 14:51
大数据部署方案
博客导读
一、胡扯乱聊一万小时定律写给自己的2014年中回顾2015年完成的第一本英文原著书写给自己定2015第二次机器革命《
大数据架构
详解》答疑(一)为什么写《
大数据架构
详解》这本书书籍推荐:《
大数据架构
详解》
jiezhu2007
·
2016-11-12 10:00
博客导读
一、胡扯乱聊一万小时定律写给自己的2014年中回顾2015年完成的第一本英文原著书写给自己定2015第二次机器革命《
大数据架构
详解》答疑(一)为什么写《
大数据架构
详解》这本书书籍推荐:《
大数据架构
详解》
jiezhu2007
·
2016-11-12 10:00
博客导读
一、胡扯乱聊一万小时定律写给自己的2014年中回顾2015年完成的第一本英文原著书写给自己定2015第二次机器革命《
大数据架构
详解》答疑(一)为什么写《
大数据架构
详解》这本书书籍推荐:《
大数据架构
详解》
jiezhu2007
·
2016-11-12 10:00
Spark系列修炼---入门笔记1
今天是2016年11月10日,终于开始学习Spark了,为将来能成为一个
大数据架构
师而不断努力!
a2011480169
·
2016-11-10 20:00
spark
入门笔记1
机器学习和数据挖掘的联系与区别
本文选自《
大数据架构
详解:从数据获取到深度学习》机器学习(MachineLearning,ML)是一门多领域交叉学科,涉及概率论、
博文视点
·
2016-11-09 10:37
大数据分类和架构简介
这个“
大数据架构
和模式”系列提供了一种结构化和基于模式的方法来简化定义完整的
大数据架构
的任务。因为评估一个业务场景
T-Mac-1999
·
2016-11-08 16:19
46周工作日志,2016-11-7
2016-11-7//工作生成公钥,开通服务器,ssh-keygen-trsa
大数据架构
图讲解,(海外/国内服务器的节点)--交互查询:广告推荐用Hbase存储,返回广告列表或单个广告--批处理3/5/
葡萄喃喃呓语
·
2016-11-07 16:27
为什么写《
大数据架构
详解》这本书
花了差不多一年半时间,牺牲了每个周末,费了九牛二虎之力,终于完成个人人生的第一本书《
大数据架构
详解:从数据获取到深度学习》。整个过程其实挺痛苦的,时常想放弃,幸好坚持下来了。
jiezhu2007
·
2016-10-24 09:06
为什么写《
大数据架构
详解》这本书
阅读更多花了差不多一年半时间,牺牲了每个周末,费了九牛二虎之力,终于完成个人人生的第一本书《
大数据架构
详解:从数据获取到深度学习》。整个过程其实挺痛苦的,时常想放弃,幸好坚持下来了。
jiezhu2007
·
2016-10-22 12:00
为什么写《
大数据架构
详解》这本书
阅读更多花了差不多一年半时间,牺牲了每个周末,费了九牛二虎之力,终于完成个人人生的第一本书《
大数据架构
详解:从数据获取到深度学习》。整个过程其实挺痛苦的,时常想放弃,幸好坚持下来了。
jiezhu2007
·
2016-10-22 12:00
为什么写《
大数据架构
详解》这本书
阅读更多花了差不多一年半时间,牺牲了每个周末,费了九牛二虎之力,终于完成个人人生的第一本书《
大数据架构
详解:从数据获取到深度学习》。整个过程其实挺痛苦的,时常想放弃,幸好坚持下来了。
jiezhu2007
·
2016-10-22 12:00
大数据架构
师之路-大数据框架大全
大数据架构
师之路-大数据框架大全服务器脚本系列:�1.shell2.python3.perl4.ruby数据仓库系列:�1.hive2.sparksql3.ClouderaImpala4.kylin介绍
葡萄喃喃呓语
·
2016-09-25 19:11
20160920 Daily Review
主题:
大数据架构
7:00~8:00补觉听podcast今天听「吴晓波频道·星巴克和阿迪達斯都老了」,全文主旨說的是互聯網界的IP現象。
黄桃de夏天
·
2016-09-20 22:35
深度剖析 | 基于
大数据架构
的BI应用
阅读更多说起互联网、电商的数据分析,更多的是谈应用案例,如何去实践数据化管理运营。而这里,我们要从技术角度分享关于数据的技术架构干货,如何应用BI。原文是云猴网BI总经理王卫东在帆软大数据上的演讲,以下是整理的文字稿。在电商领域,我们一般认为所有的数据都可以分为四大类型,流量、销量、商品和会员,这也是最基础的报表需求。流量部分,可以分为受访、点击、搜索、来源等等。这些流量信息运用的重点在于一些广告
老A不折腾
·
2016-09-08 10:00
大数据
数据库
电子商务
BI
深度剖析 | 基于
大数据架构
的BI应用
阅读更多说起互联网、电商的数据分析,更多的是谈应用案例,如何去实践数据化管理运营。而这里,我们要从技术角度分享关于数据的技术架构干货,如何应用BI。原文是云猴网BI总经理王卫东在帆软大数据上的演讲,以下是整理的文字稿。在电商领域,我们一般认为所有的数据都可以分为四大类型,流量、销量、商品和会员,这也是最基础的报表需求。流量部分,可以分为受访、点击、搜索、来源等等。这些流量信息运用的重点在于一些广告
老A不折腾
·
2016-09-08 10:00
大数据
数据库
电子商务
BI
深度剖析 | 基于
大数据架构
的BI应用
说起互联网、电商的数据分析,更多的是谈应用案例,如何去实践数据化管理运营。而这里,我们要从技术角度分享关于数据的技术架构干货,如何应用BI。 原文是云猴网BI总经理王卫东在帆软大数据上的演讲,以下是整理的文字稿。 在电商领域,我们一般认为所有的数据都可以分为四大类型,流量、销量、商品和会员,这也是最基础的报表需求。 流量部分,可以分为受访、点击、搜索、来源等等。这些流量信息运用的重点在于一些广告包
老A不折腾
·
2016-09-08 10:00
数据库
大数据
电子商务
BI
大数据架构
师NoSQL建模技术
大数据架构
师NoSQL建模技术从数据建模的角度对NoSQL家族系统做了比较简单的比较,并简要介绍几种常见建模技术。
lhl624115700
·
2016-07-19 09:00
易观CTO郭炜:从0到N,建立高性价比大数据平台-CSDN公开课-专题视频课程
今天分享的内容是根据企业发展的不同阶段,根据业务的需求,如何选择不同的
大数据架构
,配置不同的数据处理人员,从而帮助企业从0到N建立高性价比大数据平台。
CSDN学院官方账号
·
2016-07-13 11:07
视频教程
大数据系统的Lambda架构
uiyYFfNathanMarz的大作BigData:Principlesandbestpracticesofscalablereal-timedatasystems介绍了LabmdaArchitecture的概念,用于在
大数据架构
中
Baple
·
2016-07-06 14:37
大数据
让大数据学会赚钱——《
大数据架构
商业之路:从业务需求到技术方案》
《
大数据架构
商业之路:从业务需求到技术方案》就是一本介绍大数据技术和商业相结合的书,全方位覆盖了
大数据架构
商业化的每一步。
东风玖哥
·
2016-06-24 23:39
大数据
让大数据学会赚钱——《
大数据架构
商业之路:从业务需求到技术方案》
《
大数据架构
商业之路:从业务需求到技术方案》就是一本介绍大数据技术和商业相结合的书,全方位覆盖了
大数据架构
商业化的每一步。
dongfeng9ge
·
2016-06-24 23:00
大数据
大数据分析技术在房产领域的实践
目前任链家网
大数据架构
师,负责链家网大数据体系的建设,运用大数据挖掘技术助力房产
蔡白银
·
2016-06-16 00:00
大数据基础架构方案
大数据架构
方案,主要包括整个大数据的软件栈,主要功能包括:数据抽取,数据存储,数据分析,数据挖掘下面是整个架构设计图:数据抽取关系型数据库,通过sqoop导入日志文件通过flume导入数据存储采用hdfs
dreaper126
·
2016-06-07 00:48
spark
大数据
[译] 解密 Uber 数据团队的基础数据架构优化之路
但是,在这简单的流程背后其实是用Hadoop和Spark这样复杂的基础
大数据架构
来支撑的。Uber在现实世界和虚拟世界的十字路口有令人羡慕的一席之地。这令每天在各个城市穿行的数十万司机大军趋之若鹜。
HarryZhu
·
2016-05-22 00:00
uber
data-science
hadoop
spark
大数据架构
开发 挖掘分析 Hadoop HBase Hive Storm Spark ZooKeeper Redis MongoDB 机器学习 云计算
培训
大数据架构
开发、挖掘分析!从零基础到高级,一对一培训!
kaozztt
·
2016-05-20 20:23
hadoop
大数据
视频教程
初创公司大数据平台架构演进之路
本次分享将会以AppAnnie
大数据架构
平台的不断演进作为实例,以实
王佳
·
2016-05-17 00:00
明略技术合伙人任鑫琦:关系挖掘激发深层数据价值
个人简介任鑫琦,明略数据技术合伙人及SCOPA产品经理,同时也是
大数据架构
、分布式计算、数据交互可视化领域的专家,主要从事大数据系统高效落地、优化架构以及便捷应用方面的工作。
InfoQ
·
2016-04-01 00:00
0基础到
大数据架构
师(Hadoop+Spark)学习路线图
大数据时代掌握大数据概念和核心应用场景,彻底认识到大数据的重要性,以及能够有效把握未来大数据的发展方向。能够掌握hadoop的技术架构和底层原理,对分布式架构能够做到更深入的认识和体会,尤其是yarn框架的底层事件分发机制、轮询机制、多线程以及nio的组合应用。还有更重要的基于google的IPC通信技术。能够独立搭建hadoop集群、配置以及管理。能够灵活应用hadoop生态系统的各种技术进行数
让往事随风
·
2016-03-29 16:00
Airbnb的大数据平台架构
Part1:
大数据架构
背后的哲理Airbnb公司提倡数据信息化,凡事以数据说话。收集指标,通过实验验证假设、构建机器学习模型和挖掘商业机会使
侠天
·
2016-03-25 00:00
大数据架构
和模式
http://www.ibm.com/developerworks/cn/data/library/bd-archpatterns1/index.html第1部分:大数据分类和架构简介概述大数据可通过许多方式来存储、获取、处理和分析。每个大数据来源都有不同的特征,包括数据的频率、量、速度、类型和真实性。处理并存储大数据时,会涉及到更多维度,比如治理、安全性和策略。选择一种架构并构建合适的大数据解决
bluejoe2000
·
2016-03-14 12:00
上一页
14
15
16
17
18
19
20
21
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他