大数据架构

Pipeline大数据架构

1.Pipeline大数据架构（createby王小雷）Pipeline大数据架构，面向大数据仓库和大数据处理平台。
王小雷-多面手·2019-04-03 13:28

flink在k8s上的部署和使用教程

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2019-04-02 19:21

Impala 在 Hulu 中的优化和改进

点击hadoop123关注我哟知名的大数据中台技术分享基地，涉及大数据架构(hadoop/spark/flink等)，数据平台(数据交换、数据服务、数据治理等)和数据产品(BI、AB测试平台)等，也会分享最新技术进展
·2019-03-31 00:00

企业级大数据技术体系概述

文章目录常见使用场景企业级大数据技术框架数据收集层特点数据存储层特点资源管理与服务协调层优点计算引擎层分类Hadoop与Spark开源大数据技术栈大数据架构LA架构推荐系统常见使用场景互联网领域搜索引擎
leo的心·2019-03-27 09:10

aiohttp进阶教程

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2019-03-24 17:35

如何成为大数据架构师？

要想成为架构师这几点你必须关注！架构不是一个职业而是一种能力,每一种架构师只不过是在不同的领域里面使用不同的技术,没有什么可对比,就好比如你问一个篮球明星和一个足球明星有什么区别一样！01架构师需要考虑四个问题1.确定系统干什么不干什么,也就是说系统的边界在哪里？2.确定架构内部的模块与模块之间的关系,以及模块与外部之间的关系是什么？3.架构确定以后,有能力去指导开发去继续设计和演化,如果开发设计
小迪和夫人·2019-03-13 16:03

solrcloud 7.5在k8s上的部署安装和使用教程

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。7月1号-7月29号8折优惠！！！7月1号-7月29号8折优惠！！！
数据架构师·2019-03-10 17:14

大数据生态圈的理解

HDFS是整个大数据架构的底层，它提供了一个文件系统Spark(Sparkcore(RDD))和MapReduce是一个层级，是一种操作计算框架，MapReduce相当于一个别人写好的java程序，它并不需要在服务器上启动相应的服务
奥兰治的威廉·2019-03-04 20:53

Flink on yarn部署模式

Flink的这种架构，也更好的解决了传统大数据架构那种繁琐的组件堆积，让批流能够在不改变原有代码的基础上，进行批处理或者流处理。
it_zzy·2019-02-24 09:19

使用GlusterFS作为Kubernetes的后端存储

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2019-02-17 14:20

大数据架构师从入门到精通

本文转自https://blog.csdn.net/kobejayandy/article/details/80658845经常有初学者在博客和QQ问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么，对于计算机/软件，你的兴趣是什么？是计算机专业，对操作系统、硬
ZS_520·2019-02-15 16:44

Google Professional Data Engineer(PDE)考试

收获1）对云有新的认识2）对大数据架构、机器学习架构设计有新的认识3）当然最重要的是获得google官方发的证书说说我的准备1）花了5周的时
jacksu在简书·2019-02-10 08:26

Google Professional Data Engineer(PDE)考试

收获1）对云有新的认识2）对大数据架构、机器学习架构设计有新的认识3）当然最重要的是获得google官方发的证书说说我的准备1）花了5周的时
jacksu在简书·2019-02-10 08:26

Python爬虫的作用与地位（附爬虫技术路线图）

在大数据架构中，数据收集与数据存储占据
人生苦短丨我爱python·2019-01-29 13:34

Python爬虫的作用与地位（附爬虫技术路线图）

在大数据架构中，数据收集与数据存储占据
人生苦短丨我爱python·2019-01-29 13:34

Lambda架构&Kappa架构

在大数据3.0时代，Lambda大数据架构已经无法满足企业用户日常大数据分析和敬意运营的需要，去ETL化的IOTA大数据架构才是未来。
信念随梦·2019-01-27 16:07

零基础学习大数据的路线和方向

大数据三大学习方向：大数据开发师、大数据架构师、大数据运维师互联网科技发展蓬勃兴起，人工智能时代来临，抓住下一个
铁拳虎·2019-01-25 16:27

阿里大数据架构师必备技能，你“佩奇”了嘛？

这两天真的是被《啥是佩奇》这支广告片刷屏了。佩奇明明是个喜剧角色，却把所有人都给看哭了！中间的剧情，小孙子一句：“想要佩奇”，结果爷爷就开始了满村子的寻找佩奇，到最后寻找到了小编认为是最好看的佩奇不知道大家看了之后是什么感觉，反正我看了之后的感觉是非常感动了。不过经过几天的发酵，“佩奇”这两个字似乎有了更多的含义了！各种”佩奇“齐出不穷，女人的“佩奇”是什么样的？程序员的“佩奇”是什么样的？今天在
假的鱼·2019-01-22 17:50

原百度大数据架构师首次分享：15年技术生涯经验分享

先说说我自己吧！研究生学的是数据统计，之后跟数据的恩爱情仇就开始了！毕业之后由于在大学的时候学的还算比较扎实，经过一段时间的准备，去面试了百度的大数据工程师，很幸运的被录用上了，之后的职业生涯都是在百度度过的，现在有了一些资本，打算跟朋友出来一起单干了。好了，介绍已经完了，那么接下来咱们聊一聊大数据这个行业。行业现状大数据时代的到来，简单的说是海量数据同完美计算能力结合的结果。确切的说是移动互联网
假的鱼·2019-01-20 10:26

大数据架构师从入门到精通，你get到了吗？

经常有初学者在博客和QQ问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么，对于计算机/软件，你的兴趣是什么？是计算机专业，对操作系统、硬件、网络、服务器感兴趣？是软件专业，对软件开发、编程、写代码感兴趣？还是数学、统计学专业，对数据和数字特别感兴趣。其实这就是
小迪和夫人·2019-01-18 00:07

Lambda 架构详解-2

1.架构简介Lambda架构是大数据架构的一种，其作用无非是存储-处理-展示数据。关于其介绍，网上多篇博客已珠玉在前，这里不再赘述。
似梦似意境·2019-01-17 18:09

大数据架构选择

1.简介大数据是收集、整理、处理大容量数据集，并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限，但这种计算类型的普遍性、规模，以及价值在最近几年才经历了大规模扩展。处理框架负责对系统中的数据进行计算，例如处理从非易失存储中读取的数据，或处理刚刚摄入到系统中的数据。数据的计算则是指从大量单一数据点中提取信息和见解的过程。那么框架有很多，该如何选
似梦似意境·2019-01-17 17:10

k8s中实现自动数据库初始化(mysql,postgresql)

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2019-01-17 11:55

阿里大数据架构师分享：Spark源码解析

首先看一段使用scala编写的spark代码：packagespark0719importorg.apache.spark.SparkConfimportorg.apache.spark.SparkContextobjectTtspark{valconf=newSparkConf().setAppName("sp").setMaster("local")defmain(args:Array[Str
假的鱼·2019-01-15 17:27

nginx在k8s上的安装部署和使用教程

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。腾讯课堂：点击进入网易课堂：点击进入7月1号-7月29号8折优惠！！！
数据架构师·2019-01-12 15:30

大数据架构和模式，第 5 部分

对大数据问题应用解决方案模式并选择实现它的产品简介本系列的第3部分描述了针对最常见的、经常发生的大数据问题及其解决方案的原子模式和复合模式。本文将推荐可以用于架构大数据解决方案的三个解决方案模式。每个解决方案模式都使用了一个复合模式，该模式由逻辑组件构成（参见第3部分的介绍）。在本文末尾处，列出了产品和工具清单，它们可映射到每一个解决方案模式的组件。解决方案模式以下各节将介绍可以用于架构大数据解决
一次次失望后的平静·2019-01-11 17:18

大数据架构和模式，第 4 部分

了解用于大数据解决方案的原子模式和复合模式DivakarMysore,ShrikantKhupat,和ShwetaJain2014年9月25日发布WeiboGoogle+用电子邮件发送本页面0系列内容：此内容是该系列5部分中的第4部分：大数据架构和模式简介本系列的第
一次次失望后的平静·2019-01-11 17:00

大数据架构和模式，第3 部分

理解大数据解决方案的架构层概述这个“大数据架构和模式”系列的第2部分介绍了一种评估大数据解决方案可行性的基于维度的方法。
一次次失望后的平静·2019-01-11 17:15

大数据架构和模式，第 2 部分

如何知道一个大数据解决方案是否适合您的组织简介在确定投资大数据解决方案之前，评估可用于分析的数据；通过分析这些数据而获得的洞察；以及可用于定义、设计、创建和部署大数据平台的资源。询问正确的问题是一个不错的起点。使用本文中的问题将指导您完成调查。答案将揭示该数据和您尝试解决的问题的更多特征。尽管组织一般情况对需要分析的数据类型有一些模糊的理解，但具体的细节很可能并不清晰。毕竟，数据可能具有之前未发现
一次次失望后的平静·2019-01-11 17:05

kubernetes 简介：调度器和调度算法((Affinity/Anti-Affinity, Taints and Tolerations, 自定义调度器 )

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2019-01-05 20:27

2018年车联网大数据架构演进分析

物联网终端通过无线/有线网络发送到平台，经过一系列的处理后存入到各种存储引擎中，业务可以通过数据交换接口来访问处理后的数据。具体流程如下：车载设备或者传感器设备通过网络经过LVS/F5负载均衡将数据发送至网关；网关接收到数据后进行公共协议解析，然后把解析后的数据发给Kafka，存放在原始数据Topic；实时计算任务从原始数据Topic中读取数据经过数据清洗后发送至原始数据解析模块；原始数据解析模块
SmartBrain·2019-01-05 12:25

k8s的job和CronJob

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。腾讯课堂：点击进入网易课堂：点击进入7月1号-7月29号8折优惠！！！
数据架构师·2019-01-02 14:18

只有程序员才会有的经历，最后一件事是个人都顶不住

我自己是一名大数据架构师，目前辞职在做线上教育大数据讲师，每天都会直播分享免费公开课，大家可以加群参加。以及我自己整理了一套最新的大数据学习系统教程，包括Hadoop，数据挖掘，数据分析。
taya_a·2018-12-31 20:48

程序员多年以来最让人困惑的问题：为什么不用switch而是大量的if和else？

我自己是一名大数据架构师，目前辞职在做线上教育大数据讲师，每天都会直播分享免费公开课，大家可以加群参加。以及我自己整理了一套最新的大数据学习系统教程，包括Hadoop，数据挖掘，数据分析。
taya_a·2018-12-30 20:42

学习编程后最容易遇到的六大谎言，每一条都躺枪

我自己是一名大数据架构师，目前辞职在做线上教育大数据讲师，每天都会直播分享免费公开课，大家可以加群参加。以及我自己整理了一套最新的大数据学习系统教程，包括Hadoop，数据挖掘，数据分析。
taya_a·2018-12-28 23:01

阿里大数据架构师教你ZooKeeper安装配置！看了的都转发和关注了！

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。ZooKeeper包含一个简单的原语集，
首席数据师·2018-12-14 20:14

年薪60万大数据架构师教你Hadoop如何安装！还不快来看！

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（highthroughput）来
首席数据师·2018-12-14 16:43

helm部署ceph在k8s上做分布式存储

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2018-12-12 19:54

kubernetes kubelet参数

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。腾讯课堂：点击进入网易课堂：点击进入7月1号-7月29号8折优惠！！！
数据架构师·2018-12-11 12:17

kubernetes--pod的生命周期管理（PostStart，PreStop）

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。腾讯课堂：点击进入网易课堂：点击进入7月1号-7月29号8折优惠！！！
数据架构师·2018-12-09 12:14

pod配置Liveness和Readiness探针

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。7月1号-7月29号8折优惠！！！7月1号-7月29号8折优惠！！！
数据架构师·2018-12-08 23:11

k8s nodeSelector和affinity

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。腾讯课堂：点击进入网易课堂：点击进入7月1号-7月29号8折优惠！！！
数据架构师·2018-12-08 23:35

大数据分类和架构简介

这个“大数据架构和模式”系列提供了一种结构化和基于模式的方法来简化定义完整的大数据架构的任务。因为评估一个业务场景是否存在大数据问题很重要，所以
一次次失望后的平静·2018-11-29 16:53

大数据分类和架构简介

这个“大数据架构和模式”系列提供了一种结构化和基于模式的方法来简化定义完整的大数据架构的任务。因为评估一个业务场景是否存在大数据问题很重要，所以
一次次失望后的平静·2018-11-29 16:53

istio使用教程和示例（导流，请求路由，访问拒绝，黑白名单，限速）

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2018-11-28 19:04

istio简介和基础组件原理（服务网格Service Mesh）

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。7月1号-7月29号8折优惠！！！7月1号-7月29号8折优惠！！！
数据架构师·2018-11-27 13:46

Kubernetes监控:部署Heapster、InfluxDB和Grafana

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2018-11-27 09:37

grafana将自己的数据库（hbase）设置为数据源

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。7月1号-7月29号8折优惠！！！7月1号-7月29号8折优惠！！！
数据架构师·2018-11-26 10:26

k8s安装部署Istio

主讲内容：docker/kubernetes云原生技术，大数据架构，分布式微服务，自动化测试、运维。
数据架构师·2018-11-25 19:29

Java、C、C+ +、PHP、Python分别用来开发什么？一篇文章告诉你！

我自己是一名大数据架构师，目前辞职在做线上教育大数据讲师，每天都会直播分享免费公开课，大家可以加群参加。以及我自己整理了一套最新的大数据学习系统教程，包括Hadoop，数据挖掘，数据分析。
taya_a·2018-11-24 13:15
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他