hadoop大数据集群技术

Hadoop大数据技术原理与应用-第一章初识Hadoop

1.1大数据概述1.1.1什么是大数据字面意思来看大数据就是巨量的数据。最早提出大数据概念的是麦肯锡公司，他是这样定义大数据的：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型以及价值密度低四大特征。研究机构Gartner是这样定义大数据的：“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流转优化
weixin_44275584·2021-03-04 11:04

交换机的三种连接方式：级联、堆叠和集群

交换机的级联技术一般用来实现多台交换机之间的互相连接；堆叠技术用来将多台交换机组成一个单元，从而提高更大的端口密度和更高的性能；集群技术用来将相互连接的多台交换机作为一个逻辑设备进行管理，从而降低网络管理成本
杭州飞畅·2021-03-03 09:57

RocketMQ的原理及应用，与RabbitMQ如何保证消费顺序的吗？以及它们是如何保证消息不丢失的吗？

一、简介RocketMQ是一款开源的分布式消息系统，基于高可用分布式集群技术，提供低延时的、高可靠的消息发布与订阅服务。
L_Sueno·2021-02-13 16:25

浅谈数据管理工具Cloudera Navigator

Hadoop大数据平台拥有存储与分析任何种类和规模数据的能力，并且将其开放给更多用户和分析工具。但是，这同时也带来数据管理上的挑战：大量的业务用户想自助访问可发掘数据；管理员需要知道数据是怎么被用来优
Bianca21·2021-01-29 15:41

大数据基础——Hadoop大数据平台搭建

文章目录前言Hadoop大数据平台搭建一．Hadoop原理和功能介绍二．Hadoop安装部署三．Hadoop常用操作总结前言分布式机器学习为什么需求大数据呢？
陈敬雷-充电了么-CEO兼CTO·2021-01-27 16:37

分布式离线计算—HiveSQL

原文作者：极客教程原文地址：Hive简介目录MapReduce实现SQL的原理Hive的架构Hive如何实现join操作总结Hive简介，Hive是Hadoop大数据仓库Hive。
测试狗一枚·2021-01-26 09:01

LVS负载均衡的DR模式，隧道模式，LVS+keepalived高可用，健康检测

是使用集群技术和Linux操作系统实现的一个高性能、高可用的服务器。
煜煜ya-·2021-01-22 13:27

Hadoop大数据——用户行为分析Hive数据分析

1.本地数据集上传到数据仓库Hive1.1命令sudomkdir-R/usr/local/bigdatacase/dataset//这里会提示你输入当前用户（本教程是hadoop用户名）的密码//下面给hadoop用户赋予针对bigdatacase目录的各种操作权限cd/usr/local/sudochown-Rhadoop:hadoop./bigdatacasecdbigdatacase//下面
金皮癞蛤蟆·2020-12-31 08:22

Hadoop大数据数数仓之“买菜做饭”

能不能用【买菜做饭】的流程将Hadoop大数据生态的技术体系串联起来？笔者笃信：不管是学习抽象的商业逻辑，还是硬核的计算机技术，都需要将知识转换成“工作流程”，这样所学才能落地，否则都是瞎忙。"
猫有九条命*·2020-12-11 17:58

Apache Kylin的实践与优化

ApacheKylin是一个基于Hadoop大数据平
美团技术团队·2020-12-04 18:27

云计算和python学哪个_大数据、云计算该如何学习？

大数据之Linux+大数据开发篇阶段一、大数据、云计算-Hadoop大数据开发技术课程一、大数据运维之Linux基础本部分是基础课程，帮大家进入大数据领域打好Linux基础，以便更好地学习Hadoop，
weixin_39968592·2020-11-25 01:42

Apache Kylin的实践与优化

ApacheKylin是一个基于Hadoop大数据平
美团技术团队·2020-11-20 16:52

高性能利器！华为云MRS ClickHouse重磅推出！

它独立于Hadoop大数据体系，其最核心的特点是极致压缩率和极速查询性
华为云开发者社区·2020-11-19 17:36

高性能利器！华为云MRS ClickHouse重磅推出！

它独立于Hadoop大数据体系，其最核心的特点是极致压缩率和极速查询性
华为云开发者社区·2020-11-19 17:36

Percona XtraDB Cluster 8.0 与 proxysql 史上最详尽用法指南

PXC的作用是通过mysql自带的Galera集群技术，将不同的mysql实例连接起来，实现多主集群。在PXC集群中每个mysql节点都是可读可写的，也就是主从概念中的主节点，不存在只读的节点。
apollo008·2020-11-19 05:38

hadoop大数据开发技术学习笔记第三天：（前序）MySQL数据库进阶

hadoop大数据开发技术学习笔记第三天：（前序）MySQL数据库进阶一、回顾知识1.myschool数据库和数据表的创建（1）创建数据库（2）数据库模型图（3）创建数据表grand（4）创建数据表student
悦下听风·2020-11-14 00:50

详解负载均衡 LVS、Nginx及HAProxy工作原理

希望对同行朋友有所帮助当前大多数的互联网系统都使用了服务器集群技术，集群是将相同服务部署在多台服务器上构成一个集群整体对外提供服务，这些集群可以是Web应用服务器集群，也可以是
梓端·2020-11-07 22:11

美国大数据工程师面试指南(建议收藏)

先做一个自我介绍，本科南开后，加入了一个创业公司kuxun，做实时信息检索，后来进入百度基础架构组，搭建了BaiduAppEngine的早期版本，随后去Duke大学留学，在攻读硕士期间，做跟Hadoop
无精疯·2020-10-23 11:00

Hadoop大数据平台架构与实践-基础篇

一、Hadoop两大核心组成1.HDFS分布式文件系统：存储2.MapReduce:并行计算二、HDFS基本概念block块：固定大小为64M的逻辑单元，HDFS的文件被分成块进行存储NameNode：是管理节点，存放文件元数据①文件与数据块的映射表②数据块与数据节点的映射表DataNode：是HDFS的工作节点，存放数据块。HDFS体系结构三、HDFS中的数据管理与容错HDFS容错机制心跳检测二
Derrick_Xu·2020-10-11 12:24

大数据平台搭建：基于Hadoop的数据分析平台

Hadoop大数据平台Hadoop在大数据技术生态圈，经过这么多年的发展
加米谷大数据张老师·2020-10-10 10:33

Linux常见Shell命令

本文是对日常使用linux，尤其在学习hadoop大数据组件时经常使用到的linux命令的一个总结，linux的每个命令都有很多可选的参数，在本文中不会详细的介绍每个命令的各种参数，只会介绍每个命令最常用的使用场景
我是老薛·2020-10-09 15:18

大数据实战 Linux 面试题

1.什么是集群技术？集群技术的优点是什么？（1）Cluster集群技术可如下定义：一组相互独立的服务器在网络中表现为单一的系统，并以单一系统的模式加以管理。此单一系统为客户工作站提供高可行性的服务。
哈呵哒~·2020-09-30 09:20

lvs、nginx和haproxy比较

LVS：使用集群技术和linux操作系统实现一个高性能、高可用的服务器，它具有很好的可伸缩性、可靠性和可管理性，是一款强大实用的开源软件。
乌枭·2020-09-17 07:31

企业数字化转型之数据管理的四个现代化

大数据产业创新服务媒体——聚焦数据·改变商业本文作者：Datablau么福祥2013年伴随维克托-迈尔-舍恩伯格一本《大数据时代》译作的推出，国内也开启了以星环等公司为代表的Hadoop大数据技术热潮，
数据猿·2020-09-17 04:58

分布式 微服务

负载均衡：Nginx：高性能、高并发的web服务器；功能包括负载均衡、反向代理、静态内容缓存、访问控制；工作在应用层LVS：Linuxvirtualserver，基于集群技术和Linux操作系统实现一个高性能
#風のように·2020-09-16 19:25

数据库集群技术漫谈

转自：http://www.51testing.com/html/69/n-867469-2.html简介当今世界是一个信息化的世界，我们的生活中无论是生活、工作、学习都离不开信息系统的支撑。而信息系统的背后用于保存和处理最终结果的地方就是数据库。因此数据库系统就变得尤为重要，这意味着如果数据库如果面临问题，则意味着整个应用系统也会面临挑战，从而带来严重的损失和后果。如今“大数据”这个词已经变得非
weixin_30892889·2020-09-16 12:25

MongoDB主从复制实践

mongodb主从复制配置实践：mongodb的主从复制是一种常用的复制方式，即为一个数据库同步备份的集群技术。
u010069176·2020-09-16 12:31

Kafka Streaming

它结合了在客户端编写和部署标准Java和Scala应用程序的简单性，以及Kafka服务器端集群技术的优点。
HuiGe94v587·2020-09-16 12:27

Nginx反向代理与负载均衡应用实践

因此，对于这类复杂的计算业务，便使用了计算机集群技术，集中几十上百台，甚至成千上万台计算机进行计
daw69883·2020-09-15 07:37

亿级Web系统负载均衡几种实现方式

负载均衡(LoadBalance)是集群技术(Cluster)的一种应用技术。负载均衡可以将工作任务分摊到多个处理单元，从而提高并发处理能力。目前最常见的负载均衡应用是Web负载均衡。
emprere·2020-09-14 18:04

交换机集群管理（锐捷）

【背景描述】某校园网的网络规模很大，仅交换机就有几十台，对于这个网络的管理和维护，网络管理员感到比较复杂，并且需要较多的IP地址（每台1个IP地址），因此打算采用交换机集群技术简化网络的管理并节省IP地址
weixin_34309543·2020-09-14 18:05

集群定义

和传统的高性能计算机技术相比，集群技术可以利用各档次的服务器作为节点，系统造价低，可以实现很高的运算速度，完成大运算量的计算，具有较高的响应能力，能够满足当今日益增长的信息服务的需求。而集群技术是一
西湖太极熊·2020-09-14 16:19

几种常用负载均衡

当前大多数的互联网系统都使用了服务器集群技术，集群即将相同服务部署在多台服务器上构成一个集群整体对外提供服务，这些集群可以是Web应用服务器集群，也可以是数据库服务器集群，还可以是分布式缓存服务器集群等
wx25051·2020-09-14 16:23

2003 集群 操纵流程

集群技术在企业组织部署关键业务、电子商务与商务流程应用等领域，具有举足轻重的作用。
weixin_33713503·2020-09-14 16:36

Hadoop大数据系列之NoSql海量数据库Hbase入门Shell篇（二）

一、Hbaseshell相关操作进入Hbase操作hbaseshell说明：搭建好了大数据平台前提下，并且配置了配置环境变量，直接在任何路径下可用1、help帮助命令help'命令名字'1.1、status查看状态1.2、version查看版本2、hbase中数据库的概念namespace（命名空间，相当于传统数据库的DataBases）2.1、显示所有的数据库（命名空间）list_namespa
wunanliu·2020-09-14 12:41

Hadoop大数据系列之NoSql海量数据库Hbase详解原理篇（一）

Hbase的引言一、什么是Hbase1、hbase是Apache组织开源的顶级项目distributed,scalable,bigdatastore产品。2、hbase是Google的BigTable论文的开源实现。3、hbase是基于Hadoop的一个NoSQL产品Column(列存储)类型的NoSQL。4、hbase是GoogleBigTable的开源实现,数据存储于Hdfs上。5、hbase
wunanliu·2020-09-14 12:09

windows集群简单介绍

目前应用最为广泛的集群计算技术可以分为三大类：高可用性集群技术、高性能计算集群技术和高可扩展性集群技术。下面我们将对这三种集群技术进行一下简单的介绍。
weixin_34037977·2020-09-14 12:30

高性能计算集群

高性能计算集群，英文原文为HighPerformanceComputingCluster,简称HPCCluster，是指以提高科学计算能力为目的计算机集群技术。
weixin_30237281·2020-09-14 12:16

开源数据库MySQL DBA运维实战-集群

开源数据库MySQLDBA运维实战-集群一.集群技术1.集群概念（MySQL复制技术）1.1集群目的1.2图示1.3类型1.4原理图示2.集群案例2.1环境2.2一主一从（M-S）（1）2.3一主一从（
俗人�·2020-09-14 11:07

大数据集群部署与管理

**内容概览一、大数据集群技术的概述二、大数据集群技术的架构与分析三、大数据集群的部署四、大数据集群的管理与监控五、结束语**一、大数据集群技术的概述让我们从有趣的“啤酒与尿布”故事说起，在美国沃尔玛连锁超市
大王小鬼hopeera·2020-09-13 20:48

大数据第一季--Hadoop（day4)-徐培成-专题视频课程

讲师介绍徐培成更多讲师课程IT十八掌创始人兼首席大数据开发技术金牌讲师，曾任驿统金（上海）网络技术有限公司总经理，主导与光大银行总行重点合作的阳光驿站金融结算系统的研发，并指导团队在阿里公有云上规划、部署Hadoop
十八掌教育·2020-09-13 20:39

Hadoop大数据资源分享

为什么80%的码农都做不了架构师？>>>http://bbs.superwu.cn/forum.php?mod=viewthread&tid=760&extra=page%3D1资源分享redis中文入门手册更多精彩内容请关注：http://bbs.superwu.cn关注超人学院微信二维码：关注超人学院java免费学习交流群：转载于:https://my.oschina.net/crxy/bl
weixin_34336292·2020-09-13 20:22

超人学院Hadoop大数据资源共享

超人学院Hadoop大数据资源共享-----数据结构与算法（java解密版）http://yunpan.cn/cw5avckz8fByJ訪问passwordb0f8很多其它精彩内容请关注：http://
weixin_34293246·2020-09-13 20:50

hadoop大数据最全环境变量配置-一键搞定

#jdkexportJAVA_HOME=/home/soft/jdkexportCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar#scalaexportSCALA_HOME=/home/soft/scala/exportPATH=$SCALA_HOME/bin:$PATH#hadoopexportHADOOP_HOME=/home
永宸·2020-09-13 19:28

大数据第三季--flume（day2)-徐培成-专题视频课程

讲师介绍徐培成更多讲师课程IT十八掌创始人兼首席大数据开发技术金牌讲师，曾任驿统金（上海）网络技术有限公司总经理，主导与光大银行总行重点合作的阳光驿站金融结算系统的研发，并指导团队在阿里公有云上规划、部署Hadoop
十八掌教育·2020-09-13 18:07

【Linux运维-集群技术进阶】集群/分布式环境下5种session处理策略

前言在搭建完集群环境后，不得不考虑的一个问题就是用户访问产生的session如何处理。如果不做任何处理的话，用户将出现频繁登录的现象，比如集群中存在A、B两台服务器，用户在第一次访问网站时，Nginx通过其负载均衡机制将用户请求转发到A服务器，这时A服务器就会给用户创建一个Session。当用户第二次发送请求时，Nginx将其负载均衡到B服务器，而这时候B服务器并不存在Session，所以就会将用
牛迁迁·2020-09-13 16:36

揭开J2EE集群的神秘面纱（一）：什么是J2EE集群

揭开J2EE集群的神秘面纱（一）：什么是J2EE集群作者：不详来源：CSDN博客酷勤网收集2008-04-18摘要酷勤网J2EE集群技术包括负载均衡和失效转移。
腾云鹏A·2020-09-13 16:00

大数据经典学习路线（及供参考）资料群：905572354（新群）

1.Linux基础和分布式集群技术学完此阶段可掌握的核心能力：熟练使用Linux，熟练安装Linux上的软件，了解熟悉负载均衡、高可靠等集群相关概念，搭建互联网高并发、高可靠的服务架构；学完此阶段可解决的现实问题
啊哈程序·2020-09-13 14:51

轻松getHadoop大数据开发技术，这一篇文章够了

Hadoop是一个开源框架，可编写和运行分布式应用处理大规模数据。分布式计算是一个宽泛并且不断变化的领域。具备以下4个特性：1)方便：Hadoop运行在由一般商用机器构成的大型集群上，或者云计算服务上，比如EC2。2)健壮：Hadoop致力于在一般商用硬件上运行，其架构假设硬件会频繁失效，Hadoop可以从容地处理大多数此类故障。3)可扩展：Hadoop通过增加集群节点，可以线性地扩展以处理更大的
qunqun8889·2020-09-13 12:02

大数据经典学习路线（及供参考）

[-]1.2离线计算系统课程阶段2.3Storm实时计算部分阶段3.4Spark内存计算阶段1.Linux基础和分布式集群技术学完此阶段可掌握的核心能力：熟练使用Linux，熟练安装Linux上的软件，
爱萨萨·2020-09-12 23:55
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他