集群分布式

45倍加速Spark的处理效率？！

Spark代表着下一代大数据处理技术，并且，借着开源算法和计算节点集群分布式处理，Spark和Hadoop在执行的方式和速度已经远远的超过传统单节点的技术架构。
侠天·2016-04-13 00:00

Hadoop系列一：Hadoop集群分布式部署

1、环境准备VirtualBox虚拟机上分布部署三套Ubuntu15.10操作系统（Linux64位），命名为Ubuntu_Hadoop（用户名hp）、Ubuntu_C（用户名c）、Ubuntu_PHP（用户名php），并建立通信。Ubuntu虚拟机之间通信建立：1）三套Ubuntu虚拟机在VirtualBox的网络设置为内部（Internal）模式；2）Ubuntu_Hadoop虚拟机IPV4设
fjssharpsword·2016-03-09 15:00

Linux ->> UBuntu 14.04 LTE下安装Hadoop 1.2.1（集群分布式模式）

安装步骤：1)JDK--Hadoop是用Java写的，不安装Java虚拟机怎么运行Hadoop的程序；2）创建专门用于运行和执行hadoop任务（比如map和reduce任务）的linux用户，就像windows下的服务账户，并且授权给他可以访问运行JDK目录权限，让他可以执行java虚拟机。这个账户最后用来运行bin\.start_all.sh启动hadoop的所有服务，那运行账户肯定是他了，他
Jerry_Chen·2016-02-17 22:00

Web项目演化系列--路由解析

前言搭建一个web项目不可能一蹴而就，会先从最基础的开始，不考虑数据库的支持，不考虑任何业务逻辑，使其以最简单的方式运行起来，然后慢慢的填充各个部分，使其从一个单机项目发展到集群分布式的大型项目，而其中最基础的部分便是路由了
ahl5esoft·2015-12-28 12:00

图片集群分布式存储和负载均衡

今天记录下图片的分布式存储和负载均衡实现原理。      对于Web服务器而言，用户对图片信息的访问是很消耗服务器资源的。当一个网页被浏览时,Web服务器与浏览器建立连接,每个连接表示一个并发。当页面包含多个图片时,Web服务器与浏览器会产生多个连接,同时发送文字和图片以提高浏览速度。因此,页面中图片越多Web服务器受到的压力也就越大。    一般小型网站是把所有页面和图片统一存放在一个主目录下,
杨小剑·2015-11-24 09:00

海量数据处理

我们也可以想到集群分布式处理。 1
·2015-11-13 01:50

hadoop集群环境配置

废话不多说，入题： 这几天抽空整了hadoop基础环境配置工作，（总体感觉配置有点繁琐，不够智能，人性化），对于服务搭建有三种模式： 单机实例， 单机伪分布式 集群分布式 第一种模式搭建服务的工作很简单
·2015-11-01 09:10

shrio教程初级（四）shiro基础（认证）

嘎嘎shiro使用广泛，shiro可以运行在web应用，非web应用，集群分布式应用中越来越多的用户开始使用shiro。简单好用用的人就多了哦。
yangchangyong0·2015-10-14 15:00

twemproxy(nutcracker）安装

在redis2.x版本，redis本身是不支持分布式的，只能通过第三方组件来实现集群分布式。这里来介绍下twitter的twemproxy的安装使用。关于twemproxy的具体描述这里不再进行叙述。
z19910509·2015-08-21 10:00

twemproxy(nutcracker）安装

阅读更多在redis2.x版本，redis本身是不支持分布式的，只能通过第三方组件来实现集群分布式。这里来介绍下twitter的twemproxy的安装使用。
z19910509·2015-08-21 10:00

linux虚拟机下Hadoop集群分布式配置

最近在搞hadoop，然后想在虚拟机下部署hadoop集群。搞了半天，有点小成果，就记下来。首先我们需要在官网下载hadoophttp://hadoop.apache.org/我下载的是hadoop1.2.1下载完使用SSHSecureFileTransferClient上传到虚拟机中去在集群中我使用了三个虚拟机，分别都上传上去/opt/检查jdk环境是否安装好，前面已经有介绍jdk的安装方法#c
helloitlxj·2015-08-02 09:58

Docker支持集群分布式应用意义很重大

转自：http://www.jdon.com/46906Docker支持集群分布式应用其实意义很重大，基本可以完全取代EJB了。
kksamoyed·2015-07-28 12:46

Hadoop Hive安装，配置mysql元数据库

由于Hive依赖于Hadoop，安装Hive之前必须确认Hadoop可用，关于Hadoop的安装可以参考集群分布式Hadoop安装详细步骤，这里不再叙述。
x_i_y_u_e·2015-07-11 22:00

基于集群的Hadoop HBase安装与配置

关于Hadoop集群的配置可以查看博客集群分布式Hadoop安装详细步骤，这里不再说明。
x_i_y_u_e·2015-07-07 15:00

JAVA集群分布式和网络设计的浅析(转载！)

转载自：http://blog.csdn.net/xieyuooo/article/details/6371207   在java中常用于实现多线程的方法有3中：   1、继承于Thread类，重写run方法   2、实现Runable接口，实现run方法   3、实现Callable接口，实现call方法（具有返回值）   至于调用的方法多种多样，可以直接用start启动，也可以使用java.u
zero__007·2015-06-11 15:00

quartz集群分布式(并发)部署解决方案-Spring

集群分布式并发环境中使用QUARTZ定时任务调度，会在各个节点会上报任务，存到数据库中，执行时会从数据库中取出触发器来执行，如果触
网络小虫虫·2015-06-03 18:21

集群分布式 Hadoop安装详细步骤

集群分布式Hadoop系统安装及测试本系统一共有三个节点，一个namenode，两个datanode，IP和主机名对应如下：192.168.1.19     namenode192.168.1.7           
x_i_y_u_e·2015-04-08 16:00

Spark集群独立模式HA

Spark简介：Spark是一种与Hadoop相似的开源集群计算环境Spark基于MR算法实现的分布式计算，拥有HadoopMR的优点，不同的是结果保存在内存中Spark是一个针对超大数据集合的低延迟的集群分布式计算系统
ljl_19880709·2015-03-21 17:20

Spark集群独立模式HA

Spark简介：Spark是一种与Hadoop相似的开源集群计算环境Spark基于MR算法实现的分布式计算，拥有HadoopMR的优点，不同的是结果保存在内存中Spark是一个针对超大数据集合的低延迟的集群分布式计算系统
ljl_19880709·2015-03-21 17:20

quartz集群分布式(并发)部署解决方案-Spring

集群分布式并发环境中使用QUARTZ定时任务调度，会在各个节点会上报任务，存到数据库中，执行时会从数据库中取出触发器来执行，如果触
oboaix·2015-03-14 17:00

quartz集群分布式(并发)部署解决方案-Spring

集群分布式并发环境中使用QUARTZ定时任务调度，会在各个节点会上报任务，存到数据库中，执行时会从数据库中取出触发器来执行
oboaix·2015-03-14 17:00

quartz集群分布式(并发)部署解决方案-Spring

  集群分布式并发环境中使用QUARTZ定时任务调度，会在各个节点会上报任务，存到数据库中，执行时会从数据库中取出
oboaix·2015-03-14 17:00

quartz集群分布式(并发)部署解决方案-Spring

集群分布式并发环境中使用QUARTZ定时任务调度，会在各个节点会上报任务，存到数据库中，执行时会从数据库中取出触发器来执行，如果
oboaix·2015-03-14 09:00

ceph 0.87 ubuntu14.04 部署(准备篇 ) （转载）

ceph0.87ubuntu14.04部署(准备篇)分类：ceph集群分布式存储2015-01-2215:159人阅读评论(0)收藏编辑删除目录(?)
shadowalker911·2015-02-04 17:00

Ubuntu 14.04 搭建单机版 hadoop 2.6.0 环境

首先 hadoop平台的搭建有三种方式：    单机版    伪分布式版    完全集群分布式        首先先试着练习来安装单机版hadoop一、安装环境        
u013652219·2015-01-23 19:00

hadoop集群搭建和测试

下面我来介绍下搭建hadoop集群分布式的步骤1、把hadoop目录下的conf/core-site.xml文件修改成如下： fs.default.name hdfs://huoxin:9000//
u010310183·2014-12-09 15:00

关于大型web服务器的设计思路

高性能的数据库(oracle/db2/mysql...) 2、高性能的Web容器(weblogic/apache...) 3、高效率的编程语言(java/C#) 4、使用高性能的服务器(小型机、PC服务器) 5、集群分布式运行
震旦·2014-12-06 12:00

solr集群分布式部署配置

1.安装配置zookeeper 在zookeeper安装目录/conf下  cpzoo_sample.cfgzoo.cfg Vizoo.cfgdataDir={zookeeper工作目录}clientPort=2181（服务端口）server.1=hadoop.datanode3.com:2888:9888server.2=hadoop.datanode5.com:2888:9888server.
zmf·2014-11-14 14:00

高访问量高性能高可扩展性网站架构（概括性理论）

自本期《问底》，徐汉彬将带大家开启异地跨集群分布式系统打造，本次关注的重点则是架构从单机到分布式集群的转变。 
xinklabi·2014-11-10 12:00

徐汉彬：亿级Web系统搭建——单机到分布式集群

自本期《问底》，徐汉彬将带大家开启异地跨集群分布式系统打造，本次关注的重点则是架构从单机到分布式集群的转变。
xiaobenbenxiong·2014-11-07 16:00

徐汉彬：亿级Web系统搭建——单机到分布式集群

自本期《问底》，徐汉彬将带大家开启异地跨集群分布式系统打造，本次关注的重点则是架构从单机到分布式集群的转变。
xiaobenbenxiong·2014-11-07 16:00

【问底】徐汉彬：亿级Web系统搭建——单机到分布式集群

自本期《问底》，徐汉彬将带大家开启异地跨集群分布式系统打造，本次关注的重点则是架构从单机到分布式集群的转变。
jinyeweiyang·2014-11-07 10:00

windows下hadoop的集群分布式部署

原文链接：http://www.cnblogs.com/liudmblog/p/3922994.html下面我们进行说明一下hadoop集群的搭建配置.本文假设读者具有hadoop单机配置的基础，相同的部分不在重述。以三台测试机为例搭建一个小集群,三台机器的ip分别为192.168.200.1;192.168.200.2;192.168.200.3cygwin,jdk的安装同windows下had
weixin_30362233·2014-08-19 20:00

Spark - 大数据Big Data处理框架

 Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
wbj0110·2014-08-04 10:00

Spark - 大数据Big Data处理框架

 Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
wbj0110·2014-08-04 10:00

Spark - 大数据Big Data处理框架

 Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
wbj0110·2014-08-04 10:00

Spark - 大数据Big Data处理框架

Spark - 大数据Big Data处理框架 (2014-01-26 20:38:54)转载▼ 标签： 大数据行业信息 it Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer
scholltop·2014-08-03 08:00

Spark - 大数据Big Data处理框架

Spark - 大数据Big Data处理框架 (2014-01-26 20:38:54)转载▼ 标签： 大数据行业信息 it Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer
scholltop·2014-08-03 08:00

Spark - 大数据Big Data处理框架

阅读更多Spark-大数据BigData处理框架(2014-01-2620:38:54)转载▼标签：大数据行业信息itSpark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer
scholltop·2014-08-03 08:00

Spark - 大数据Big Data处理框架

Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
wbj0110·2014-07-08 11:00

Spark - 大数据Big Data处理框架

Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
wbj0110·2014-07-08 11:00

Spark - 大数据Big Data处理框架

Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
wbj0110·2014-07-08 11:00

集群分布式

集群概念1.两大关键特性集群是一组协同工作的服务实体，用以提供比单一服务实体更具扩展性与可用性的服务平台。在客户端看来，一个集群就象是一个服务实体，但事实上集群由一组服务实体组成。与单一服务实体相比较，集群提供了以下两个关键特性：· 可扩展性－－集群的性能不限于单一的服务实体，新的服务实体可以动态地加入到集群，从而增强集群的性能。· 高可用性－－集群通过服务实体冗余使客户端免于轻易遇到outofs
wpb王鹏博·2014-06-16 14:00

Spark - 大数据Big Data处理框架

Spark是一个针对超大数据集合的低延迟的集群分布式计算系统，比MapReducer快40倍左右。
lantian0802·2014-03-25 13:00

从JAVA多线程理解到集群分布式和网络设计的浅析

由于最近工作原因，很久没有在CSDN上留下些啥，今天在这些篇文章，是关于java多线程的。对于JAVA多线程的应用非常广泛，现在的系统没有多线程几乎什么也做不了，很多时候我们在何种场合如何应用多线程成为一种首先需要选择的问题，另外关于java多线程的知识也是非常的多，本文中先介绍和说明一些常用的，在后续文章中如果有必要再说明更加复杂的吧，本文主要说明多线程的一下几个内容：1、在应用开发中什么时候选
wyc_cs·2013-11-11 09:00

从JAVA多线程理解到集群分布式和网络设计的浅析

由于最近工作原因，很久没有在CSDN上留下些啥，今天在这些篇文章，是关于java多线程的。对于JAVA多线程的应用非常广泛，现在的系统没有多线程几乎什么也做不了，很多时候我们在何种场合如何应用多线程成为一种首先需要选择的问题，另外关于java多线程的知识也是非常的多，本文中先介绍和说明一些常用的，在后续文章中如果有必要再说明更加复杂的吧，本文主要说明多线程的一下几个内容：1、在应用开发中什么时候选
zzxian·2013-03-28 09:00

关于大型web服务器的设计思路

高性能的数据库(oracle/db2/mysql...) 2、高性能的Web容器(weblogic/apache...) 3、高效率的编程语言(java/C#) 4、使用高性能的服务器(小型机、PC服务器) 5、集群分布式运行
cangyingzhijia·2013-02-21 17:00

从JAVA多线程理解到集群分布式和网络设计的浅析

 对于JAVA多线程的应用非常广泛，现在的系统没有多线程几乎什么也做不了，很多时候我们在何种场合如何应用多线程成为一种首先需要选择的问题，另外关于java多线程的知识也是非常的多，本文中先介绍和说明一些常用的，在后续文章中如果有必要再说明更加复杂的吧，本文主要说明多线程的一下几个内容：1、在应用开发中什么时候选择多线程？2、多线程应该注意些什么？3、状态转换控制，如何解决死锁？4、如何设计一个具有
hechenhui1983·2012-11-04 16:19

： 从JAVA多线程理解到集群分布式和网络设计的浅析

转载地址：http://blog.csdn.net/tujiyue/article/details/7222273 由于最近工作原因，很久没有在 CSDN 上留下些啥，今天在这些篇文章，是关于 java 多线程的。 对于 JAVA 多线程的应用非常广泛，现在的系统没有多线程几乎什么也做不了，很多时候我们在何种场合如何应用多线程成为一种首先需要选择的问题，另外关于 java 多线程的
sd6292766·2012-10-25 23:00

： 从JAVA多线程理解到集群分布式和网络设计的浅析

阅读更多转载地址：http://blog.csdn.net/tujiyue/article/details/7222273由于最近工作原因，很久没有在CSDN上留下些啥，今天在这些篇文章，是关于java多线程的。对于JAVA多线程的应用非常广泛，现在的系统没有多线程几乎什么也做不了，很多时候我们在何种场合如何应用多线程成为一种首先需要选择的问题，另外关于java多线程的知识也是非常的多，本文中先介
sd6292766·2012-10-25 23:00
上一页 1 2 3 4 5 6 7 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他