大数据平台搭建

大数据平台搭建 - cdh5.11.1 - hadoop集群安装

一、前言由于线下测试的需要，需要在公司线下（测试）环境搭建大数据集群。那么CDH是什么？hadoop是一个开源项目，所以很多公司再这个基础上进行商业化，不收费的hadoop版本主要有三个，分别是：（1）Apache，最原始的版本，所有发行版均基于这个版本进行改进缺点：版本部署混乱，部署过程繁杂，升级过程繁杂，兼容性差，安全性差（2）CDH版本，在Apache基础上，进行了封装，处理了不同版本的兼容
nicekk·2018-05-12 12:00

大数据平台搭建详解

大数据平台搭建(实验室版)1大数据介绍：1.1背景进入21世纪随着计算机科学的迅速发展，人民生活水平的提高，各种交易产生的数据也飞速增长，2016天猫双11谢幕，根据阿里公布的实时数据，截至11日24:
dingyanming·2018-05-12 11:37

虚拟机\物理机上5台服务器cloudrea manager5.12大数据平台搭建（持续更新）

文章目录前言节点网络配置ssh配置cloudera以及JDK以及Mysql版本选择【必读】其他注意事项JDK安装mysql5.7安装防火墙正题CDH集群安装其他虚拟机扩容TODO参考前言全文共1.4w字（仅安装整个大数据平台，关于cdhmanager管理，会单独记录）。相比有的地方几十页的文档已经少了不少，但是还真的比较多。强烈建议多看官方文档，写得特别详细，是的，确实有些多。一定要耐心，一定要仔
haixwang·2018-03-31 22:07

虚拟机\物理机上5台服务器cloudrea manager5.12大数据平台搭建（持续更新）

文章目录前言节点网络配置ssh配置cloudera以及JDK以及Mysql版本选择【必读】其他注意事项JDK安装mysql5.7安装防火墙正题CDH集群安装其他虚拟机扩容TODO参考前言全文共1.4w字（仅安装整个大数据平台，关于cdhmanager管理，会单独记录）。相比有的地方几十页的文档已经少了不少，但是还真的比较多。强烈建议多看官方文档，写得特别详细，是的，确实有些多。一定要耐心，一定要仔
haixwang·2018-03-31 22:07

大数据平台搭建（1）虚拟机+Centos-7安装

在2017-2018寒假自己尝试了在家里的老电脑上安装Ubuntu16.04+Hadoop3.0，遇到的问题特别多而且只能搭建单机，集群没法搭起来，一直不认同虚拟机搭建的，这学期大数据课程，千峰的老师给我们上课，讲述了虚拟机搭建集群测试的好处，并且使用了Centos-7+hadoop-2.6.4+jdk1.87+VMware12.1.1，这是老师在最近一年教授的搭配，实践总结比较实用bug少，对机
ssITt猿·2018-03-26 17:19

大数据开发从小白到大神（二）——安装配置Hadoop框架

在上一篇文章中我们完成了5台虚拟机的搭建工作，并且完成了对5台虚拟机都进行了静态ip的设置，这只是大数据平台搭建的基础部分，今天我们就来开始真正的接触大数据——Hadoop。
Wilson_Iceman·2018-03-05 17:29

大数据平台搭建-hadoop集群的搭建

本系列文章主要阐述大数据计算平台相关框架的搭建，包括如下内容：虚拟服务器安装基础环境安装zookeeper集群的搭建kafka集群的搭建hadoop/hbase集群的搭建spark集群的搭建flink集群的搭建elasticsearch集群的搭建alluxio集群的搭建本文主要讲解hadoop和hbase的分布式搭建过程。版本要求java版本：1.8.0_181zookeeper版本:zookee
weixin_30752377·2017-09-06 14:00

大数据平台搭建-简单说

1.安装虚拟机（VMware8.0）2.在虚拟机中安装centos操作系统（centos7）3台以上3.安装SSH（在windows平台远程管理Linux系统的工具）BvSshClient-Inst4.配送SSH免密登录5.hadoop安装常用命令https://segmentfault.com/a/1190000002672666#articleHeader05.hdfs安装（http://ww
Osborn521·2017-08-19 11:43

Hadoop集群大数据平台搭建

一、Hadoop集群环境搭建配置1、前言Hadoop的搭建分为三种形式：单机模式、伪分布模式、完全分布模式，只要掌握了完全分布模式，也就是集群模式的搭建，剩下的两种模式自然而然就会用了，一般前两种模式一般用在开发或测试环境下，Hadoop最大的优势就是分布式集群计算，所以在生产环境下都是搭建的最后一种模式：完全分布模式。2、硬件选择须知：分布式环境中一个服务器就是一个节点节点越多带来的是集群性能的
weixin_30432007·2017-07-08 19:00

大数据平台搭建笔记

1、硬件配置及软件列表1、1硬件配置信息1、2系统选择1、3软件列表2、Linux系统配置2、1修改主机名及IP主机名映射2、2SSH免密码登录2、3修改最大文件打开数2、4 关闭防火墙、selinux、umask、packageKit3、辅助软件安装3、1JDK安装3、2MYSQL安装3、3Ganglia安装3、4NTP安装3、5snappy安装4、zookeeper安装5、hadoop2.X安
AShang_BigData·2014-12-06 17:00

遥感与大数据

“卫星上天是手段，卫星数据获取是目的，也是商业价值所在，我们公司提供从卫星数据处理软件、大数据平台搭建，到硬件终端产品的研发这一整条产业链服务。"倪金生对《中国新
灵玖lingjoin·2014-02-10 15:00

大数据平台搭建技术底座 掘金移动互联等行业

大数据平台是从各种类型的、漫无边际的数据中，快速获得有价值信息的处理方法或框架。大数据中的“大”不是大数据的唯一指标，而是更强调数据的类型多样、处理的速度和获取价值的能力。分析人士表示，大数据对传统行业的重构有望成为中国经济新一轮快速发展的关键推动力，对于A股上市公司而言，IT业、移动互联网、交运和电力(行情专区)安全设备生产商等四类板块受益明显。网络是大数据重要信源数据是平台运营商的重要资产，可
灵玖lingjoin·2013-08-29 11:00

大数据平台搭建技术底座 四行业迎来新机遇

大数据平台是从各种类型的、漫无边际的数据中，快速获得有价值信息的处理方法或框架。大数据中的“大”不是大数据的唯一指标，而是更强调数据的类型多样、处理的速度和获取价值的能力。分析人士表示，大数据对传统行业的重构有望成为中国经济新一轮快速发展的关键推动力，对于A股上市公司而言，IT业、移动互联网、交运和电力安全设备生产商等四类板块受益明显。网络是大数据重要信源数据是平台运营商的重要资产，可能提供API
灵玖lingjoin·2013-08-29 10:00
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他