E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ML&DL-大数据学习
3分钟让你读懂Hadoop都做了什么
分享之前我还是要推荐下我自己创建的
大数据学习
交流Qun:710219868进Qun聊邀请码填写南风(必填)我就知道是你了Hadoop可以说是大数据储存和计算的开山鼻祖了,现在大多数的开源框架都依赖于Hadoop
编程南风
·
2018-07-12 16:18
Hadoop
Spark
Storm
分布式微服务架和SOAj架构体系详解
分享之前我还是要推荐下我自己创建的
大数据学习
交流Qun:710219868进Qun聊邀请码填写南
编程南风
·
2018-07-12 16:36
Spark
Storm
Hadoop
Spark MLlib 之 大规模数据集的相似度计算原理探索
更多内容参考——我的
大数据学习
之路——xingoo在spark中RowMatrix提供了一种并行计算相似度的思路,下面就来看看其中的奥妙吧!相似度相似度有很多种,每一种适合的场景都不太
xingoo
·
2018-07-11 21:00
spark入门介绍(菜鸟必看)经验技术分享
分享之前我还是要推荐下我自己创建的
大数据学习
交流Qun710219868进Qun聊邀请码填写南风(必填)我就知道是你
编程南风
·
2018-07-11 10:34
大数据
Spark
hadoop
Spark MLlib 之 aggregate和treeAggregate从原理到应用
由于treeAggregate是在aggregate基础上的优化版本,因此先来看看aggregate是什么.更多内容参考我的
大数据学习
之路aggregate先直接看一下代码例
xingoo
·
2018-07-09 20:00
7.2 Sqoop2示例数据从PostgreSQL导入到HDFS
7.2Sqoop2示例数据从PostgreSQL导入到HDFS“卜算子·大数据”一个开源、成体系的
大数据学习
教程。
王小雷-多面手
·
2018-07-08 16:30
Sqoop
大数据
4.2 ApacheAvro编程Java示例
4.2ApacheAvro编程Java示例“卜算子·大数据”一个开源、成体系的
大数据学习
教程。
王小雷-多面手
·
2018-07-08 16:05
Hadoop
大数据
2.2Virtualbox高级应用构建本地大数据集群服务器
2.2Virtualbox高级应用构建本地大数据集群服务器“卜算子·大数据”一个开源、成体系的
大数据学习
教程。
王小雷-多面手
·
2018-07-08 16:24
Linux
virtualbox
大数据
大数据学习
之路(十二)——HBASE单节点搭建
现在开始搭建HBASE的单节点HBASE依赖于Zookeeper,但是不需要担心,我们的单机虽然没有Zookeeper,但是hbase自带了zookeeper。文档:[http://hbase.apache.org/book.html#quickstart]HBASE的单机文档也是介绍的十分详细,而且搭建十分简单。我这边使用的1.1.3版本,直接照着文档走,步骤也跟搭建hadoop单节点差不多。1
recover517
·
2018-07-07 15:27
hbase
单节点
大数据
Spark MLlib 之 Vector向量深入浅出
更多内容参考我的
大数据学习
之路LocalVectorlocalvector是一种索引是0开始的整数、内容为double类
xingoo
·
2018-07-07 15:00
Spark MLlib 之 StringIndexer、IndexToString使用说明以及源码剖析
更多内容参考我的
大数据学习
之路文档说明StringIndexer字符串转索引StringIndexer可以把字符串的列按照出现频率进行排序,出现次数最高的对应的Index为0。比如下面的列表进行Str
xingoo
·
2018-07-05 21:00
大数据学习
--之--HBASE理论基础
ApacheHBase简介ApacheHBase(HadoopDataBase)是一个高可靠行、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可以在廉价的PC上搭建起大规模结构化存储集群。HBase是GoogleBigtable的开源实现,类似GoogleBigtable利用GFS作为文件存储系统,HBase利用HadoopHDFS作为其文件存储系统;Google运行MapReduce
DonsenChen
·
2018-07-05 11:41
大数据
大数据学习
--之--HBASE理论基础
ApacheHBase简介ApacheHBase(HadoopDataBase)是一个高可靠行、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可以在廉价的PC上搭建起大规模结构化存储集群。HBase是GoogleBigtable的开源实现,类似GoogleBigtable利用GFS作为文件存储系统,HBase利用HadoopHDFS作为其文件存储系统;Google运行MapReduce
weixin_30898109
·
2018-07-05 11:00
大数据
数据库
人工智能
大数据教程,
大数据学习
线路图
前言先引用一下马云大大的话:很多人还没搞清楚什么是PC互联网,移动互联网来了,我们还没搞清楚移动互联的时候,大数据时代又来了。马云深度解析大数据“大数据”是近年来IT行业的热词,并广泛的应用在各行各业。特别是近年来随着社交网络、物联网、云计算以及多种传感器的广泛应用,以数量庞大,种类众多,时效性强为特征的非结构化的数据不断涌现,数据的重要性愈发凸显,传统的数据存储、分析技术难以实时处理大量的非结构
传智播客官方博客
·
2018-07-05 10:33
纯干货
零基础学习大数据
有很多人对这个东西感兴趣,但是对编程语言也不太了解不过
大数据学习
并不是高深莫测的,虽然它并没有多简单,但是通过努力,零基础的朋友也是完全可以掌握大数据的。
程序员高级码农
·
2018-07-03 18:08
优效学院
大数据的学习路线总结
一、基础阶段1、开始
大数据学习
之前,首先要把基础打好。我在学习大数据的过程中,学习的准备部分主要包括Java,Linux和MySQL的学习。具体的学习时间,就因人而异了。比如
qq_38799155
·
2018-07-03 14:42
大数据入门
最新Hadoop
大数据学习
路线分析及Hadoop生态架构技术
最新Hadoop
大数据学习
路线分析及Hadoop生态架构技术简介关于Hadoop,本文主要介绍Hadoop家族产品,常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper
csdnzoutao
·
2018-07-03 11:59
hadoop集群
大数据学习
之路(八)——MapReduce实战(hot weather top2)
之前的WordCount,比较简单,就只上了代码,接下来稍微复杂一点的项目,将会记录整个项目编写过程的思路项目介绍:统计每年,每月最热的两天的温度数据:1949-10-0114:21:0234c1949-10-0214:01:0236c1950-01-0111:21:0232c1950-10-0112:21:0237c1951-12-0112:21:0223c1950-10-0212:21:024
recover517
·
2018-07-01 11:04
hadoop
mapreduce
实战
大数据
大数据学习
之路(七)——学习小结
个人目前学习的总结,如有问题,发现的时候会修正,用于个人回顾,有错误的地方欢迎留言指出通过前几篇的学习hadoop单节点伪分布式hadoop完全分布式hadoop完全分布式高可用(HA)zookeeperyarn高可用hdfsMapReduce了解了hadoop基本的搭建,和前期可能遇到的问题。以下是对各个功能组件的理解。1.HADOOPHadoop分布式文件系统(HDFS)是一种分布式文件系统,
recover517
·
2018-06-30 19:05
大数据
大数据学习
之路(六)——MapReduce(simple WordCount)
终于开始写代码了先从配置idea开发环境开始参考博文[https://blog.csdn.net/u010171031/article/details/53024516]注意,src文件夹下需配置以下文件,我是用伪分布式测试的,电脑有点吃不消core-site.xmlhdfs-site.xmlmapred-site.xmlyarn-site.xml如果不放这几个配置文件的话,要手动指定hdfs服务
recover517
·
2018-06-29 21:51
大数据
卜算子·大数据简介 一个开源、成体系的
大数据学习
教程
第1章卜算子·大数据简介“卜算子·大数据”,是一个开源、成体系的
大数据学习
教程。从基础数据采集到顶层架构设计。最新梳理出大数据知识体系共计12个部分,42个章节。每周日更新,金九银十际,助你上青天!
王小雷-多面手
·
2018-06-29 11:52
Database
Linux
Spark
Hadoop
Machine
Learning
MapReduce
Hive
Sqoop
HBase
Docker
Apache
Beam
Spring-Cloud
Hadoop
YARN
大数据
大数据学习
之路(三)——hadoop分布式
睡不着觉,拉着狗陪我写博客开始搭建分布式hdfs环境参考文章http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-common/ClusterSetup.html建议:为了快速学习,建议同一个网址打开两个窗口,一种一个使用谷歌翻译整个页面,另一个作为对照使用,提高自己的学习效率电脑性能有限,本打算用mac自身做namenod
recover517
·
2018-06-29 06:20
大数据
大数据学习
之路(一)——准备阶段
此文章仅做个人学习记录与参考,如有错误,欢迎指正一、准备1.虚拟机:VMwareFusion2.IDE:Intellijidea快捷键[windowshttps://blog.csdn.net/deniro_li/article/details/72902621]idea快捷键[machttps://blog.csdn.net/as300403/article/details/79216706]3
recover517
·
2018-06-28 18:46
大数据
大数据学习
之Hive入门
Hive是基于HadoopHDFS之上的数据仓库**数据仓库:本质上就是一个数据库。但有别于我们通常意义上的数据库**数据仓库是一个面向主题的、集成的、不可更新的、随时间不变化的数据集合,它用于支持企业或组织的决策分析处理。面向主题:主题是指用户使用数据仓库时关心的重点内容。集成的:数据仓库可将不同类型数据库管理系统中的数据集成起来保存。不可更新的:数据仓库一般只做数据查询,不做更新、删除等操作。
EnjoyCode12138
·
2018-06-27 18:26
学习大数据需要掌握哪些知识?
推荐一个
大数据学习
群710219868【备注:三罗】晚上20:10都有一节【免费的】大数据直播课程,专注大数据分析方法,大数据编程,大数据仓库,大数据案例,人工智能,数据挖掘都是纯干货分享,你愿意来学习吗
sanluo9812
·
2018-06-23 19:20
大数据
大数据方法论
大数据学习
交流群:808769635前段时间有报道称,有学者质疑“大数据”理论,也有硅谷公司负责人质疑大数据应用的效果。
顺治帝
·
2018-06-23 16:33
十条0基础入门学习大数据分析的路径,总有一条适合你!
推荐一个
大数据学习
群119599574晚上20:10都有一节【免费的】大数据直播课程,专注大数据分析方法,大数据编程,大数据仓库,大数据案例,人工智能,数据挖掘都是纯干货分享,你愿意来学习吗?
weixin_41780944
·
2018-06-17 21:11
大数据
大数据学习
大数据工程师
大数据入门
大数据开发
学习大数据需要Java基础吗?
推荐一个
大数据学习
群119599574晚上20:10都有一节【免费的】大数据直播课程,专注大数据分析方法,大数据编程,大数据仓库,大数据案例,人工智能,数据挖掘都是纯干货分享,你愿意来学习吗?
weixin_41780944
·
2018-06-16 11:30
Java
Java编程
Java学习
Java软件开发
Java基础
大数据
大数据学习
大数据工程师
大数据入门
大数据开发
5分钟搭建
大数据学习
环境
想学大数据,先搭个环境再说,要准备多少台服务器,每台服务器的基础环境设置,各个服务器的网络互联,真是很麻烦的一件事第一座山先把想入门的学习者挡在门外,别放弃,这里又一个即全面又快捷的搭建大数据环境的方法,排除下载软件的时间,只需要5分钟,就可以拥有一个自己的大数据环境,包括绝大部分大数据生态环境的各个组建,完美得不能再完美。只需按照以下步骤进行:一、下载并安装oracle的虚拟机软件Virtual
阿里斯吐
·
2018-06-15 11:26
大数据
5分钟搭建
大数据学习
环境
想学大数据,先搭个环境再说,要准备多少台服务器,每台服务器的基础环境设置,各个服务器的网络互联,真是很麻烦的一件事第一座山先把想入门的学习者挡在门外,别放弃,这里又一个即全面又快捷的搭建大数据环境的方法,排除下载软件的时间,只需要5分钟,就可以拥有一个自己的大数据环境,包括绝大部分大数据生态环境的各个组建,完美得不能再完美。只需按照以下步骤进行:一、下载并安装oracle的虚拟机软件Virtual
自由的海盗
·
2018-06-14 20:53
大数据学习
体系
明确几个问题:1、学什么?怎么学?——>思想、原理、体系结构(非常重要):画图2、搭建环境:一定仔细3、写程序:Hadoop、Storm—>Java程序Spark—>Scala、Java目的:1、学习内容2、名词(很多)==================================================一、各章概述(Hadoop部分、Storm部分)(一)、Hadoop的起源与背景
NI3TECH
·
2018-06-13 15:02
大数据spark中ml与mllib 的区别你分清了吗?
大数据学习
过程中一个重要的环节就是spark,但是在spark中有很多的知识点,很多人都傻傻分不清楚,其中,最易搞混的就是ml与mllib的区别,所以我们不妨来详细的了解一下二者的区别。
鲸落大叔
·
2018-06-10 19:39
科技
大数据
spark
大数据学习
线路图,Python/数据分析实战基础
来源:http://www.mathlabs.cn/python_20.html本文主要归纳Python、数据分析的学习线路图,学习方向:共分为五大板块:板块一:熟悉python,SQLpython(1)python语法(2)常用数据结构(列表、元组、字典)(3)python高级用法(日期和时间、列表推导式、高阶函数、多线程)SQL(1)聚合(2)表连接(3)子查询板块二:机器学习基本算法入门(1
Byweiker
·
2018-06-08 22:24
Python
大数据
大数据学习
Hadoop之HDFS详解一
一、Hadoop的之HDFS架构:1、基础概念:1.1、架构组成:主要有以下四个部分组成:HDFSClient:客户端NameNode:名称节点DataNode:数据节点SecondaryNameNode:第二名称节点1.1.2、block(数据块)大小:64M128M通过参数hdfs-site.xmldfs.blocksize进行修改比如有一个文件130兆,会根据块大小128,切分为两个块128
追风邵
·
2018-06-08 17:48
JAVA
大数据学习
路线
背景近年来大数据BigData、人工智能AI、物联网Iot等行业发展迅猛,很多人都想要从事大数据技术开发工作,但是,请问要怎么做,路线是什么?从哪里开始学?学哪些?这是一个大问题。对于我自己来说,最近也在学一些大数据开发相关的技术,所以之前整理了一份《大数据技术学习路线》,希望对你有所帮助。学习规划总共分为五大部分,分别是:大数据技术基础离线计算Hadoop流式计算Storm内存计算Spark机器
贱贱的剑剑
·
2018-06-06 20:40
大数据学习
大数据学习
十四:MySQL安装
下载mysql,https://dev.mysql.com/downloads/mysql/5.6.html#downloads,选择Linux-Generic,下载64位的tar.gz文件1、新建mysql用户和组#groupaddmysql#useradd-gmysql-Ghadoop-d/usr/local/mysqlmysql#groupsmysql#验证#idmysql#验证2、解压并安
RacyFu
·
2018-06-01 00:10
如何自学大数据,成为年薪50万大咖路线分享
03.大数据科学家04.其他(数据挖掘本质算是机器学习,不过和数据相关,也可以理解为大数据的一个方向吧)由于本人曾是大数据工程师的角色,我就这个方向做一些介绍本回答目录:一、大数据工程师的技能要求二、
大数据学习
路径三
arry86
·
2018-05-29 16:14
实战可依赖的20本大数据书籍(收藏)
因为很多人私信问我大数据应该读什么书比较好,所以小编特意找了二十本大数据实战可依赖的书籍,想要转职或者深入学习大数据的朋友可以注意了,点赞收藏加转发,鼓励一下小编的良苦用心分享之前我还是要推荐下我自己创建的
大数据学习
交流
fenghuo9527
·
2018-05-26 22:20
sh
Java开发者想尝试转行大数据,学习方向建议?
本文分三大方面详细的讲如何学大数据:大数据方向工作介绍大数据工程师的技能要求
大数据学习
路径一.大数据
假的鱼
·
2018-05-26 15:29
大数据
数据挖掘
java
程序员
大数据学习
十二:HDFS读流程和写流程
HDFS读写流程相对于HDFSClient而言,所以读流程为FSDataInputStream,写流程为FSOutPutStream1、HDFS读流程(1)、打开分布式文件流(2)、向NameNode请求数据文件(3)、NameNode返回要读取文件的全部或部分元数据信息(4、5)、HDFS开始从最近的DataNode读取block,若读取的块损坏,则读取备份中的其他block,若所有备份都无法读
RacyFu
·
2018-05-24 15:12
大数据学习
路线 Java SE
大数据学习
路线之javaSE一第一阶段(java基础知识)1JDK是什么?JRE是什么?JDK和JRE的区别?以及JDK安装和测试。1.JDK、JRE是什么?JDK和JRE的区别?2.JVM是什么?
小生阿丕
·
2018-05-23 20:04
大数据到底怎么学:数据科学概论与
大数据学习
误区
“数据科学家走在通往无所不知的路上,走到尽头才发现,自己一无所知。”-WillCukierski,HeadofCompetitions&DataScientistatKaggle最近不少网友向我咨询如何学习大数据技术?大数据怎么入门?怎么做大数据分析?数据科学需要学习那些技术?大数据的应用前景等等问题。由于大数据技术涉及内容太庞杂,大数据应用领域广泛,而且各领域和方向采用的关键技术差异性也会较大,
假的鱼
·
2018-05-21 15:23
java
大数据
数据挖掘
大数据分析
Hadoop
reduce
大数据学习
的内容有哪些?
今天科多大数据就和你们一起来分享一篇关于
大数据学习
内容体系介绍的文章。
假的鱼
·
2018-05-21 15:15
java
大数据
数据挖掘
spark
Hadoop
数据分析
reduce
大数据学习
九:hadoop伪分布式部署(单机)
官方单机配置地址:http://hadoop.apache.org/docs/r2.8.4/hadoop-project-dist/hadoop-common/SingleCluster.html1、设置主机名称#hostname#查看主机名,显示localhost#hostnamectlset-hostnamebigdata#设置主机名为bigdata#hostname#关闭当前sessin重新
RacyFu
·
2018-05-21 10:48
如何系统规划
大数据学习
之路?
大数据学习
不是很深奥也不难懂,虽然并不简单,但是通过努力学习,想学习的朋友也能掌握大数据。大数据的学习可以分为以下步骤:1。
假的鱼
·
2018-05-18 22:24
大数据
数据挖掘
spark
数据
Hadoop
大数据学习
七:yum源替换(centos7)
1、查看当前系统版本#lsb_release-a若出现commandnotfound的错误,则#yum-yinstallredhat-lsb2、设置网卡eth0,centos7中/etc/sysconfig/network-scripts中没有ifcfg-eth0,只有ifcfg-ens33#cd/etc/sysconfig/network-scripts#mvifcfg-ens33ifcfg-e
RacyFu
·
2018-05-18 00:48
大数据学习
笔记1000条
Zookeeper用于集群主备切换。YARN让集群具备更好的扩展性。Spark没有存储能力。Spark的Master负责集群的资源管理,Slave用于执行计算任务。Hadoop从2.x开始,把存储和计算分离开来,形成两个相对独立的子集群:HDFS和YARN,MapReduce依附于YARN来运行。YARN可以为符合YARN编程接口需求的集群提供调度服务。YARN:ResourceManager一主
Alonzo95
·
2018-05-15 20:59
大数据学习
1——大数据及Hadoop概述
大数据及Hadoop概述一.大数据概述二.大数据与生活息息相关三.Hadoop概述四.Hadoop生态系统概述五.Hadoop发型版对比一.大数据概述二.大数据与生活息息相关大数据带来的革命性变革1)成本降低,能用pc机,就不会大型机或者高端存储设备。2)软件容错,硬件故障视为常态,通过软件来保证高可靠。3)简化分布式并行计算,无需控制节点同步和数据的交换。三.Hadoop概述adoop(大象)H
我爱圆溜溜
·
2018-05-15 09:33
hadoop
关于大数据相关的问答汇总,持续更新中~
答:1,Java编程技术Java编程技术是
大数据学习
的基础,Java是一种强类型语言,拥有极高的跨平台能力,可以编写桌面应用程序、Web应用程序、分布式系统和嵌入式系统应用程序等,是大数据工程师最喜欢的编程工具
琳达老师
·
2018-05-11 17:49
大数据
问题
持续更新
2018年最受欢迎的五大机器学习工具和五
大数据学习
工具
2018年将会是人工智能和机器学习快速发展的一年,有专家表示:相较之下Python比Java更加接地气,也自然而然地成为机器学习的首选语言在数据科学方面,Python的语法与数学语法最为接近,因此是数学家或经济学家等专业人士最容易理解和学习的语言。本文将罗列机器学习和数据科学应用程序中最有用的十大Python工具五大机器学习工具1、ShogunSHOGUN是一个机器学习工具箱,专注于支持向量机(S
琳达老师
·
2018-05-09 16:29
学习工具
2018
上一页
37
38
39
40
41
42
43
44
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他