ML&DL-大数据学习

大数据和云计算技术周报（第66期)

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学，在技
大数据和云计算技术·2018-08-27 07:15

大数据学习路线+Java转行大数据最新最全的必备第一手资料

学习路线：（一）Linux理论（Linux基础Linux-shell编程高并发:lvs负载均衡高可用&反向代理）（二）Hadoop理论（hadoop-hdfs理论hadoop-hdfs集群搭建hadoop-hdfs2.x&apihadoop-MR理论hadoop-MR开发&源码分析hadoop-MR源码分析hadoop-MR开发案例hadoop-MR开发案例）（三）Hive理论（Hive介绍以及安
weixin--yxxy1919·2018-08-26 09:29

2018最新大数据学习路线从入门到精通

第一阶段：Linux理论，，，需要大数据学习视频资料可以关注我（1）Linux基础；（2）Linux-shell编程；（3）高
大数据群722680258·2018-08-25 23:16

大数据学习之路44-hbase结构原理快速理解

HBASE数据库介绍：hbase是bigtable的开源java版本，是建立在hdfs之上，提供高可靠性，高性能，列存储，可伸缩，实时读写nosql的分布式数据库系统，它介于nosql和RDBMS之间，仅能通过主键(rowkey)和主键的range来检索数据，仅支持单行事务（可通过hive支持来实现多表join等复杂操作）主要用来存储结构化和半结构化的松散数据HBASE查询数据功能很简单，不支持j
爱米酱·2018-08-23 15:59

大数据学习之路36-hive的自定义函数示例，复杂数据解析

假如说我们有这样的数据：1,zhangsan:18:beijing|male|it,20002,lisi:28:beijing|female|finance,40003,wangwu:38:shanghai|male|project,20000假如这些数据由某个应用系统产生在hdfs的如下目录中：/log/data/2018-08-21/需要放进hive中去做数据挖掘分析可以先建一张外部表，跟原始
爱米酱·2018-08-21 16:58

大数据学习之路35-hive的join

selectjoininnerjoinleftjoin==leftouterjoinrightjoin==rightouterjoinfullouterjoin我们先来创建数据和表：内连接（内连接的本质其实是取笛卡尔集）：selecta.*,b.*fromt_aajoint_bbona.id=b.id;左外连接：selecta.*,b.*fromt_aaleftjoint_bbona.id=b.i
爱米酱·2018-08-21 11:13

大数据学习之路34-hive的DML语法，加载数据，load,insert，多重插入

DML:1.加载数据到表中：loadinsert插入单条数据：insertintotablet_seqvalues('10','xx','beijing',28);这条语句的本质是，会执行一个mapreduce，将这条数据生成一个文件。文件的格式是这个表所要求的格式。我们在hive中也可以访问hdfs:dfs-ls/;这时候我们会发现，这时候查询的执行速度会比在linux终端执行的时候快很多。这是
爱米酱·2018-08-21 09:54

279.11G 大数据学习资料分享

阅读更多上篇文章分享的是Hadoop学习资料，还没看见的同学，点击这里查看->大数据之Hadoop学习教程分享为什么是279.11G？小编本来打算分开分享的，想了下太麻烦了，还是一次性分享的比较好，所以看了下整理的大数据资料，除了电子版外，总共279.11G，所以后面很长一段时间会不考虑分享大数据资料，需要的同学抓紧了。总共是几份教程呢？总共6份教程这6份教程并不都是纯粹的讲解大数据具体知识点的，
code小生·2018-08-20 22:00

279.11G 大数据学习资料分享

阅读更多上篇文章分享的是Hadoop学习资料，还没看见的同学，点击这里查看->大数据之Hadoop学习教程分享为什么是279.11G？小编本来打算分开分享的，想了下太麻烦了，还是一次性分享的比较好，所以看了下整理的大数据资料，除了电子版外，总共279.11G，所以后面很长一段时间会不考虑分享大数据资料，需要的同学抓紧了。总共是几份教程呢？总共6份教程这6份教程并不都是纯粹的讲解大数据具体知识点的，
code小生·2018-08-20 22:00

大数据学习之路32-hive的DDL语法，修改表名，列定义

1.重命名表：altertable原表名renameto新表名;2.增加更新列：altertabletable_nameadd|replacecolumns(col_namedata_type);//add代表新增加一个字段，字段位置在所有列后面（partition列前）replace则表示替换表中所有字段。如果这个表中原来有三个字段的数据，如果替换成了两个字段，则查询的时候只会显示两个字段的数据
爱米酱·2018-08-20 21:04

大数据学习之路31-hive的DDL语法，新增，删除分区，向分区中导入数据

1.添加分区我们来看看当前的分区表：这个分区是前面我们直接将数据导入进去的：loaddatalocalinpath'/root/web.log.1'intotablet_daypartition(day='2018-08-20');接下来我们直接创建一个分区：然后我们可以向新增的分区表中导入数据：使用load的方式：loaddatalocalinpath'/root/web.log.2'intot
爱米酱·2018-08-20 20:38

大数据学习之路30-hive的DDL语法，文件存储格式

1.hive的存储文件格式hive支持很多种文件格式：SEQUENCEFILE|TEXTFILE|PARQUETFILE|RCFILE万一有不支持的，我们只要在lib中加一个能解析这种文件的jar包就可以了。我们默认存储的就是TEXTFILE.下面我们来看一下SEQUENCEFILE的情况（在sequencefile中没有行的概念,所以和之前的写法不一样）：createtablet_seq(idi
爱米酱·2018-08-20 19:28

大数据学习之路29-hive的DDL语法，数据的导入导出

导入数据：1.将hive运行所在机器的本地磁盘的文件导入表中loaddatalocalinpath'/root/web.log.1'into[overwrite]tablet_1;into的意思是追加，overwrite的意思是覆盖。在hive的表中没有主键这个概念。2.将hdfs中的文件导入表中loaddatainpath'/user.data.2'intotablet_1;不加local关键字
爱米酱·2018-08-20 19:31

Java开发者想尝试转行大数据，学习方向建议？

本文分三大方面详细的讲如何学大数据：大数据方向工作介绍大数据工程师的技能要求大数据学习路径一.大数据方向
大数据客栈i·2018-08-20 16:53

零基础学习大数据的几个步骤

大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。
大数据开发交流·2018-08-20 11:00

大数据学习之路28-hive分区表partition用法及意义

分区关键字partitionedby分区就是表目录中的一个子目录，我们的数据可以分子目录存放。查询的时候也可以按子目录查询createtablet_day(ipstring,urlstring,staylongint)partitionedby(daystring)rowformatdelimitedfieldsterminatedby',';我们先造一下数据（赋值的快捷键：yy+p）然后再复制一
爱米酱·2018-08-20 10:46

大数据学习之路26-hive的基本建表语句，内外部表的区别，删除表导入数据

1.建库hive中有一个默认的库：库名：default库目录：hdfs://marshal:9000/user/hive/warehouse新建库：createdatabasedb_order;我们的数据库在DBS中可以看到：库建好后，在hdfs中会生成一个库目录，目录名为库名.db2.基本建表语句usedb_order;createtablet_order(idstring,create_tim
爱米酱·2018-08-19 17:01

学习大数据需要掌握什么知识

推荐一个大数据学习群119599574晚上20:10都有一节【免费的】大数据直播课程，专注大数据分析方法,大数据编程，大数据仓库，大数据案例，人工智能,数据挖掘都是纯干货分享，下面我们就从学习的要求到学习的知识进行讲解需要学习的知识
hellocsz·2018-08-18 11:51

大数据学习系列之四 ----- Hadoop+Hive环境搭建图文详解(单机)

引言在大数据学习系列之一-----Hadoop环境搭建(单机)成功的搭建了Hadoop的环境，在大数据学习系列之二-----HBa
虚无境·2018-08-18 10:36

零基础大数据学习路线图？

大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。
weixin_41780944·2018-08-17 11:37

从零开始系统规划大数据学习之路

大数据的领域非常广泛，往往使想要开始学习大数据及相关技术的人望而生畏。大数据技术的种类众多，这同样使得初学者难以选择从何处下手。我写此文是给大家学习大数据提供一个思路以及在大数据产业领域找到工作指路明灯，提供帮助。1.如何开始？2.在大数据领域有哪些职位需求？3.如何成为一名大数据工程师？你需要了解的系统和结构学习去设计解决方案并且学习相关技术对大数据感兴趣的，想转行大数据的，想学习项目经验的，欢
首席数据师·2018-08-16 21:26

大数据学习教程

Hadoop生态Hadoop相关内容SparkSpark系列教程HiveHive快速入门ElasticSearchElasticSearch专栏ScalaScala语言进阶
采风JS·2018-08-14 16:20

大数据之 Hadoop 学习教程分享

阅读更多接下来分享大数据学习资料，今天的主题是Hadoop，分为3份教程，各不相关联，读者请自己选择来学习。
code小生·2018-08-13 20:00

大数据之 Hadoop 学习教程分享

阅读更多接下来分享大数据学习资料，今天的主题是Hadoop，分为3份教程，各不相关联，读者请自己选择来学习。
code小生·2018-08-13 20:00

大数据学习一般都需要学习哪些知识

荐一个大数据学习群119599574每天晚上20:10都有一节【免费的】大数据直播课程，专注大数据分析方法,大数据编程，大数据仓库，大数据案例，人工智能,数据
weixin_41780944·2018-08-12 10:33

spark学习笔记【一】- 搭建spark开发环境【原创】

阅读更多在去年写完大数据学习笔记（七）-运行spark脚本【原创】之后，由于工作比较忙，且大数据在负责的项目中一时用不上，所以没有继续学习。这一篇是新的开始，主要学习使用spark的进行开发。
zhenggm·2018-08-07 17:00

spark学习笔记【一】- 搭建spark开发环境【原创】

阅读更多在去年写完大数据学习笔记（七）-运行spark脚本【原创】之后，由于工作比较忙，且大数据在负责的项目中一时用不上，所以没有继续学习。这一篇是新的开始，主要学习使用spark的进行开发。
zhenggm·2018-08-07 17:00

spark学习笔记【一】- 搭建spark开发环境【原创】

阅读更多在去年写完大数据学习笔记（七）-运行spark脚本【原创】之后，由于工作比较忙，且大数据在负责的项目中一时用不上，所以没有继续学习。这一篇是新的开始，主要学习使用spark的进行开发。
zhenggm·2018-08-07 17:00

一些大数据学习书籍pdf

由于网上太多资源都因为个人利益上传让其他人下载，所以本人将自己所想看的一些书籍pdf文件收集并发出来共享。分享出来的链接含有以下书籍pdf：2018.11新增《Kylin权威指南》《Apache_Flume_Distributed_Log_Collection_For_Hadoop》《Hadoop权威指南.大数据的存储与分析第4版》《Hadoop权威指南第3版》《HBase权威指南(中文版)》《H
Chenway丶·2018-08-05 11:21

分享要面试的你一套大数据技术Hadoop面试题（附答案）

关注作者：需要大数据学习视频资料，其他文章可以找到我a)SecondaryNameNodeb)D
大数据群722680258·2018-08-03 11:45

分享：6个公司的大数据岗位的面试经验

1.公司:国内知名电信运营商，其下面的大数据研究院，面两轮：关注作者：需要大数据学习视频资料，其他文章可以找到我hadoop、HBase的问题，JAVA基础，JVM内存分配小
大数据群722680258·2018-08-03 11:32

如何学习大数据?

大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。
lmseo5hy·2018-08-01 18:39

大数据技术学习，数据科学领域你不应错过的 TOP 15 个社区

近期越来越多的朋友开始加入大数据行业，很多还未开始进行大数据开发培训的朋友不知道大数据学习从何下手，那么和加米谷大数据一起来通过前辈学习经验吧（交流群：805017805）在数据科学领域，我们带来了下面这张数据科学和机器学习社区的清单
iteye_18813·2018-08-01 14:22

大数据学习路线推荐

转自：https://www.cnblogs.com/zlslch/p/5448857.html1Java基础：视频方面：推荐《毕向东JAVA基础视频教程》。学习hadoop不需要过度的深入，java学习到javase，在Java虚拟机的内存管理、以及多线程、线程池、设计模式、并行化多多理解实践即可。书籍方面：推荐李兴华的《java开发实战经典》2Linux基础：视频方面：（1）马哥的高薪Linu
your_blue_sky·2018-08-01 11:25

成都0基础大数据培训学习：Linux&Maven基础知识

目前大多数的机构，对于大数据学习者要求必须是大专学历以上，而且大专学历还要求是计算机相关专业的，如果是本科及本科以上的，则对专业要求适当的放宽。同时大数据分为两大方向：大数据开发和大数据分析。
iteye_18813·2018-07-31 16:12

大数据学习框架及指南

Hadoop生态圈一，采集，数据从哪里来？主要包括flume等；一，存储，海量的数据怎样有效的存储？主要包括hdfs、Kafka；二，计算，海量的数据怎样快速计算？主要包括MapReduce、Spark、storm等；三，查询，海量数据怎样快速查询？主要为Nosql和Olap，Nosql主要包括Hbase、Cassandra等，其中olap包括kylin、impla等，其中Nosql主要解决随机查
开开_王子·2018-07-28 14:40

入门大数据，需要学习哪些基础知识

推荐一个大数据学习群119599574晚上20:10都有一节【免费的】大数据直播课程，专注大数据分析方法,大数据编程，大数据仓库，大数据案例，人工智能,数据挖掘都是纯干货分享，21世纪前十年则为成熟期，
weixin_41780944·2018-07-24 10:57

大数据学习（五）：在MapReduce中使用压缩

要想压缩MapReduec作业的输出，应在作业配置过程中将mapreduce.output.fileOutputformat.compress属性设置为true,将，apre-duce.output.fileoutputformat.compress.codec属性设置为打算压缩的压缩coec的类名。另一种方案是在FileOutputFormat中使用更便捷的方法设置这些属性。packagecn.
acm160920007·2018-07-23 20:15

（转载）大数据学习路线大数据学习路线

一、背景介绍本人目前是一名大数据工程师，项目数据50T，日均数据增长20G左右，个人是从Java后端开发，经过3个月的业余自学成功转型大数据工程师。二、大数据介绍大数据本质也是数据，但是又有了新的特征，包括数据来源广、数据格式多样化（结构化数据、非结构化数据、Excel文件、文本文件等）、数据量大（最少也是TB级别的、甚至可能是PB级别）、数据增长速度快等。针对以上主要的4个特征我们需要考虑以下问
南波湾凌晨4点的太阳·2018-07-22 09:46

大数据学习资源最全版本（收藏）

资源列表：关系数据库管理系统（RDBMS）框架分布式编程分布式文件系统文件数据模型Key-Map数据模型键-值数据模型图形数据模型NewSQL数据库列式数据库时间序列数据库类SQL处理数据摄取服务编程调度机器学习基准测试安全性系统部署应用程序搜索引擎与框架MySQL的分支和演化PostgreSQL的分支和演化Memcached的分支和演化嵌入式数据库商业智能数据可视化物联网和传感器文章论文视频有一
fenghuo9527·2018-07-20 17:08

大数据学习路线

前言：一、背景介绍二、大数据介绍正文：一、大数据相关的工作介绍二、大数据工程师的技能要求三、大数据学习规划四、持续学习资源推荐（书籍，博客，网站）五、项目案例分析（批处理+实时处理）前言一、背景介绍本人目前是一名大数据工程师
陈明一·2018-07-20 14:46

大数据学习之路（二） 搭建zookeeper环境

一、下载zookeeper去官网下载zookeeper，地址http://mirror.bit.edu.cn/apache/zookeeper/我下载的是zookeeper-3.4.10.tar.gz二、解压压缩包将zookeeper-3.4.10.tar.gz上传至虚机/usr/local目录进入/usr/local目录，执行tar-zxvfzookeeper-3.4.10.tar.gz将目录名
zsy_li·2018-07-16 16:18

14.4 Spark-SQL基于Cassandra数据分析编程实例

14.4Spark-SQL基于Cassandra数据分析编程实例“卜算子·大数据”一个开源、成体系的大数据学习教程。
王小雷-多面手·2018-07-15 22:39

14.3 Spark-SQL基于PostgreSQL数据分析编程实例

14.3Spark-SQL基于PostgreSQL数据分析编程实例“卜算子·大数据”一个开源、成体系的大数据学习教程。
王小雷-多面手·2018-07-15 22:35

14.1 Apache Spark 简介快速入门

14.1ApacheSpark简介快速入门“卜算子·大数据”一个开源、成体系的大数据学习教程。——每周日更新本节主要内容：速度简单易用Spark架构到处运行多种数据源14.1.1速度百倍的运行速度。
王小雷-多面手·2018-07-15 22:00

12.6 Cassandra开启远程连接

12.6Cassandra开启远程连接“卜算子·大数据”一个开源、成体系的大数据学习教程。
王小雷-多面手·2018-07-15 21:01

12.5 Cassandra安全配置--密码认证

12.5Cassandra安全配置–密码认证“卜算子·大数据”一个开源、成体系的大数据学习教程。
王小雷-多面手·2018-07-15 21:39

大数据经典学习路线（及供参考）

高可靠等集群相关概念，搭建互联网高并发、高可靠的服务架构；学完此阶段可解决的现实问题：搭建负载均衡、高可靠的服务器集群，可以增大网站的并发访问量，保证服务不间断地对外服务；分享之前我还是要推荐下我自己创建的大数据学习交流
编程南风·2018-07-13 15:04

HBase官方文档 之 Region的相关知识

更多内容参考——我的大数据学习之路Region在HBase中的角色Table(HBase表)Region(Region)Store(每个Region的每个列族独立存储)Me
xingoo·2018-07-12 18:00

想学大数据发展的小伙伴注意了，这十大点你清楚吗

分享之前我还是要推荐下我自己创建的大数据学习交流Qun:710219868进Qun聊邀请码填写南风（必填）我就知道是你了一、首先要搞清楚一个概念，什么是大数据。大数据又称巨量资料，就是数据量大、来源
编程南风·2018-07-12 16:46
上一页 36 37 38 39 40 41 42 43 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他