ML&DL-大数据学习

大数据学习之路 --- Hive（数据仓库管理工具）

Hive用是一种用SQL语句来协助读写、管理存储在分布式存储系统上的大数据集的数据仓库软件。--->名词解释：Hive：通过把HDFS中的文件映射为一张张表，让开发人员可以通过sql以操作普通数据库的方式操作分布式系统中的数据文件，简单方便。Hive的几个特点：(1)Hive最大的特点是Hive通过类SQL来分析大数据，而避免了写MapReduceJava程序来分析数据，这样使得分析数据更容易。(
Mai_Noe·2020-06-22 01:47

大数据学习之路 --- Spark（内存计算框架）

Spark是基于内存计算的大数据并行计算框架。spark基于内存计算，提高了在大数据环境下数据处理的的实时性，同时保证了高容错性和高可伸缩性。--->Spark中有很多内容，本篇文章只讲其中的Sparkcore，Sparksql，Sparkstream。Sparkcore：RDD：RDD是ResilientDistributedDataset的简称。它是ApacheSpark的基本数据结构。它是一
Mai_Noe·2020-06-22 01:47

【大数据学习】VBox Ubuntu 14.04虚拟机安装

VitualBox版本:5.1.30Ubuntu版本：UbuntuKylin14.041.系统下载百度搜下即可，下载后缀为.iso的文件2.系统安装安装VBox时最好使用默认的安装路径，就是一直点下一步，不然可能会有其他错误在VBox里点新建选项输入虚拟机的名字，和选择对应的操作系统，输入Ubuntu开头的，VBox会自动帮你选择好，不对再选选择虚拟磁盘的存放位置，我D盘容量较大，我选择放在D盘创
FormatFa·2020-06-21 20:29

大数据开发工程师的成长之道

大数据学习是需要一个过程的，少年，加油！大数据真正火起来，是在2013年，该年被称为“大数据元年”。此前其实大数据已经真真实实的存在了，而那时还没有大数据(BigData)这一说辞。
云 祁·2020-06-21 17:30

大数据学习书籍

大数据火爆招聘中，高端的薪资待遇实在是让人欲罢不能，赶紧拿起书本，原来学习大数据才是正道。可是看到很多漫天大数据的书籍真的有些头疼了，不知道该从哪一本开始阅读。学习这种事，泛泛而读真的不如术业有专攻，而且还要循序渐进比较好，今天我将学习大数据的同学分为两类，推荐的书籍可以有一定差别的，想要学习大数据的同学可以酌情参考!学习大数据的小伙伴在小编看来总共分为两大类：一是本身就是计算机专业出身，有一定的
肖晓晓·2020-06-21 14:15

大数据学习——数据挖掘理论基础

本文学习来源于《数据挖掘理论与技术》（电子工业出版社）数据挖掘概述数据挖掘方法可以是基于数学理论的，也可以是非数学的；可以是演绎的，也可以是归纳的。从研究的历史看，它们是数据库、人工智能、数理统计、计算机科学以及其它方面的学者和工程技术人员，在数据挖掘的探讨性研究过程中创立的理论体系。1997年，Mannila对当时流行的数据挖掘的理论框架做出了综述。结合最新的研究成果，有下面一些重要的理论框架可
谢厂节_编程圈·2020-06-21 14:38

大数据学习路线图，重要的事情说三遍

目前，全球数据呈现爆发增长、海量集聚的特点。国家大力推动实施大数据发展战略，推进数据资源整合和开放共享，加快建设数字中国。大数据行业政策环境良好，发展机遇空前。目前，全球数据呈现爆发增长、海量集聚的特点。国家大力推动实施大数据发展战略，推进数据资源整合和开放共享，加快建设数字中国。大数据行业政策环境良好，发展机遇空前。目前，全球数据呈现爆发增长、海量集聚的特点。国家大力推动实施大数据发展战略，推进
金豆数据工程师·2020-06-21 13:05

大数据工程师面试题(附答案)

最近刚学了scala，并且就有scala版本的WordCount，刚好学以致用了一下：对大数据【数据分析，数据挖掘】概念都是模糊不清的，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习
金曜软件工程师·2020-06-21 12:57

大数据学习 - 平台环境部署（详细）

大数据学习--平台环境部署（详细）本文利用云服务器对大数据平台进行环境部署，包含：服务器使用、环境准备、Hadoop集群完全分布式安装、Zookeeper集群完全分布式安装、HBase完全分布式安装、Hive
汪鹏程·2020-06-21 12:37

30个常见的大数据面试题 让你的薪资提升一个等级

经历了水深火热的大数据学习，终于拨开云雾见天明了，但你离成功总是还差了一步，那就是拿到大数据工程师的Offer。
weixin_34284188·2020-06-21 11:21

写给初学大数据的你，从零开始学习大数据开发的完整学习路线

我自己整理的一份最新的大数据进阶资料和高级开发教程，大数据学习群：199加上【427】最后加上210就可以找到组织
weixin_34191845·2020-06-21 11:46

大数据学习之python语言能做什么？

很多学习大数据的朋友，尤其是学习数据分析的朋友，大部分选择从python入门，但很多人开始着手学习的时候，都不够全面了解python的作用，，帮助大家快速的了解到python的应用范围，帮助学习的小伙伴全面认识python1、传说中的WEB开发在国内，豆瓣一开始就使用Python作为web开发基础语言，知乎的整个架构也是基于Python语言，这使得web开发这块在国内发展的很不错。尽管目前Pyth
安靜@忧伤·2020-06-21 06:27

大数据工程师轻松拿年薪50W方法诀窍

我大数据从业者，建了一个大数据资源共享群593188212每天分享大数据学习资料和学
Arry85·2020-06-21 06:13

Kylin单机集成CDH

分享之前我还是要推荐下我自己创建的大数据学习资料分享群232840209，不管你是小白还是大牛
青春浪子·2020-06-21 04:29

大数据学习02之基于vbox 6.0搭建ubuntu 18.04伪分布式Hadoop 2.9.2集群

目录概要说明下载hadoop安装hadoop启动hadoop集群参考资料概要说明先看下效果HDFS管理界面Yarn管理界面在上一篇博客大数据学习01之基于vbox6.0搭建ubuntu18.04伪集群的基础上安装伪分布式
moble_xie·2020-06-21 03:04

大数据学习01之基于vbox 6.0搭建ubuntu 18.04伪集群

目录概要说明安装vbox安装虚拟机安装Ubuntu设置共享目录设置共享目录安装增强功能挂载目录设置静态ip安装JDKclone多个虚拟机设置虚拟机的主机名和静态ip配置ssh免密登录总结参考资料概要说明先看下效果mac上用vbox6.0搭建基于Ubuntu18.04的3台虚拟机，并在虚拟机上安装jdk，设置静态ip，各个虚拟机之间配置ssh免密登录等，windows大同小异。安装vbox网上下载，
moble_xie·2020-06-21 03:04

大数据学习03之hadoop第一个MR程序wordcount单词统计

目录概要说明新建hadoop客户端运行wordcount创建HDFS数据目录创建一个单词文件，并上传到HDFS运行wordcount程序参考资料概要说明wordcount运行以后在yarn上的job任务。新建hadoop客户端我们可以使用集群中任何一台机器作为客户端，这样来说有几个弊端，第一hadoop总是优先读写离自己最近的节点，然后同步到其他的节点，这样导致该节点的压力倍增，第二容易误删文件，
moble_xie·2020-06-21 03:04

大数据程序员平均薪资25k?

大数据程序员岗位薪资很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习qq群：45
小迪和夫人·2020-06-21 02:53

大数据学习之路（一）MapReduce

大数据学习任重而道远，需要学习的东西很多。比如语言，Java，Scala，python，shell，甚至需要C,C++，头大中。
菜鸟也有梦想啊·2020-06-21 01:24

【大数据】Hadoop大数据学习路线

Hadoop大数据学习路线作为目前主流的大数据处理技术，市场上很多公司的大数据业务都是基于Hadoop开展，而且对很多场景已经具有非常成熟的解决方案。
debimeng·2020-06-21 00:16

大数据学习笔记之HBase（三）：HBase API使用、HBase与Hive相关、HBase shell

文章目录二十、HBaseAPI的使用20.1、解压Maven离线仓库到指定目录20.2、新建Eclipse的MavenProject，添加pom.xml的dependency如下：20.3、编写HBaseAPI代码二十一、文件格式的说明21.1、tsv格式的文件：字段之间以制表符\t分割21.2、csv格式的文件：字段之间以逗号,分割二十二、HBase的MapReduce的调用22.1、查看HBa
Leesin Dong·2020-06-21 00:36

大数据学习笔记之HBase（六）：HBase表类型的设计、预分区、rowkey的设计技巧

文章目录三十八、HBase表类型的设计38.1、短宽38.2、高瘦38.3、短宽-高瘦的对比38.3.1、短宽38.3.2、高瘦三十九、HBase的预分区39.1、为何要预分区？39.2、如何预分区？39.3、如何设定预分区？39.3.1、手动指定预分区39.3.2、使用16进制算法生成预分区39.3.3、分区规则创建于文件中39.3.4、使用JavaAPI创建预分区四十、HBase的rowKey
Leesin Dong·2020-06-21 00:36

大数据学习的必备五大核心技术

大数据系统的技术庞大而复杂。基础技术包括数据采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等技术类别和不同的技术层次。首先，本文给出了一个通用的大数据处理框架，主要分为以下几个方面：数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。一、数据采集和预处理对于来自不同来源的数据，包括移动互联网数据、社交网络数据等，这些结构化和非结构化的海量数据是分散
congge0629·2020-06-21 00:43

大数据学习 flume

###################Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。Flume可以采集文件，socket数据包等各种形式源数据，又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多外部存储系统中一般的采集需求，通过对flume的简单配置即可实现Flume针对特殊场景也具备良好的自定义扩展能力，因此，flume可以适用于大部分的日常数据
chenzhai7583·2020-06-21 00:40

大数据学习之Flume——02Flume安装及配置文件

一.flume安装:将flume安装包解压并到指定目录flume-env.sh.template重命名为flume-env.shflume-env.sh文件中,配置JAVA_HOME的路径配置flume的环境变量验证:执行flume-ngversion:如果显示flume的版本信息,则说明flume就安装成功了二.单节点配置1.单节点的配置文件将配置信息写到node02节点的~/dirflume目
Jiang锋时刻·2020-06-21 00:58

大数据学习之Flume——01Flume基础介绍

一.Flume的简介1.Flume定义flume作为cloudera开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume初始的发行版本目前被统称为FlumeOG（originalgeneration），属于cloudera。但随着FLume功能的扩展，FlumeOG代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来，尤其是在FlumeOG的最后一个发行版本0.9.4.中，日志
Jiang锋时刻·2020-06-21 00:58

大数据学习路线（全学会可以拿到年薪36W）

科学记忆：学习路线：科目说明JUCJava5.0提供的java.util.concurrent线程池、异步IO和轻量级任务框架。提供可调的、灵活的线程池JVM深入理解JVM虚拟机，堆，栈，类加载器，调优Docker核心技术在Docker容器下进行日常软件的安装开发和工程部署，最终可以通过docker和阿里云平台完成工作的协同和发布。Linux系统Linux老手更全面、系统的学习到更多技术细节She
P6级程序员·2020-06-20 22:44

大数据学习笔记之Spark：Spark基础解析

第1章Spark概述spark的产生背景spark是如何产生的，这要先送大数据说起，大数据是如何产生的？Google就是处理大数据的，网页和网页之间有很多的关联关系，为了处理排序啊这些算法，所以Google就发明了，Google就发布了三个论文，基于这三个论文的开源，实现了Hadoop、Hdfs、MapReduce、Hbase等，但是感觉好像每次MapReduce只能处理一次数据，而且开始跑map
BAO7988·2020-06-20 21:11

你要的大数据/Python学习路线图来了！

继Java、H5前端之后，大数据学习路线图、Python学习路线图也来了！学习路线图2018年，大数据、Python人工智能刷了全球的屏：高薪就业、人才被抢的新闻报道频频刷屏。
金豆数据工程师·2020-06-20 21:19

视频教程-Flink CEP兵书-大数据

侯勇蛟¥99.00立即订阅订阅后：请点击此处观看视频课程视频教程-FlinkCEP兵书-大数据学习有效期：永久观看学习时长：224分钟学习计划：4天难度：中「口碑讲师带队学习，让你的问题不过夜」讲师姓名
????·2020-06-20 21:07

python自学路线——大数据方向

大数据方向什么是大数据大数据学习大纲获取大数据数据分析学习路线第一步：了解大数据的基本概念第二步：学习获取大数据第三步：
James Bin·2020-06-20 21:30

分析：对于一个没有学历的人, 自学python有前途吗? 什么项目通过面试官面试?

关于大数据的发展前景大数据学习交流群：532218147大数据并不是一种概念，而是一种方法论，一句话概括，就是通过分析和挖掘
燕大侠v·2020-06-20 21:42

搭建Hadoop HA 高可用集群——四台虚拟机（CentOS）

  刚经过一个阶段的大数据学习，详细的记录了一下搭建HadoopHA高可用集群的全过程━(｀∀´)ノ亻找bug的过程好心酸啊，但学习到新知识还是感觉好开心hhhh  你是真的真的真的真的真的很不错!
Luck_Vera·2020-06-17 20:56

大数据学习整理篇（一）windows下R以及RStudio乱码问题以及Ubuntu 16.04下mahout 0.14.0 成功运行（成功版）

1.RStudio代码保存设置为UTF-82.打开Utf-8的文本验证下3.使用R语言的read.csv，要加上文本编码格式，比如：listingmahoutseqdirectory-i输入目录-o输出目录-w（进行验证，这个是举例子，后面我会详细介绍具体用法）
我还要去追逐我的梦·2020-06-17 18:51

大数据学习第二章：Hadoop(未完待续。。。)

Hadoop框架1.Hadoop是什么1.1Hadoop发展历史1.2Hadoop的发行版本1.3Hadoop的优缺点2.Hadoop架构组成2.1MapReduce架构原理2.1.1YARN架构原理3.大数据技术生态体系1.Hadoop是什么Hadoop是一个由Apache基金会所开发的分布式系统基础架构，用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存
Java小后生·2020-06-14 18:54

视频教程-大数据技术-大数据

Java从入门到进阶¥1029.00立即订阅扫码下载「CSDN程序员学院APP」，1000+技术好课免费看APP订阅课程，领取优惠，最少立减5元↓↓↓订阅后：请点击此处观看视频课程视频教程-大数据技术-大数据学习有效期
weixin_26947451·2020-05-28 10:00

大数据学习路线

大数据学习路线：首先我要了解大数据处理流程：第一步：数据收集第二部：数据存储第三步：数据分析第四步：数据应用数据收集大数据处理的第一步是数据的收集。
不像话·2020-05-19 12:00

大数据学习之flume

一.flume概述1.概述:Flume是一种分布式，可靠且可用的服务，用于有效地收集，聚合和移动大量日志数据。它具有基于流数据流的简单灵活的架构。它具有可靠的可靠性机制和许多故障转移和恢复机制，具有强大的容错性。它使用简单的可扩展数据模型，允许在线分析应用程序。2.大数据架构数据采集(爬虫\日志数据\flume)数据存储(hdfs/hive/hbase(nosql))数据计算(mapreduce/
Movle·2020-05-09 09:59

大数据学习（一）Linux 环境准备

最近学习大数据，看到了同学发的一个学习规划的博客，感觉写的不错的，决定按照他的思路学习一下。博客地址>>>http://blog.csdn.net/yuexianchang/article/details/52468291讲道理应该先研究mysql集群的，但是mysql集群没有搭起来（玛德），所以先研究hadoop集群把，mysql的坑以后会补起来(看心情)。下面是正题：一.安装vmware,安装
榆次丶笑笑生·2020-04-13 16:26

今日剽悍

【0808今日剽悍】7425-溪山【目标】1、能量按钮2、今日剽悍3、得到APP4、剽悍晨读5、大数据学习【效果】全部完成【感想】今天早上五点钟起床，早上虽然感觉有些困，但是上班了感觉还好。
溪山土壤肥料贵阳·2020-04-12 05:51

大数据学习心得分享

有不少人对于应该如何学习大数据充满了疑惑和顾虑，今天就为大家分享一下陈同学的大数据学习心得，希望能对大家有一些帮助。
baliy·2020-04-11 01:20

大数据学习环境准备[2] - 安装CentOS 7

[email protected]:50写在前面的废话上一篇中已经创建好了虚拟机,那么现在就开始装CentOS,话不多说,撸袖子开干!另外,再说明一下,在后面的文章中,VMWare中的客户机我就简称为"虚拟机",而我们自己的宿主机(PC或笔记本)就简称为"主机".开始在虚拟机中安装CentOS7图解1.在VMWare中切换到我们已创建好的虚拟机,点击"开启此虚拟机"2.接
qdice007·2020-04-09 21:15

大数据领域三个大的技术方向

大数据领域三个大的技术方向：1、Hadoop大数据开发方向2、数据挖掘、数据分析&机器学习方向3、大数据运维&云计算方向大数据学习什么Python：Python的排名从去年开始就借助人工智能持续上升，现在它已经成为了语言排行第一名
烽火程序猿·2020-04-09 16:33

大数据学习 第一季度小结

自从加入猴子数据群，自学大数据分析一来，几乎正好三个月，在此小结一下。学习目的：主要有三个方向：1.数据分析，资源主要是猴子课程和《R语言实战》。目前学会了简单的数据分析编程，希望在此基础上，深入的分析本行专业上表面上无甚关联的本质联系。输出：R语言练习：各城市间的房价有关系吗？2.数据展现，资源主要是炼数成金的数据展现和ggplot课程，另外写了几篇图形笔记。输出：R语言：表格的气泡图转化——以
只是不在意·2020-04-08 09:00

大数据学习笔记——Java篇之集合框架(ArrayList)

既可以存放基本数据类型又可以存放引用数据类型3.存放进数组的必须是相同类型的数据VS集合类：1.长度是可变的2.只能存放对象的引用3.存放进集合的可以是不同的数据类型3.集合类常用API源码分析在之后的大数据学习中
终极菜鸡·2020-04-07 20:00

(四)大数据学习之Hadoop环境搭建

1.hadoop目录结构Hadoop目录结构2.Hadoop安装准备工作：(1)安装好linux操作系统(2)关闭防火墙(3)在linux上安装JDK3.安装Hadoop(1)将Hadoop安装包拷贝到/opt/software文件目录下(2)将Hadoop安装包解压到/opt/module文件目录下命令为：tar-zxvfhadoop-2.8.4.tar.gz-C/opt/module//将ha
Movle·2020-04-05 21:12

大数据学习——大数据薪资高到没对手，本文为您专供学习资料！

一、作为基础来学习和巩固的知识有：基础中的基础：线性代数，概率论核心知识：数理统计、预测模型、机器学习计算机：数学软件：强大矩阵运算和优化功能的matlab，专而精的mathematica。语言：python（很流行的科学语言，潜力也很大，ipython这样交互式环境十分有利），fortran（强大的计算语言，充分优化的现成代码），R（相比于matlab，java，c，R是个高富帅）可视化这是数据
ItStar·2020-04-05 15:49

Apache Hadoop的体系结构---2

有想领取更多关于大数据学习资料的同学可以加我微信：tzbj2019暗号：铁汁接昨天的1.7机架感知（Rackawareness）通常，大型Hadoop集群是以机架的形式来组织的，同一个机架上不同节点间的网络状况比不同机架之间的更为理想
ItStar·2020-04-04 05:43

关于大数据学习课程的疑问，让你的选择更明确。

现在大数据行业如此火爆，国家和企业都需要发展大数据技术，但是人才高度稀缺，企业用人难！而大学生们有出现这样的问题：就业难。今年将近有700万的应届毕业生，有的岗位可能面临着几百个人竞争的情况，不光是大学生，连一些将被社会淘汰行业人员想要转行也不是件容易的事情？科多大数据带你来看：其实，很大一部分原因还是因为这些人既不愿意做辛苦的工作，又不愿意工资低，或者是因为没有选择一个前景好的行业。在这样的情况
大数据在说话·2020-04-03 23:15

大数据学习路线

一，题记要说当下IT行业什么最火？ABC无出其右。所谓ABC者，AI+BigData+Cloud也，即人工智能、大数据和云计算(云平台)。每个领域目前都有行业领袖在引领前行，今天我们来讨论下大数据BigData这个方向。二，大数据里面的角色角色一：大数据工程大数据工程需要解决数据的定义、收集、计算与保存的工作，因此大数据工程师们在设计和部署这样的系统时首要考虑的是数据高可用的问题，即大数据工程系统
RogerHello·2020-04-03 12:25
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他