ML&DL-大数据学习

大数据学习笔记——Linux基本知识及指令(理论部分)

Linux学习笔记整理上一篇博客中，我们详细地整理了如何从0部署一套Linux操作系统，那么这一篇就承接上篇文章，我们仔细地把Linux的一些基础知识以及常用指令(包括一小部分高级命令)做一个梳理，好了，现在开始吧！1.Linux介绍在介绍Linux之前，先要介绍一下Unix操作系统，说到两者之间的关系，"Unix是Linux的父亲"这个说法更为恰当，Unix是作为一款商业软件而存在的，主要运行在
终极菜鸡·2019-11-03 22:00

工程师及数据科学家的大数据学习路径

原文地址：BigDataLearningPathforallEngineersandDataScientistsoutthere介绍大数据领域十分庞大，对于任何开始学习大数据及其相关技术的人来说都是一个相当艰巨的任务。大数据技术繁多而使你不知从何处开始。这是我写这篇文章的原因。本文为您提供了开始旅程学习大数据的指导途径，并将帮助您在大数据行业获得一份工作。我们面临的最大挑战是根据我们的兴趣和技能来
payne_pf·2019-11-03 10:59

大数据学习路线（完整详细版）

java(Javase,javaweb)Linux(shell,高并发架构,lucene,solr)Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeeper,flume)机器学习(R,mahout)Storm(Storm,kafka,redis)Spark(scala,spark,sparkcore,sparksql,sparkstr
花半唐·2019-11-03 03:15

如何做好一场直播？

几百个关注比起大v来一点不多，但是这毕竟是大数据学习，涉及到R，python，统计
猴子聊人物·2019-11-02 19:23

大数据学习笔记——Linux完整部署篇(实操部分)

Linux环境搭建完整操作流程(包含mysql的安装步骤)从现在开始，就正式进入到大数据学习的前置工作了，即Linux的学习以及安装，作为运行大数据框架的基础环境，Linux操作系统的重要性自然不言而喻
终极菜鸡·2019-11-02 15:00

大数据学习之Hive进阶

Hive不支持传统数据库中insert插入操作，可通过load语句和sqoop进行数据的导入。数据的导入使用load语句执行数据的导入使用load语句-语法：loaddata[local]inpath‘filepath’[overwrite]intotabletablename[partition(partcol1=val1,partcol2=val2,“`)]例如：–将student01.txt
EnjoyCode12138·2019-11-02 10:05

年薪百万百度大数据架构师需要掌握什么技术

1.我们终将利用暗数据2.结构化与非结构化边界的消失3.CDO快速崛起4.量子计算进入公众视野，言归正题，我是大数据爱好，建一个资源共享群593188212，每天分享大数据学习资料和学习方分享下大数据架构师需要
阿福大数据·2019-11-02 06:06

大数据学习路线图 让你精准掌握大数据技术

互联网时代每个企业每天都要产生庞大的数据，对数据进行储存，对有效的数据进行挖掘分析并应用需要依赖于大数据开发，千锋大数据开发课程采用真实商业数据源并融合云计算+机器学习，让学员有实力入职一线互联网企业在这里还是要推荐下我自己建的大数据学习交流群
大数据01·2019-11-02 04:37

大数据学习：零基础大数据入门该看哪些书？

现在有很多朋友对大数据行业心向往之，却苦于不知道该如何下手。作为一个零基础大数据入门学习者该看哪些书？今天做了一些整理作为参考，希望可以帮助到那些对大数据感兴趣的同学。1.大数据工程师在互联网公司广泛招聘，偏平台业务方向，ETL和OLTP等，主要是基于Hadoop技术栈来处理大数据，算法要求不是特别高。经典图书推荐：《Hadoop权威指南》《Hive编程指南》《Hbase权威指南》《大数据技术全解
心在远方·2019-10-31 15:41

大数据技术的发展，实现教育教学整体把握

在这里还是要推荐下我自己建的大数据学习交流群:19942721
大数据01·2019-10-31 05:41

迄今为止最有效率的春节

基本按照计划，完成甚至部分超越了大数据学习的阶段目标。父母是老人家，习惯白天看电视，我家对面
只是不在意·2019-10-31 01:47

大数据学习：零基础大数据入门该看哪些书？

现在有很多朋友对大数据行业心向往之，却苦于不知道该如何下手。作为一个零基础大数据入门学习者该看哪些书？今天做了一些整理作为参考，希望可以帮助到那些对大数据感兴趣的同学。大数据工程师在互联网公司广泛招聘，偏平台业务方向，ETL和OLTP等，主要是基于Hadoop技术栈来处理大数据，算法要求不是特别高。经典图书推荐：《Hadoop权威指南》《Hive编程指南》《Hbase权威指南》《大数据技术全解》、
a大数据·2019-10-30 14:59

大数据学习笔记——Java篇之网络编程基础

Java网络编程学习笔记1.网络编程基础知识1.1网络分层图网络分层分为两种模型：OSI模型以及TCP/IP网络模型，前者模型分为7层，是一个理论的，参考的模型；后者为实际应用的模型，具体对应关系见下图：1.2网络编程三要素之IP地址目前的版本是ipv4，采用的是点分十进制的表示方式(dotted-decimalnotation)，一共4位，每一位表示一个字节，因为IP地址是没有负数的，因此表数范
终极菜鸡·2019-10-27 22:00

大数据学习笔记——Java篇之IO

IO学习笔记整理1.File类1.1File对象的三种创建方式：File对象是一个抽象的概念，只有被创建出来之后，文件或文件夹才会真正存在注意：File对象想要创建成功，它的目录必须存在！importjava.io.File;/*演示三种创建File对象的方式*/publicclassFileDemo{publicstaticvoidmain(String[]args)throwsExceptio
终极菜鸡·2019-10-25 17:00

大数据导论

与大数据的区别(参考:附件资料\JavaEE大数据区别.txt)01)javaEE业务开发(品优购电商)电商系统架构.png02)大数据的体系说明(抖音推荐系统电商精准推荐系统)大数据架构处理流程.jpg02)大数据学习的建议
贾江浦·2019-10-23 19:00

大数据学习笔记——Java篇之集合框架(ArrayList)

既可以存放基本数据类型又可以存放引用数据类型3.存放进数组的必须是相同类型的数据VS集合类：1.长度是可变的2.只能存放对象的引用3.存放进集合的可以是不同的数据类型3.集合类常用API源码分析在之后的大数据学习中
终极菜鸡·2019-10-20 17:00

大数据学习之三 HDFS API的简单使用

HDFSAPI的简单使用需要配置的pom.XML文件需要在****中添加如下内容org.apache.hadoophadoop-common2.8.4org.apache.hadoophadoop-common2.8.4org.apache.hadoophadoop-hdfs2.8.4org.apache.hadoophadoop-client2.8.4org.projectlomboklombo
默默看你装碧·2019-10-20 15:30

大数据学习之二前置 安装jdk

安装jdk卸载现有jdk查询是否安装java软件rpm-qa|grepjava如果安装的版本低于1.7，卸载该jdkrpm-e软件包名字安装jdk在/opt目录下创建两个子文件mkdir/opt/modulemkdir/opt/software解压jdk到/opt/module目录下tar-zxvfjdk-8u144-linux-x64.tar.gz-C/opt/module/配置jdk环境变量代
默默看你装碧·2019-10-19 15:59

大数据学习之二 搭建伪分布式和完全分布式

搭建伪分布式和完全分布式搭建伪分布式1.在安装的Hadoop目录下的etc/hadoop路径下，找到core-site.xml文件2.在中写入下面的内容代码如下，需要根据自身linux情况进行更改主机名和hadoop版本号：fs.defaultFShdfs://主机名1:9000hadoop.tmp.dir/opt/module/hadoop-2.X.X/data/tmp3.打开hdfs-site
默默看你装碧·2019-10-19 14:06

大数据学习之Linux基础

大数据学习之Linux基础自定义Linux虚拟机安装网络配置1.node1网络配置2.通过快照克隆虚拟机3.配置其他三个节点虚拟机Linux简单命令shell命令运行原理图1.关机与重启2.判断命令的命令
时间静止不是简史·2019-10-15 11:10

大数据学习笔记——Java篇之基础知识

Java/计算机基础知识整理在进行知识梳理同时也是个人的第一篇技术博客之前，首先祝贺一下，经历了一年左右的学习，从完完全全的计算机小白，现在终于可以做一些产出了！可以说也是颇为感慨，个人认为，学习本身就应该是有方法论的，前人总结了不少比较好的学习方法(比如说费曼学习法，金字塔原理)，我们在进行好方法借鉴的同时，也不要忘了让整个学习过程形成一个闭环，我认为，向他人教学，或是定期将已有的知识进行一些梳
终极菜鸡·2019-10-15 00:00

[大数据学习研究] 错误排查，Hadoop集群部分DataNode不能启动

错误现象不知道什么原因，今天发现我的hadoop集群启动后datanode只有一台了，我的集群本来有三台的，怎么只剩一台了呢？用jps命令检查一下，发现果然有两台机器的DataNode没有启动。可能原因：1.我之前遇到过的问题，由于多次运行hdfsnamenode-format,造成了clusterId不一致，检查一下：进入到/opt/modules/hadoop-2.7.3/data/tmp/d
峻祁连·2019-10-15 00:00

HTML和css面试题：内容

1、常见的块级元素内联元素div-最常用的块级元素dl-和dt-dd搭配使用的块级元素form-交互表单h1-h6-大标题hr-水平分隔线ol–有序列表p-段落ul-无序列表fieldset-表单字段集
沫小新·2019-10-14 09:00

从大数据工程师那里知道的大数据学习方法

在这里还是要推荐下我自己建的大数据学习交流群
白金大数据学习·2019-10-12 14:00

大数据技术总监教您如何零基础学习大数据

以下就是一个大数据新手，想要学会大数据开发，需要学习的内容，大数据学习是一个持续的过程，只要用心学，没有学不会的东西哦！零基础想学习大数据？
juan11115·2019-10-11 12:08

大数据学习之一 Linux基础配置

Linux基础配置第一步：防火墙关闭显示防火墙systemctlstatusfirewalld.service显示结果如果是running，代表防火墙是开启状态，就需要关闭防火墙关闭防火墙systemctlstopfirewalld.service运行完后再执行一遍systemctlstatusfirewalld.service命令，当状态为dead时就代表防火墙已经关闭了禁用防火墙仅仅只是关闭掉
默默看你装碧·2019-10-10 21:36

好程序员大数据学习路线分享Scala系列之泛型

好程序员大数据学习路线分享Scala系列之泛型，带有一个或多个类型参数的类是泛型的。
wx5d42865f47214·2019-10-10 15:43

大数据学习遇到的坑（长期更新）

这个学期，我们开始接触大数据，并且开始学习hadoop和hbase。说实话，对于我这个学习能力不是很强的人来说真的是一个挑战，而且虚拟机上的linux系统也是不停的出问题，现在把这些问题总结一下，留个记录。首先说明一下，我的是在VMware上安装的Contest6.0，版本不同，操作的方法可能不同。1、虚拟机连接不上主机路由问题如下：java.net.NoRouteToHostException:
啾啾丶丶·2019-10-10 11:00

好程序员大数据学习路线分享Scala系列之对象

好程序员大数据学习路线为大家分享Scala系列之对象1.单例对象在Scala中没有静态方法和静态字段，但是可以使用object这个语法结构来达到同样的目的1.scala类似于Java中的工具类，可以用来存放工具函数和常量
wx5d42865f47214·2019-10-09 15:32

好程序员大数据学习路线分享Scala系列之对象

好程序员大数据学习路线为大家分享Scala系列之对象1.单例对象在Scala中没有静态方法和静态字段，但是可以使用object这个语法结构来达到同样的目的1.scala类似于Java中的工具类，可以用来存放工具函数和常量
wx5d42865f47214·2019-10-09 15:25

好程序员大数据学习路线分享Scala系列之对象

好程序员大数据学习路线为大家分享Scala系列之对象1.单例对象在Scala中没有静态方法和静态字段，但是可以使用object这个语法结构来达到同样的目的1.scala类似于Java中的工具类，可以用来存放工具函数和常量
wx5d42865f47214·2019-10-09 15:15

好程序员大数据学习路线分享什么是Hash表

好程序员大数据学习路线分享什么是Hash表，Hash，一般翻译做“散列”，也有直接音译为“哈希”的，它是基于快速存取的角度设计的，也是一种典型的“空间换时间”的做法。
好程序员IT·2019-09-27 17:20

好程序员大数据学习路线分享多线程学习笔记

好程序员大数据学习路线分享多线程学习笔记，默认情况下,主线程和垃圾回收线程都是由系统创建的,但是我们需要完成自己的功能----创建自己的线程对象。
好程序员IT·2019-09-27 16:12

大数据学习根据应用目标，主要可以划分为哪三个阶段？

1）大数据基础设施建设阶段：这个阶段的重点是把大数据存起来，管起来，能用起来，同时要考虑大数据平台和原有业务系统的互通联合问题。一句话，做好全局数据集成解决数据孤岛问题！要完成大数据基础设施系统建设开发，需要明确数据采集、存储和分析各层核心组件的选型和使用，搭建稳定的大数据集群，或选择私有云方案的服务集群，与生产系统并线运行，使待分析的历史数据和实时数据得以采集并源源不断流入大数据系统。这个阶段的
duozhishidai·2019-09-26 19:14

完整的大数据知识体系，大数据学习路线图

大数据所需学习的内容纷繁复杂，难度较大，有一个合理的大数据学习路线图帮忙理清思路就显得尤为必要。
duozhishidai·2019-09-26 19:27

好程序员大数据学习路线分享Lambda表达式

好程序员大数据学习路线分享Lambda表达式，一种简单的匿名内部类(但是只能对应只有一个抽象方法的接口-->函数式接口)-举例-无参基础运用```javainterfaceInterfaceA{publicvoidshow
好程序员IT·2019-09-26 14:03

大数据学习路线分享IO流学习笔记

大数据学习路线分享IO流学习笔记-IO流(input/output):作用:实现两个设备之间数据的传递设备:磁盘(硬盘),内存,键盘,文件,网络,控制台网络:当前主机之外的网上资源分类:根据操作的方式:
好程序员IT·2019-09-25 16:39

大数据学习路线分享大数据之Map接口

好程序员大数据学习路线分享大数据之Map接口，Collection:直接存储的是值.Map:本身是接口,存储的是键值对,一个元素就是一个键(key)值(value)对,key必须是唯一的,值随意,即可以重复
好程序员IT·2019-09-25 16:56

四种大数据分析方法 ，大数据学习入门必须掌握！

当刚涉足大数据挖掘分析领域的分析师被问及，大数据挖掘分析人员最重要的是什么时结果给出了答案是五花八门的答案。其实大数据挖掘分析领域最重要的能力是：能够将大数据转化为非专业人士也能够清楚理解的有意义的见解。理解大数据分析在挖掘大数据价值方面的重要性，是十分有必要的。简单地来说在大数据挖掘分析领域中，最常用的四种大数据分析方法：描述型分析、诊断型分析、预测型分析和指令型分析。一、大数据分析之描述型分析
大数据开发交流·2019-09-23 10:15

大数据学习之路之Hadoop

Hadoop介绍一、简介Hadoop是一个开源的分布式计算平台，用于存储大数据，并使用MapReduce来处理。Hadoop擅长于存储各种格式的庞大的数据，任意的格式甚至非结构化的处理。两个核心：HDFS：Hadoop分布式文件系统（HadoopDistributedFileSystem），具有高容错性和伸缩性，使用java开发MapReduce：GoogleMapReduce的开源实现，分布式编
scu酱油仔·2019-09-23 06:12

大数据学习路线

一、为什么要学习大数据？我们对数据的存储以及处理大致可以划分为以下几个阶段：单纯靠人脑记忆：远古时期的智人，买东西的时候不会记录下来自己这次花了多少钱，买了多少东西，只是单纯的记录在自己的大脑里，很快就会忘记，记都记不住更不用说去分析处理一下数据了。记录在纸上：有了造纸术之后，我们就把数据记录到了纸上，数据就不那么容易丢失，而且我们还可以对数据做一些简单的处理，比如说记个账，算算自己这一个月总共花
曲健磊·2019-09-20 16:31

大数据学习之路之HBASE

Hadoop之HBASE一、HBASE简介HBase是一个开源的、分布式的，多版本的，面向列的，半结构化的NoSql数据库，提供高性能的随机读写结构化数据的能力。它可以直接使用本地文件系统，也可以使用Hadoop的HDFS文件存储系统。不过，为了提高数据的可靠性和系统的健壮性，并且发挥HBase处理大数据的能力，使用HDFS作为文件存储系统才更为稳妥。HBase存储的数据从逻辑上来看就像一张很大的
scu酱油仔·2019-09-20 00:00

[大数据学习研究] 4. Zookeeper-分布式服务的协同管理神器

本来这一节想写Hadoop的分布式高可用环境的搭建，写到一半，发现还是有必要先介绍一下ZooKeeper这个东西。ZooKeeper理念介绍ZooKeeper是为分布式应用来提供协同服务的，而且ZooKeeper本身也是分布式的，由分布在至少三台机器上，这几台机器形成一个Quorum，就想一个剧团一样。这个团里有个团长，就是leader的角色，其他的是follower。这个剧团里的每个人脑子里都记
峻祁连·2019-09-19 16:00

[大数据学习研究] 4. Zookeeper-分布式服务的协同管理神器

[大数据学习研究]4.Zookeeper-分布式服务的协同管理神器本来这一节想写Hadoop的分布式高可用环境的搭建，写到一半，发现还是有必要先介绍一下ZooKeeper这个东西。
峻祁连. Moving to Cloud/Mobile·2019-09-19 16:00

Spark大数据学习（1）--Spark中SparkSession的Dataframe操作

今天我们来学习一下Spark中的SparkSessionSparkSession是SparkContext对象的一个封装，可以通过SparkSession访问到SparkContext。1.SparkSession的创建SparkSessionspark=SparkSession.builder().appName()//设置应用名称.master()//可以选择"local","yarn"等模式
gezigezao·2019-09-18 20:11

好程序员大数据学习路线之大数据自学路线二

好程序员大数据学习路线之大数据自学路线二lambda表达式比较lambda表达式和匿名内部类：lambda表达式就是简单的匿名内部类匿名内部类可以为任意接口创建实例，不管接口有多少抽象方法；lambda
wx5d42865f47214·2019-09-18 10:25

尚学堂大数据学习笔记（二） CentOS6.5 + JDK8 + hadoop2.6.5 搭建Hadoop集群

文章目录尚学堂大数据学习笔记（二）CentOS6.5+JDK8+hadoop2.6.5安装配置HDFS1.安装CentOS6.5系统1.1创建CentOS6.5系统虚拟机1.1虚拟机创建1.2开启ssh
LGX_TvT·2019-09-18 10:33

好程序员大数据学习路线之大数据自学路线一

好程序员大数据学习路线之大数据自学路线一System类exit()：终止虚拟机gc()：运行垃圾回收机制currentTimeMillis()：返回以毫秒为单位的当前时间arraycopy(Objectsrc
wx5d42865f47214·2019-09-18 10:43

[大数据学习研究] 3. hadoop分布式环境搭建

1.Java安装与环境配置Hadoop是基于Java的，所以首先需要安装配置好java环境。从官网下载JDK，我用的是1.8版本。在Mac下可以在终端下使用scp命令远程拷贝到虚拟机linux中。danieldu@daniels-MacBook-Pro-857~/Downloadsscpjdk-8u121-linux-x64.tar.gzroot@hadoop100:/opt/softwarero
峻祁连·2019-09-17 11:00

2019年，该怎样去系统学习大数据，知识+内容+教程

今天科多大数据就和你们一起来分享一篇关于大数据学习内容体系介绍的文章。
a大数据·2019-09-16 15:33
上一页 29 30 31 32 33 34 35 36 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他