ML&DL-大数据学习

【笔记】大数据学习

一、分布式文件系统HDFS需要了解的知识点本文参考：https://blog.csdn.net/kezhong_wxl/article/details/765739011、HDFS实现原理HDFS（HadoopDistributedFileSystem）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。
愿你出走半生归来仍是少年·2020-07-05 04:42

大数据学习知识框架

转载自：https://blog.csdn.net/qq_38314823/article/details/80628981-学习大数据需要的基础1、javaSE、EE（SSM）90%的大数据框架都是Java写的2、MySQLSQLonHadoop3、Linux大数据的框架安装在Linux操作系统-需要学什么大数据离线分析一般处理T+1数据（T：可能是1天、一周、一个月、一年）a、Hadoop：一
哈哈怕哈·2020-07-04 23:11

大数据学习之Hbase shell的基本操作

HBase的命令行工具，最简单的接口，适合HBase管理使用，可以使用shell命令来查询HBase中数据的详细情况。安装完HBase之后，启动hadoop集群(利用hdfs存储)，启动zookeeper，使用start-hbase.sh命令开启hbase服务，最后在shell中执行hbaseshell就可以进入命令行界面Habseshell的help对语法的介绍很全,hbaseshell的操作分
lmseo5hy·2020-07-04 22:22

总结十章大数据学习指南（建议收藏）

好奇的人或许会通过网络了解一些概念，而有一些人则看到了大数据带来的机遇，投入大数据学习的洪流当中，投身大数据行业为自己带来利益。经历“坎坷”的学习大数据历程后，在求学之路上有哪些具体容易
juan777·2020-07-04 20:33

大数据学习（Hadoop3.0安装与样例测试）

首先，最新的ApacheHadoop已经3.0了，为了跟上时代我还是配3.0的吧。然后，因为所给的教程是2.*，网上的基本也是1.*和2.*，所以配置的的时候可以说是山路十八弯，这里把过程详细写写。1.下载，解压，配置环境变量，不用多说2.配置相关文件（Hadoop3.0版本）进入解压目录执行如下命令，创建一些数据缓存的文件夹：mkdirhdfsmkdirtmpmkdir/hdfs/namemkd
严武小虎·2020-07-04 18:08

大数据学习笔记之Zookeeper（四）：Zookeeper实战篇（二）

文章目录4.1分布式安装部署4.2客户端命令行操作4.3API应用4.3.1eclipse环境搭建4.3.2创建ZooKeeper客户端：4.3.3创建子节点4.3.4获取子节点4.3.5判断znode是否存在4.3.6监听服务器节点动态上下线案例4.1分布式安装部署0）集群规划在hadoop2、hadoop3和hadoop4三个节点上部署Zookeeper。1）解压安装（1）解压zookeepe
Leesin Dong·2020-07-04 14:40

Lambda 表达式的常见应用场景

文章推荐精选java等全套学习资源精选java电子图书资源精选大数据学习资源java项目练习精选Lambda表达式是Java8引入的新特性，结合forEach方法可以更方便地实现遍历。
欧阳思海·2020-07-04 08:02

大数据学习之Hadoop集群搭建（一）

目录一、环境准备1、VMware-windows版下载安装2、Xshell和Xftp-windows版下载安装3、CentOS系统下载4、压缩包下载二、VMware配置1、网关IP设置2、子网IP设置三、准备虚拟机1、安装CentOS（1）新建虚拟机（2）自定义安装（3）选择兼容性（默认）（3）稍后安装操作系统（4）选择操作系统（5）命名虚拟机（6）处理器配置（7）虚拟机内存设置（8）选择网络类型
青衫红叶·2020-07-04 06:05

计算机视觉 | mmdetection框架学习

)*NCCL2（多GPU间的通信，可不安装）*GCC4.9orhigher([非root权限下配置自己的GCC版本](https://gitlab.gridsum.com/research/team/dl
Chile_Wang·2020-07-04 05:36

写给大数据初学者，从零开始学习大数据开发的完整学习路线

下面分十个章节来说明大数据开发要学习的内容：这里还是要推荐下小编的大数据学习QQ裙:532218147，不管你是小白还是大牛，小编我都欢迎，不定期分享干货，包括小编自己整理的一份2018最新的大数据资料和
大数据学习05·2020-07-04 04:31

大数据学习三之伪分布式集群安装部署

大数据学习三之伪分布式集群安装部署ip：168.192.59.200hostname：bigdata-lmt02.hpsk.com我的环境搭建是基于前两篇博客的基础之上的：大数据学习一Linux基础配置大数据学习二
木子_muzi·2020-07-04 02:08

大数据学习五-Hadoop分布式环境部署

Hadoop分布式环境部署一.Linux规划准备三台虚拟机，ip、hostname分别为192.168.59.223bigdata-training02.hpsk.com192.168.59.224bigdata-training03.hpsk.com192.168.59.225bigdata-training04.hpsk.com/etc/hosts配置配置完成后重启网络服务$servicene
木子_muzi·2020-07-04 02:08

大数据学习四之MapReduce 模板编写UV程序

大数据学习四之MapReduce模板编写UV程序在写程序之前先了解一些相关定义：几个网站基本指标：（1）PV（PageView）：页面点击（浏览）量，每刷新一次页面就会被计算一次。
木子_muzi·2020-07-04 02:36

精细化的大数据学习路线，实现更加高效的转型

所以，想要学懂大数据，就需要有精细化的大数据学习路线做支
✾ ͡冷೨夏ʚɞ͜✿·2020-07-04 01:20

大数据学习知识点导图

其实简单的来说，大数据就是通过分析和挖掘全量的非抽样的数据辅助决策。大数据可以实现的应用可以概括为两个方向，一个是精准化定制，第二个是预测。比如像通过搜索引擎搜索同样的内容，每个人的结果却是大不相同的。再比如精准营销、百度的推广、淘宝的喜欢推荐，或者你到了一个地方，自动给你推荐周边的消费设施等等。随着大数据行业的快速发展，也随之出现了一些问题，比如大数据人才的缺失就是目前急需解决的一个问题，那么很
✾ ͡冷೨夏ʚɞ͜✿·2020-07-04 01:19

大数据学习路线（完整详细版）

大数据学习路线大数据开发一共几个流程，大概概括起来有：收集、清洗、数仓（建模）、OLAP、可视化这里边：收集一般的技术是：Kafka、Flume、高性能HTTP开发（可能）、Avro协议（可能）、Thrift
✾ ͡冷೨夏ʚɞ͜✿·2020-07-04 01:19

非常完整的大数据知识体系，大数据学习路线图

大数据所需学习的内容纷繁复杂，难度较大，有一个合理的大数据学习路线图帮忙理清思路就显得尤为必要。想要在大数据这个领域汲取养分，让自己壮大成长。
✾ ͡冷೨夏ʚɞ͜✿·2020-07-04 01:19

大数据学习路线图简介

首先，要学习掌握至少一门编程语言如Java或者Python，它们是我们想从事大数据分析、挖掘等相关岗位的最基本的要求；其次，掌握Linux系统常用的命令操作；再次，第一，熟悉使用Hadoop框架，具体主要学习如下内容模块：（1）HDFS：数据的存储；（2）MapReduce:数据的计算；（3）Yarn：协调资源；（4）Zookeeper：分布式应用程序协调服务；（5）Flume：日志收集系统；（6
Data菌·2020-07-04 00:15

内联元素和块级元素的区别

1、先来介绍一下内联元素和块级元素都有哪些：块元素(blockelement)*address-地址*blockquote-块引用*center-举中对齐块*dir-目录列表*div-常用块级*dl-定义列表
Suwye_Liu·2020-07-02 09:03

学习大数据可以从事哪些岗位？详细解析下？

在这里还是要推荐下我自己建的大数据学习交流群:199427210，群里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入,大家都是软件开发党，不定期
铁拳虎·2020-07-02 06:02

吴恩达机器学习（十）

大数据学习的问题：计算
带刺的小花_ea97·2020-07-02 04:58

【大数据学习笔记】HBase数据模型及架构简介

1、HBase简介HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库；利用HadoopHDFS作为其文件存储系统,利用HadoopMapReduce来处理HBase中的海量数据,利用Zookeeper作为其分布式协同服务；主要用来存储非结构化和半结构化的松散数据（列存NoSQL数据库）；2、HBase数据模型rowkeytimestampcf1cf2cf3
hellboy0621·2020-07-02 02:55

大数据学习之经典数据分析算法详解

在大数据行业，懂算法的大数据工程师是非常有核心竞争力的，之前科多大数据的一位培训学员面试之后，回来和我们分享，懂得算法在面试过程中是非常加分的，即便算法的底层逻辑不是很了解，但一定要懂得具体应用，本文详解了数据分析中经典的几大算法，辅助大家更好的学习。算法一：快速排序法快速排序是由东尼·霍尔所发展的一种排序算法。在平均状况下，排序n个项目要Ο(nlogn)次比较。在最坏状况下则需要Ο(n2)次比较
haboop·2020-07-02 01:43

大数据学习资源、博客——持续更新

1、西安大数据http://lxw1234.com/2、增长百科http://www.izengzhang.com/3、过往记忆https://www.iteblog.com/4、张宏伦http://zhanghonglun.cn/blog/5、尹梦如http://yixf.name/6、董西成http://dongxicheng.org/7、赵http://www.zhaokv.com/8、数据
数据科学社区·2020-07-02 01:14

大数据、云计算和物联网，一文看懂这些新兴战略产业！

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：740041381，即可免费领取套系统的大数据学习教程如今人工智能
数据工程师陈晨·2020-07-01 21:26

自学大数据者请进：大数据学习线路及各阶段学习书籍、视频推荐

大数据学习路线及各阶段学习书籍推荐！废话不多说，直接切入主题，有需要的小伙伴可以参考学习！
数据工程师陈晨·2020-07-01 21:54

大数据学习笔记1000条

笔记汇总1.Zookeeper用于集群主备切换。2.YARN让集群具备更好的扩展性。3.Spark没有存储能力。4.Spark的Master负责集群的资源管理，Slave用于执行计算任务。5.Hadoop从2.x开始，把存储和计算分离开来，形成两个相对独立的子集群：HDFS和YARN，MapReduce依附于YARN来运行。6.YARN可以为符合YARN编程接口需求的集群提供调度服务。7.YARN
远陌·2020-07-01 16:39

大数据学习环境准备[1] - 创建虚拟机

[email protected]:40写在前面的废话在小象学院买了门网课,需要提交作业(支持链接),所以就赶紧注册了,准备把作业发布在这里,也算是给自己的学习存个档.开始大数据集群实验环境概述最基本的一个大数据集群,应该至少包含三台物理主机,当然,作为个人学习和实验使用的话,在自己电脑里装三台虚拟机就可以了.操作系统使用Linux.我的实验环境笔记本,Win10家庭版,
qdice007·2020-07-01 05:22

大数据学习笔记之Hadoop（一）：Hadoop入门

文章目录大数据概论一、大数据概念二、大数据的特点三、大数据能干啥？四、大数据发展前景五、企业数据部的业务流程分析六、企业数据部的一般组织结构Hadoop（入门）一从Hadoop框架讨论大数据生态1.1Hadoop是什么1.2Hadoop发展历史1.3Hadoop三大发行版本1.4Hadoop的优势1.5Hadoop组成1.5.1HDFS架构概述1.5.2YARN架构概述1.5.3MapReduce
as403045314·2020-07-01 01:51

易效能G203周检视之第一周-A7-Joyce

以前觉得难写，永远也开不了头的每周大数据学习总结，也在印象笔记的帮助下开了头，终于有勇气面对最丑的青蛙。另外，更多学习细节和代码还开始发表在github里，对全世界的developers开源。
A9_Joyce·2020-06-30 22:59

大数据学习笔记（五）

一、Flume1.1概述Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume支持从各种数据源中（如文件、文件夹、Socket数据包、Kafka等）收集数据；同时，Flume提供对数据进行简单处理，并把处理后的数据写出到HDFS、hbase、hive、kafka等众多外部存储系统。1.2运行原理Flume里面的几个比较重要的概念：Agent：它
伤心程序员·2020-06-30 16:22

大数据学习笔记（二）

一、HDFS1.1HDFS介绍HDFS（HadoopDistributedFileSystem，全称为“分布式文件系统”）是ApacheHadoop下的一个分布式文件系统项目。Hadoop底层就是使用HDFS来存储大型的数据。HDFS使用多台计算机存储文件，并且提供统一的访问接口。HDFS对数据文件的访问通过流的方式进行处理，这意味着通过命令和MapReduce程序的方式可以直接使用HDFS。HD
伤心程序员·2020-06-30 16:22

大数据学习笔记（四）

一、Hive1.1数据仓库1.1.1数据库与数据仓库1）数据库是面向事务设计，数据仓库是面向主题设计的；2）数据库一般存储了业务数据，数据仓库一般存储的是历史数据；3）数据库设计应该尽量避免冗余，一般针对某一业务应用进行设计；数据仓库在设计时会有意地引入冗余，依照分析需求、分析维度、分析指标进行设计；4）数据库是为了捕获数据而设计，数据仓库是为了分析数据而设计；数据仓库是在数据库已经大量存在的情况
伤心程序员·2020-06-30 16:22

大数据学习笔记（三）

一、MapReduce1.1MapReduce介绍MapReduce是Hadoop框架的核心之一，它主要负责数据的分布式计算问题。MapReduce的核心思想是“分而治之”。“分”，即把一个复杂的任务分解成若干个简单任务来处理，但前提是这些任务是可以并行计算的。“合”，即对map阶段的结果进行全局汇总。MapReduce将整个并行计算过程划分为三个阶段：Map：对一些独立元素组成的列表中的每个元素
伤心程序员·2020-06-30 16:22

学习大数据，为大家推荐几本好书

大数据学习书单，为大家推荐几本一、《用统计学的方式思考》这是一本专门为Python程序员设计的概率论和数理统计知识的入门类书籍。书中主要介绍了一些剖析真实数据集和解决其他有趣问题的简单方法。
人工智能爱好者·2020-06-30 16:31

大数据学习路线

大数据之Linux+大数据开发篇JavaLinux基础Shell编程hopping2.xHDFSYARNMapReduceETL数据清洗HiveSqoopFlume/Oozieo大数据WEB工具HueHBaseStormStormScalaSparkSpark核心源码剖析CM5.3.x管理CDH5.3.x集群大数据之Java企业级核心技术篇Java性能调优Tomcat、Apache集群数据库集群技
zhaoxming·2020-06-30 15:49

【2020版冲刺年薪30W】超全大数据学习路线+思维导图

大数据学习路线下面和大家讲一下大数据学习的路线，帮助大家快速进入大数据行业。我会结合自己的实际经历还说明学习路线。
focusbigdata·2020-06-30 14:48

YARN的入门介绍

YARN目录1.YARN生产背景2.YARN概述3.YARN架构（重点，需复述）4.YARN执行流程5.YARN环境搭建6.提交作业到YARN上执行本文是慕课网大数据学习笔记与总结1.YARN生产背景MapReduce1
zhangtianpu·2020-06-30 14:11

大数据学习方向，看完你就知道你能做什么工作了

企业需要什么样的人才企业需要两类大数据人才，一是数据平台建设人才；二是数据挖掘应用人才。大数据是因应结合应用来体现其价值……例如推动大数据技术在金融、气象、行政管理等领域的应用，推进基于大数据技术的个人信贷和医疗保健等。三种能力成就大数据人才一是技术相关人才，包括IT、系统、硬件和软件；二是数量相关人才，包括统计、数学、建模、算法;三是业务，就是要有一定的专业领域知识。建立大数据的数据存储本身需要
程序猿的大猩猩·2020-06-30 12:41

值得新人保存收藏的大数据零基础学习路线

有很多人对这个东西感兴趣，但是对编程语言也不太了解不过大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。
程序猿的大猩猩·2020-06-30 12:41

2019大数据全网最全学习路线分享

大数据入门，需要学习以下这些知识点：（学习路线图）图片太大上传不了1、Java编程技术Java编程技术是大数据学习的基础，Java是一种强类
程序猿的大猩猩·2020-06-30 12:40

大数据和云计算技术周报（第85期)

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学，在
大数据和云计算技术·2020-06-30 12:50

大数据和云计算技术周报（第62期)

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学，
大数据和云计算技术·2020-06-30 12:49

大数据和云计算技术周报（第9期）

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。也请同学们继续打赏，支持社区，支持编辑们持续奉献高质量知识！
大数据和云计算技术·2020-06-30 12:17

hadoop学习路线图

而对于hadoop的学习是大数据学习中的重要一个环节，于是乎有很多人想要知道hadoop学习路线图。
程序员日常·2020-06-30 07:33

大数据学习-Hive01-环境搭建

安装Zookeeper前提已经安装JDK解压Zookeeper#tar-zxvfzookeeper-3.4.13.tar.gz修改Zookeeper配置#cpconf/zoo_sample.cfgconf/zoo.cfg修改zookeeper的数据存放位置#viconf/zoo.cfgdataDir=/root/zookeeper-3.4.13/zkData#mkdirzkData启动Zookee
new Fiancee(xueLi);·2020-06-30 06:01

大数据学习笔记（一）

一、大数据大数据（bigdata），指无法在一定时间范围呢用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率的多样化的信息资产。在维克托·迈尔·舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样捷径，而采用所有数据进行分析处理。大数据的5V特点（IBM提出）：Volume（大量）、Veloc
xxiaoMinGLL·2020-06-30 04:30

大数据开发工程师必看书籍

大数据学习相关书籍推荐阅读：1、《数据之巅》在《数据之巅》这本书中，从小数据时代到大数据的崛起，作者以宏大的历史观、文化观、大数据观，给我们描绘了一幅数据科学、智慧文化的全景图。
肖晓晓·2020-06-30 04:43

2019新版大数据学习路径

近几年，大数据这个词突然变得很火，不仅纳入阿里巴巴、谷歌等互联网公司的战略规划中，同时也在我国国务院和其他国家的政府报告中多次提及，大数据无疑成为当今互联网世界中的新宠儿。而大数据开发技术，对于学习者来讲专业性强，操作繁琐，完全属于“高大上”的技术。好奇的人或许只会通过网络搜索了解了一些甚至都谈不上皮毛的东西，有时候连概念都说不上来，而有一些人则看到了大数据带来的机遇，想通过专业的培训来学习大数据
肖晓晓·2020-06-30 04:43

免费的大数据学习资料，这一份就足够

一份专业的大数据学习资料才是学习大数据的利刃。小编分享的这套大数据学习资料将从学习大纲、书籍、视频教程分别分享。
肖晓晓·2020-06-30 04:11
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他