ML&DL-大数据学习

大数据学习路线图简介

首先，要学习掌握至少一门编程语言如Java或者Python，它们是我们想从事大数据分析、挖掘等相关岗位的最基本的要求；其次，掌握Linux系统常用的命令操作；再次，第一，熟悉使用Hadoop框架，具体主要学习如下内容模块：（1）HDFS：数据的存储；（2）MapReduce:数据的计算；（3）Yarn：协调资源；（4）Zookeeper：分布式应用程序协调服务；（5）Flume：日志收集系统；（6
Data菌·2019-06-08 15:27

大数据学习要点

现在是大数据的时代，也称作云数据，我们在网上的各种数据，最后把这些整理集合在一起，形成一个庞大的数据集合体，我们生活中大数据已经实时的应用了。那么，大数据如何学习？下面将会为大家介绍。大数据如何学习一、基础知识学习：1、如果您此前对于数据库等方面的知识没有涉及，在学习大数据之前，建议先掌握基本的数据库知识，例如目前流行的关系型数据库管理系统MySQL，非关系型数据库MongoDB，开源、支持网络、
大数据森林·2019-06-05 17:00

大数据 第一天 linux入门 及基本操作指令

serviceiptablesstatus关闭serviceiptablesstop打开serviceiptablesstart永久关闭防火墙chkconfigiptablesoff在这里还是要推荐下我自己建的大数据学习交流群
weixin_34411563·2019-06-01 10:05

大数据学习笔记之HBase（四）：HBase高级、HBase案例

文章目录三十、HBase节点的管理30.1、服役（commissioning）30.2、退役（decommissioning）方式一：方式二（推荐）三十一、集群失效的可能性30.1、磁盘30.2、操作系统30.3、网络30.4、内存三十二、HBase数据的备份与恢复32.1、离线备份32.1.1、同一集群的备份32.1.2、备份数据到另外一个集群32.1.3、离线恢复32.1、在线备份三十三、HB
Leesin Dong·2019-05-31 13:49

零基础大数据学习框架

大数据开发最核心的课程就是Hadoop框架，几乎可以说Hadoop就是大数据开发。这个框架就类似于Java应用开发的SSH/SSM框架，都是Apache基金会或者其他Java开源社区团体的能人牛人开发的贡献给大家使用的一种开源Java框架。科多大数据大数据来带你看看。Java语言是王道就是这个道理，Java的核心代码是开源的，是经过全球能人牛人共同学习共同研发共同检验的，所以说Java是最经得住检
a大数据·2019-05-31 11:33

从BAT大数据工程师那里总结的大数据学习方法

认识大数据什么是大数据？可能有人会说写字楼的所有人的资料信息就是个大数据。NO！这里的数据只能说比较大，但却不能称之为大数据。百度百科上给出了很明确的解释“大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。”很多初学者，对大数据的概念都是模糊不清的，大数据是
juan188·2019-05-30 17:55

大数据学习笔记之HBase（一）：HBase入门

文章目录一、HBase的起源二、基于Hadoop的HBase架构三、RDBMS与HBase的对比3.1、关系型数据库3.2、HBase四、HBase特征简要4.1、自动故障处理和负载均衡4.2、自动分区4.3、集成Hadoop/HDFS4.4、实时随机大数据访问4.5、MapReduce4.6、JavaAPI4.7、横向扩展4.8、列存储4.9、HBaseShell五、HBase在集群中的定位六、
Leesin Dong·2019-05-28 23:31

大数据技术学习，深度挖掘大数据的现状分析

在这里还是要推荐下我自己建的大数据学习交流群:199427210，群里都
juan188·2019-05-28 18:44

大数据开发零基础需要学习什么内容？Storm实时开发

前面我们说到0基础学习大数据开发需要的Java基础、大数据基础和大数据技术学习的重点：Hadoop、Spark，今天继续来介绍大数据学习的重点之三：Storm实时计算。
shuyunbigdata·2019-05-28 13:12

五个月成为一名大数据工程师，需要具备什么条件？

很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习qq群：199427210，有大量干货（零基础以及进阶的经典实战
juan188·2019-05-27 14:55

大数据学习笔记之Flume（一）：Flume入门

文章目录1、Flume在集群中扮演的角色2、Flume框架简介3、安装配置FLume3.1flume-env.sh4、Flume帮助命令5、案例：5.1、案例一：Flume监听端口，输出端口数据。5.1.1、创建FlumeAgent配置文件flume-telnet.conf5.1.2、安装telnet工具5.1.3、首先判断44444端口是否被占用5.1.4、先开启flume监听端口5.1.5、使
Leesin Dong·2019-05-27 08:33

大数据学习笔记之Hive（七）：Hive正则表达式导入数据、UDF日期转换

文章目录Hive正则表达式导入数据UDF日期转换编写添加到hive：Hive正则表达式导入数据需求：上面的日志中间不是用tab键分割的建表语句：createtableIFNOTEXISTSdb_web_data.baidu_log(remote_addrstring,remote_userstring,time_localstring,requeststring,statusstring,body
Leesin Dong·2019-05-27 08:32

大数据学习心得与总结

大数据学习心得与总结在此之前，需要做的准备：1、vnware创建centos虚拟机2、安装secureCRT3、安装eclipse4、配置JDK作业一：centos搭建伪分布式修改虚拟机配置文件①core-site.xmlfs.defaultFShdfs
蜗牛1210·2019-05-22 13:42

大数据入门，到底要怎么学习大数据？

推荐一个大数据学习qq群：606859705每天晚上20:10都有一节【免费的】大数据直播课程，专注大数据分析方法,大数据编程，大数据仓库，大数据案例，人工智能
大数据开发学习·2019-05-22 00:57

大数据学习（五）：如何使用 Livy提交spark批量任务

Livy是一个开源的REST接口，用于与Spark进行交互，它同时支持提交执行代码段和完整的程序。Livy封装了spark-submit并支持远端执行。启动服务器执行以下命令，启动livy服务器。./bin/livy-server这里假设spark使用yarn模式，所以所有文件路径都默认位于HDFS中。如果是本地开发模式的话，直接使用本地文件即可（注意必须配置livy.conf文件，设置livy.
猪笨是念来过倒·2019-05-21 15:15

零基础学习大数据，主要分为哪几步？

不过大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。
人工智能爱好者·2019-05-19 21:04

大数据学习笔记之大数据概述

原文链接：http://www.cnblogs.com/aaron911/p/10811773.html一、大数据与机器学习的关系大数据技术是机器学习、深度学习和人工智能的基础，现有的机器学习和人工智能的发展都离不开大数据。二、大数据生态圈目前大数据主要有两大生态圈：》Hadoop生态圈》Spark生态圈三、大数据产生的背景由于信息时代的到来，每天都产生了大量的数据，想要靠人工去分析和挖掘这些数据
ako881010·2019-05-19 17:00

大数据大纲

1、Java编程技术Java编程技术是大数据学习的基础，Java是一种强类型语言，拥有极高的跨平台能力，可以编写桌面应用程序、Web应用程序、分布式系统和嵌入式系统应用程序等，是大数据工程师最喜欢的编程工具
DK_ing·2019-05-18 17:20

大数据大纲

1、Java编程技术Java编程技术是大数据学习的基础，Java是一种强类型语言，拥有极高的跨平台能力，可以编写桌面应用程序、Web应用程序、分布式系统和嵌入式系统应用程序等，是大数据工程师最喜欢的编程工具
DK_ing·2019-05-18 17:20

大牛：2019年最新大数据学习路线【完整详细版】

很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习qq群：199427210，有大量干货（零基础以及进阶的经典实战
juan188·2019-05-18 14:48

零基础大数据培训学习难吗？学习大数据需要什么基础

首先对于零基础的童鞋想参加大数据学习的，需要：1、一些数学常识，尤其是想从事数据分析这一块，至少要了解常用计算模型算法。
juan188·2019-05-18 14:17

大数据学习笔记之Hive（六）：Hive综合练习

文章目录Hive综合练习：1、上传文件到HDFS1.1文件/目录准备工作2、清洗日志2.1编写清洗日志的MR代码：2.2导出Jar包3、执行创建表操作3.1创建track_log表，在syllabus.db目录下4、关联表操作4.14.25、分析数据5.1、5.2、6、导出到Mysql6.1、6.2、auto.shlinux补充Hive综合练习：1、写一个自动化脚本，自动拷贝/home/admin
Leesin Dong·2019-05-17 14:26

大数据学习笔记之Hive（五）：Hive分析项目分析

文章目录商业网站中经常统计的数据有哪些例子创建会话信息表db_web_ana.session_info创建临时表1分析数据并向临时表1中插入数据创建临时表2：db_web_ana.session_info_temp2向临时表2:db_web_ana.session_info_temp2中插入数据通过sessionId和trackTime将两张临时表join在一起后插入到会话信息表中：db_web_
Leesin Dong·2019-05-16 08:14

大数据的兴起，数据科学家的崛起

在这里我还是要推荐下我自己建的大数据学习交流qq裙：522189307，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定
机器学习和人工智能·2019-05-14 10:57

大数据学习

大数据学习路线先扯一下大数据的4V特征：数据量大，TB->PB数据类型繁多，结构化、非结构化文本、日志、视频、图片、地理位置等；商业价值高，但是这种价值需要在海量数据之上，通过数据分析与机器学习更快速的挖掘出来
iimpact·2019-05-13 15:11

大数据学习笔记之Hive（三）：Hive入门

文章目录复习：Hive框架基础（二）Hive的MapReduce任务Hive的元数据库的备份与还原（metastore）Hive操作HQL语句的两个参数练习：Hive历史命令存放地Hive临时生效设置Hive的内部表与外部表Hive分区表案例：见HQL案例文档Hive查看Mapreduce转换结构常见函数HiveServer2UDF函数（用户定义函数）复习：安装流程解压安装配置文件修改Mysql安
Leesin Dong·2019-05-12 22:12

零基础自学大数据开发的学习路线规划图，相信会对你有所帮助

大数据的高薪吸引力很多的小伙伴，很多零基础、转行的小伙伴都想学习大数据开发，部分小伙伴想要自学大数据开发，如果没有计算机基础自学大数据确实有一定的难度，但是与自身的坚持毅力也有一定的关系，当然如果你有个好的大数据学习路线图也会事半功倍
juan188·2019-05-12 14:37

2019完整的大数据知识体系，大数据学习路线图

大数据所需学习的内容纷繁复杂，难度较大，有一个合理的大数据学习路线图帮忙理清思路就显得尤为必要。
铁拳虎·2019-05-11 12:26

大数据学习之路108-spark streaming基于redis历史state统计

我们之前使用sparkstreaming做过基于mysql的历史state统计，但是当时的方法很笨，因为写到mysql中第一是性能不好，第二是编码麻烦，所以一般不会有人那么做。而且当时的数据来源是socket。所以现在我们的业务就是：通过一个客户端工具实时的写数据到kafka中，然后通过sparkstreaming实时的监控并消费出来。写入到redis中进行实时的统计。首先我们需要写一个客户端程序
王杰0110·2019-05-11 11:08

大数据时代，就业转型必备技能！

在这里还是要推荐下我自己建的大数据学习交流群:199427210，群里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入,大家都是软件开发党，不定期分享干货（只有大数据软件开发相关的），包括我自
铁拳虎·2019-05-10 14:23

大数据学习之BigData常用算法和数据结构

1.BloomFilter由一个很长的二进制向量和一系列hash函数组成优点：可以减少IO操作，省空间缺点：不支持删除，有误判如果要支持删除操作：改成计数布隆过滤器2.SkipList（跳表）核心思路：由多层组成，每层都是一个有序链表，最底层包含所有元素，元素数逐层递减。每个节点包含两个指针，一个->,一个向下。并行编程情况下可以用锁或者CAS操作。CAS:compareandswap，解决多线程
大数据Arry·2019-05-09 21:59

完整的大数据学习体系你看了吗？

整理的大数据学习思路第一阶段：linux系统本阶段为大数据学习入门基础课程，帮大家进入大数据领取打好Linux基础，以便更好的学习Hadoop、habse、NoSQL、saprk、storm等众多技术要点
数据工程师金牛·2019-05-09 19:24

大数据学习24：Scala面向对象：类似Java

第二章：Scala面向对象：类似Java一、复习：面向对象的基本概念（*）定义：把数据和操作数据的方法放到一起，作为一个整体（类class）（*）面向对象的特质：（1）封装（2）继承（3）多态二、定义类class三、属性的get和set方法classStudentBean{//定义属性privatevarstuName="Tom"privatevarstuAge=20//成员方法defgetStu
weixin_44804248·2019-05-09 16:32

如何进行大数据入门的学习

大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，就算零基础的朋友也是完全可以掌握大数据的。零基础学习大数据一般有以下几步：1、了解大数据理论要学习大数据你至少应该知道什么是大数据，大
懂天马·2019-05-08 14:41

大数据学习乌龟制作第二天*

大数据学习乌龟制作第二天乌龟制作代码1packagecom.nf.www;importjavax.swing.JFrame;publicclassTutlePro{publicstaticvoidmian
Aaro·2019-05-07 21:25

大数据开发个人学习规划

大数据方向的工作目前分为三个主要方向:01.大数据工程师02.数据分析师03.大数据科学家04.其他（数据挖掘本质算是机器学习，不过和数据相关，也可以理解为大数据的一个方向吧）在这里还是要推荐下我自己建的大数据学习交流群
铁拳虎·2019-05-07 17:46

0基础小白如何轻松学习大数据？这些必备的学习路线你都知道吗？

推荐下我自己建的大数据学习交流群:957205962，群里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入,大家都是软件开发党，不定期分享干货（只有大数据软件开发相关的），包括我自己整理
数据工程师金牛·2019-05-06 21:36

大数据学习笔记之Zookeeper（四）：Zookeeper实战篇（二）

原文链接：http://www.cnblogs.com/LeesinDong/p/10835248.html文章目录4.1分布式安装部署4.2客户端命令行操作4.3API应用4.3.1eclipse环境搭建4.3.2创建ZooKeeper客户端：4.3.3创建子节点4.3.4获取子节点4.3.5判断znode是否存在4.3.6监听服务器节点动态上下线案例4.1分布式安装部署0）集群规划在hadoo
as403045314·2019-05-06 21:00

大数据学习笔记之Zookeeper（三）：Zookeeper理论篇（二）

原文链接：http://www.cnblogs.com/LeesinDong/p/10835249.html文章目录3.1数据结构3.2节点类型3.3特点3.4选举机制3.5stat结构体3.6监听器原理3.1数据结构ZooKeeper数据模型的结构与Unix文件系统很类似，整体上可以看作是一棵树，每个节点称做一个ZNode。很显然zookeeper集群自身维护了一套数据结构。这个存储结构是一个树
as403045314·2019-05-06 21:00

大数据学习笔记之Zookeeper（二）：Zookeeper实战篇（一）

原文链接：http://www.cnblogs.com/LeesinDong/p/10835250.html文章目录2.1本地模式安装部署2.2配置参数解读2.1本地模式安装部署1）安装前准备：（1）安装jdk（2）通过filezilla工具拷贝zookeeper到到linux系统下（3）修改tar包权限chmodu+xzookeeper-3.4.10.tar.gz（4）解压到指定目录[atgui
as403045314·2019-05-06 21:00

大数据学习笔记之Zookeeper（一）：Zookeeper理论篇（一）

文章目录1.1概述1.2应用场景1.3下载地址1.1概述Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应，从
Leesin Dong·2019-05-06 21:17

Hadoop HA架构剖析

在这里我还是要推荐下我自己建的大数据学习交流qq裙：522189307，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相关的），包括我自己整理的
大数据vvv·2019-05-06 14:52

一分钟让你知道Hadoop是什么

在这里我还是要推荐下我自己建的大数据学习交流qq裙：522189307，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相关的），包括我自己整理的一
大数据vvv·2019-05-05 13:10

Java在大数据和互联网发展中的作用是什么？

在这里我还是要推荐下我自己建的大数据学习交流qq裙：522189307，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开
大数据vvv·2019-05-05 13:10

大数据开发学习，大数据学习路线（完整详细版）

很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习qq群：199427210，有大量干货（零基础以及进阶的经典实战
铁拳虎·2019-05-04 13:20

大数据开发过程中的5个基本步骤

对大数据以及人工智能概念都是模糊不清的，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习qq群：458345782，有大量干货（零基础以
小迪和夫人·2019-05-03 21:12

大数据行业揭秘：AI工程师真的能拿到百万年薪吗?

对大数据以及人工智能概念都是模糊不清的，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎加入大数据学习qq群：458345782，有大量干货（零基础以及进阶的经
大数据vvv·2019-05-03 20:10

大数据学习之路（四）YARN

YARNYARNYARN是在Hadoop2.0出现的类似于手机操作系统的，类似IOS，用来管理安装在其上的插件的工具，和Hadoop1.0做一个比较yarn上面可以有很多插件安装在上面一、Yarn1、定位：分布式操作系统作用：资源整合，为了让系统资源利用最大化，在同一套硬件集群上同时可以运行MR任务、Spark任务、Storm任务2、ResourceManager(RM)整个Yarn的主：资源管理
菜鸟也有梦想啊·2019-05-03 20:37

从大数据到 AI：AI 的现状和未来

在这里我还是要推荐下我自己建的大数据学习交流qq裙：522189307，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开
大数据Arry·2019-05-02 21:31

大数据学习路线完整版，0基础小白怎么学习大数据？

如果你准备了解大数据开发或是正在学习大数据开发,欢迎加入我们的大数据学习q群378144993,群里365天每天与大家分享免费的学习教程以及开发工具,你与大咖就差这个圈.一、大数据技术基础1、l
dftgcdf45645466·2019-05-01 16:22
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他