本科课程大数据基础

大数据学习线路及各阶段学习书籍推荐

阶段一、大数据基础——java语言基础方面（1）Java语言基础Java开发介绍、熟悉Eclipse开发工具、Java语言基础、Java流程控制、Java字符串、Java数组与类和对象、数字处理类与核心技术
莫安迪·2019-01-08 14:14

中国软件大会上大快搜索入选中国数字化转型TOP100服务商

大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”称号，入选中国数字化转型
dkhadoop·2018-12-24 16:03

中国软件大会上大快搜索入选中国数字化转型TOP100服务商

大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”称号，入选中国数字化转型
dkhadoop·2018-12-24 16:03

大快搜索获评“2018中国大数据基础软件领域领军企业”

大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”称号，入选中国数字化转型
dkhadoop·2018-12-24 15:30

大快搜索获评“2018中国大数据基础软件领域领军企业”

大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”称号，入选中国数字化转型
dkhadoop·2018-12-24 15:30

中国电子信息产业发展研究院主办的2018中国软件大会上大快搜索“又双叒叕”获奖了 ...

yq.aliyun.com/articles/681894大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业
串行并jjjjj·2018-12-24 13:03

自然语言处理工具HanLP被收录中国大数据产业发展的创新技术新书《数据之翼》

阅读更多在12月20日由中国电子信息产业发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”，并成功入选中国数字化转型TOP100服务商。
adnb34g·2018-12-24 13:00

中国电子信息产业发展研究院主办的2018中国软件大会上大快搜索“又双叒叕”获奖了

大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”称号，入选中国数字化转型
lanlantian123·2018-12-24 13:04

大数据产业发展创新技术新书《数据之翼》收录自然语言处理工具HanLP

在12月20日由中国电子信息产业发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”，并成功入选中国数字化转型TOP100服务商。
lanlantian123·2018-12-24 10:58

自然语言处理工具HanLP被收录中国大数据产业发展的创新技术新书《数据之翼》

在12月20日由中国电子信息产业发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”，并成功入选中国数字化转型TOP100服务商。
adnb34g·2018-12-24 09:20

容错和高性能如何兼得: Flink创始人谈流计算核心架构演化和现状

为了解决日益增长的实时数据处理需求，一些公司正在将其部分大数据基础架构转换为流式处理模型。基于流数据的基础架构不仅能
raincoffee·2018-12-21 14:52

大数据基础学习笔记-1.安装大数据前的准备工作

（这是我开始学习大数据看的博客，把地址整理了一下，分享给大家）正式与非正式环境下自行选择要执行的步骤1.安装VMwarehttps://blog.csdn.net/chengyuqiang/article/details/713340572.安装Linux虚拟机https://blog.csdn.net/chengyuqiang/article/details/71335370vim/etc/sy
小马的学习笔记·2018-12-18 18:40

《大数据基础——基于Hadoop与Spark》课后习题——第一章部分答案

仅用于我个人的学习。书籍为人民邮电出版社的《大数据技术基础——基于Hadoop与Spark》。课后习题选择是我个人认为有用的。记录下来是为了督促我学习:)共好1.请指出以下术语的基本含义。元数据；分布式存储；计算机集群；并行计算；DFS；MapReduce；元数据：Metadata，为描述数据的数据，主要是描述数据属性（property）的信息。简言之，元数据就是关于数据的数据。分布式存储：分布式
正在努力的大可爱·2018-12-17 16:10

Hadoop大数据基础框架学习

什么是大数据？进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（等于1024TB）级的数据系统已经很常见，随着移动个人数据、社交网站、科学计算、证券交易、网站日志、传感
qq_43713878·2018-12-11 12:29

大数据基础Hadoop 2.x入门

hadoop概述存储和分析网络数据三大组件MapReduce对海量数据的处理思想：分而治之每个数据集进行逻辑业务处理map合并统计数据结果reduceHDFS储存海量数据分布式存储安全性高副本数据YARN分布式资源管理框架管理整个集群的资源（内存、CPU核数）分配调度集群资源Common工具hadoop生态圈Hive（蜜蜂）通过使用sql语句来执行hadoop任务HBase存储结构化数据的分布式数
weixin_34235135·2018-12-02 17:00

一个诡异的思想实验：玛丽的黑白房间

它简直就是一个经典，被永久地列入心灵哲学本科课程的必读书目，几本很有分量的选集也
利维坦·2018-11-29 00:00

大数据基础入门学习路线图

在大数据和人工智能的应用热潮中，几乎没有哪个领域像人工智能这样可以让企业受益。各地的企业似乎都在利用这些技术来降低管理费用，同时扩大业务范围。例如，客服人员可能会被人工智能助理彻底取代，但更重要的是，零售商可以通过人工智能跟踪他们的库存，而消费者的兴趣很快就会发生革命性的变化。随着越来越多的零售商将大数据和人工智能应用到他们的商业模式中，预计这个行业现在可以利用人力和机器的力量来获得更多的利润。此
programmer_feng·2018-11-19 17:12

《Cloudera hadoop大数据平台实战指南》此书2019年1月已上市

这本书由宋立桓老师和陈建平老师共同合作，本书的切入点明确而清晰，从Hadoop生态明星Cloudera入手，单刀直入逐步引出各类大数据基础和核心应用框架。
lihuansong·2018-11-14 20:48

大数据基础增强----【Zookeeper】

Zookeeper1.Zookeeper1.1Zookeeper概述Zookeeper是一个分布式协调服务的开源框架。主要用来解决分布式集群中应用系统的一致性问题，例如怎样避免同时操作同一数据造成脏读的问题。ZooKeeper本质上是一个分布式的小文件存储系统。诸如：统一命名服务、分布式配置管理、分布式消息队列、分布式锁、分布式协调等功能。1.2Zookeeper特性全局数据一致:集群中数据一致,
CoderBoom·2018-11-11 23:39

大数据基础增强----【Zookeeper】

Zookeeper1.Zookeeper1.1Zookeeper概述Zookeeper是一个分布式协调服务的开源框架。主要用来解决分布式集群中应用系统的一致性问题，例如怎样避免同时操作同一数据造成脏读的问题。ZooKeeper本质上是一个分布式的小文件存储系统。诸如：统一命名服务、分布式配置管理、分布式消息队列、分布式锁、分布式协调等功能。1.2Zookeeper特性全局数据一致:集群中数据一致,
CoderBoom·2018-11-11 23:39

【原创】大数据基础之Oozie（1）简介、源代码解析

Oozie4.3一简介1官网http://oozie.apache.org/ApacheOozieWorkflowSchedulerforHadoopHadoop生态的工作流调度器OverviewOozieisaworkflowschedulersystemtomanageApacheHadoopjobs.OozieWorkflowjobsareDirectedAcyclicalGraphs(DA
匠人先生·2018-11-02 11:00

大数据基础环境之spark（3台虚拟机）

本博主之前的博客包含了详细的所有前置环境，出门左转谢谢。Spark集群的搭建：到官网上下载相应的压缩包如果网速不好，推荐到清华的镜像去下载：http://archive.apache.org/dist/进去找到你所需要的版本进行下载，速度会提升很多！将压缩包上传到虚拟机上，进行解压到相应的文件夹，然后配置环境变量：最好将bin和sbin都添加到环境变量中,我这里只添加了bin修改spark的配置文
Saltedfishwithdreams·2018-10-31 21:59

大数据基础环境之kafka（3台虚拟机）

Kafka集群：首先，下载解压压缩包kafka_2.11-2.0.0.tgz到/usr/kafka/配置/usr/kafka/kafka_2.11-2.0.0/config/server.properties文件：打开监听端口（打开这一行注释）：修改zookeeper.connect：配置broker的ID：修改log的目录：然后就配置完成了接着使用远程复制将/usr/下的kafka目录分发到其他
Saltedfishwithdreams·2018-10-31 21:44

大数据基础环境之hbase（3台虚拟机）

hbase安装注意开启hbase之前，需要将之前的hadoop集群开启start-all.sh（启动hadoop）zkServer.shstart（各个节点均执行）1.同样先建立工作路径/usr/hbase,将/opt/soft下的hbase加压到工作路径中。创建路径：mkdir-p/usr/hbase解压缩：tar-zxvf/opt/soft/hbase-1.2.4-bin.tar.gz-C/u
Saltedfishwithdreams·2018-10-28 20:29

大数据基础环境之hadoop（3台虚拟机）

hadoop集群搭建实验步骤安装hadoop使用Xshell连接虚拟机：修改/etc/hosts文件（三台机器都需要操作），操作过程如下图所示：注意：图中的ip地址为操作是使用的机器的ip地址，需要将hosts文件中的ip地址更换为我们将第一步所得到的ip地址！！！6.当所有机器上的hosts文件配置完成之后，我们可以在master节点上输入sshslave1或者sshslave2，测试一下hos
Saltedfishwithdreams·2018-10-20 21:44

大数据基础环境之zookeeper（3台虚拟机）

因为之后的大数据环境都要依赖jdk我的软件包都放在了/opt/soft下：安装JDK1.首先在根目录下建立工作路径/usr/javamkdir-p/usr/javatar-zxvf/opt/soft/jdk-8u171-linux-x64.tar.gz-C/usr/java/2.修改环境变量修改环境变量：vi/etc/profile添加内容如下：exportJAVA_HOME=/usr/java/
Saltedfishwithdreams·2018-10-19 22:43

大数据基础环境之同步基础环境（3台虚拟机）

大数据基础环境的同步配置实验步骤1.修改主机名本次集群搭建共有三个节点，包括一个主节点master，和两个从节点slave1和slave2。
Saltedfishwithdreams·2018-10-18 22:28

《大数据时代》书摘

大数据时代:生活，工作与思维的大变革维克托·迈尔·舍恩伯格硅谷臭名昭著的技术成熟度曲线大数据基础上的简单算法比小数据基础上的复杂算法更加有效。”他们就指出，混杂是关键。
愚坤·2018-10-18 22:47

2018-10-15 英澳新2+2本科留学项目

本科留学项目项目简介：为实现中国学生留学海外知名大学的需求，在中国(教育部)留学服务中心的支持与指导下，西安外国语大学发挥在国际教育交流和办学方面的优势，与英国、澳大利亚、新西兰等名校签署协议，开设出国留学本科课程衔接项目
西外TUFC毋老·2018-10-15 15:31

大数据基础问答17

1.MySQL部署过程的配置文件默认在哪/etc/my.cnf2.赋予权限，%代表什么任意ip都能访问3.创建DB的SQL是什么?createdatabasexxx;4.想想，创建一个用户xxx，对xxxdb有所有权限访问且密码123456，这个SQL会不会写grantallprivilegesonxxxdb.*toxxx@’%’identifiedby‘123456’;5.赋予权限完，我们最后一
仙人掌仙人·2018-10-13 15:29

大数据分布式存储原理

大数据基础1.什么是大数据短时间内快速的产生海量的多种多样的有价值的数据2.大数据技术2.1分布式存储2.2分布式计算①分布式批处理（无法实现预测）存一段时间的数据，等到将来某一时刻时再进行处理②分布式流处理
dmbds20·2018-10-09 20:39

大数据基础问答04

1.如何判断一个Linux上的xxx服务是否存活?一、查看进程是否运行：ps-ef|grepxxx二、查看端口号：netstat-nlp|grepxxx（xxx是pid）第一步：pingxxx服务所在的机器的ip:网络环境能够ping通的，服务正常，不能ping通，需要排查。第二步：查看xxx服务的端口号和服务地址（监听地址）第三步telnetxxxxxxyy（xxxxxx是机器ip地址，yy是端
仙人掌仙人·2018-10-06 21:30

史上最新最全面的java大数据学习路线（新手小白必看版本）

第一阶段：大数据基础Java语言基础阶段1.1：Java开发介绍1.1.1Java的发展历史1.1.2Java的应用领域1.1.3Java语言的特性1.1.4Java面向对象1.1.5Java性能分类1.1.6
程序员日常·2018-09-20 09:41

大数据 Hadoop介绍、配置与使用

大数据基础概念大数据Centos基础大数据Shell基础大数据ZooKeeper大数据Hadoop介绍、配置与使用大数据Hadoop之HDFS大数据MapReduce大数据Hive大数据Yarn大数据MapReduce
Notzuonotdied·2018-09-15 17:09

大数据 Shell基础

前言大数据基础概念大数据Centos基础大数据Shell基础大数据ZooKeeper大数据Hadoop介绍、配置与使用大数据Hadoop之HDFS大数据MapReduce大数据Hive大数据Yarn大数据
Notzuonotdied·2018-09-13 09:28

学习大数据基础笔记02——新手必须掌握的Linux命令

最近在看一本暑假买过的书，但没怎么看过，名字叫《Linux就该这么学》,或许会有人好奇为什么不是《鸟哥的私房菜》？其实，我也有鸟哥的这本书，只是页数太多看起来还是会些许吃力不易懂。在这里记下这些常用的Linux命令，这些命令与实战相结合，应该在未来的某一天也会受用！后续相关命令操作会逐步带图更新..如需转载，请注明出处。(博主辛苦码的)一、常用系统工作命令1.echo命令echo命令用于在终端输出
liumce·2018-09-07 23:57

学习大数据基础笔记01——Linux入门与基础

终于等到大三开学了，新学期昨晚才得到朝思暮想的课表，课表里的有一门行业前沿技术（心想：前沿技术是个啥技术..）其实是大数据...好了，我要开始学东西了...（窘迫）备注：其实操作步骤是看老师来的，哈哈哈..大数据小白一、前言先装个系统(Linux吖...为啥又是它？无处不在)，再测试下(万一学校机房被我玩坏了怎么办)，最后普及下Linux操作知识，关机（瑟瑟发抖）...二、安装虚拟机1.安装VMw
liumce·2018-09-03 17:36

Spark SQL在100TB上的自适应执行实践

为了应对这些挑战，英特尔大数据技术团队和百度大数据基础架构部工程师在Spa
微步229·2018-09-03 11:56

大数据基础：必备Linux操作系统知识

Hadoop通常都是搭建在Linux操作系统之上，故在搭建Hadoop实验环境之前，首先需要创建Linux系统环境。由于我们只是搭建Hadoop实验环境，而不是生产环境，因此，为简单起见，就采用虚拟机VMware+Linux操作系统RedHat（小红帽）。本文先介绍Linux操作系统的安装过程，以及Linux操作系统的一些相关基础知识，后续文章再接着介绍Hadoop实验环境的搭建及Hadoop等一
penggougoude·2018-09-02 15:20

2018大数据培训学习路线图（详细完整版）

原文链接：http://www.cnblogs.com/Bigata/p/9566003.html2018大数据培训学习路线全课程目录+学习线路详解（详细完整版）第一阶段：大数据基础Java语言基础阶段
dolwn3560·2018-08-31 15:00

鲸腾网络总经理钱晓芳：助力大数据风控 赋能多场景生态

本次会议上，浙江鲸腾网络科技有限公司总经理钱晓芳发表了《GTN网络在风控中的应用》的主题演讲，聚焦在大数据、人工智能、云计算等新一代金融科技的高速发展背景下，GTN积极开放自有大数据基础能力以及联合第三方的大数据资源
恒生GTN·2018-08-28 16:23

学完大数据基础，可以按照我写的顺序学下去

首先给大家介绍什么叫大数据，大数据最早是在2006年谷歌提出来的，百度给他的定义为巨量数据集合，辅相成在今天大数据技术任然随着互联网的发展，更加迅速的成长，小到个人，企业，达到国家安全，大数据的作用可见一斑，也就是近几年大数据这个概念，随着云计算的出现才凸显出其价值，云计算与大数据的关系就像硬币的正反面一样，相密不可分。但是大数据的人才缺失少之又少，这就拖延了大数据的发展。所以人才培养真的很重要。
大数据群722680258·2018-08-04 10:43

成都0基础大数据培训学习：Linux&Maven基础知识

今天来说一下大数据开发培训的基础学习：Linux基础、Maven基础，以成都加米谷大数据培训机构的大数据开发课程：第四阶段-大数据基础为例。
iteye_18813·2018-07-31 16:12

大数据生态

大数据基础以史观今数据量是怎么变大的？单机是怎么扛不住的？集群为何难于管理？三大论文MapReduce/GFS/BigTable有何指导意义？Hadoop生态是怎么演进的？
王谙然·2018-07-21 15:48

大数据生态

大数据基础以史观今数据量是怎么变大的？单机是怎么扛不住的？集群为何难于管理？三大论文MapReduce/GFS/BigTable有何指导意义？Hadoop生态是怎么演进的？
王谙然·2018-07-21 15:48

“玩命的中学，快乐的大学”现象必须扭转

对中小学生要有效“减负”,对大学生要合理“增负”,提升大学生的学业挑战度,合理增加大学本科课程难度、拓展课程深度、扩大课程的可选择性,激发学生的学习动力和专业志趣,真正把“水课”变成有
余寒冬老师工作坊·2018-06-23 21:44

python+POP3实现批量下载邮件附件

最近新开学，接到了给老板的本科课程当助教的工作，百十来号人一学期下来得有四五次作业发进邮箱里，需要我来统计打分，想想挨个点进去下载附件的过程就头大，于是萌生了写个脚本来统计作业的想法。
li_huifei·2018-06-19 15:09

大数据基础与应用课程总结

课程链接：大数据技术基础课程_厦门大学数据库实验室http://dblab.xmu.edu.cn/post/1089/课程里介绍了大数据的基本概念、大数据处理架构Hadoop、分布式文件系统HDFS、分布式数据库HBase、NoSQL数据库、云数据库、分布式并行编程模型MapReduce、Spark以及大数据在互联网、生物医学和物流等各个领域的应用•在Hadoop、HDFS、HBase、MapRe
Hyo_yew·2018-06-17 10:25

一些简单的大数据基础知识

1,为什么不是直接将人脸识别数据直接放到hbase里,而是要通过Kafka?因为数据量大,发送速度快,hbase不能支撑.而kafka集群里有负载均衡,能将数据稳定高效的放到hbase里.2,hbase是什么?HBase–HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。与FUJITSUCl
weixin_40592935·2018-06-12 09:41

大数据基础知识学习-----Hive学习笔记（一）概述

Hive基本概念Hive概述Hive：由Facebook开源用于解决海量结构化日志的数据统计Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能本质是：将HQL转化成MapReduce程序Hive处理的数据存储在HDFSHive分析数据底层的实现是MapReduce执行程序运行在YARN上Hive的优缺点优点操作接口采用类SQL语法，提供快速开发
四川码匠·2018-06-08 17:54
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他