【大数据开发】

【Flink】（十四）Flink Runtime 核心机制剖析

写在前面：我是「云祁」，一枚热爱技术、会写诗的大数据开发猿。昵称来源于王安石诗中一句[云之祁祁，或雨于渊]，甚是喜欢。
云 祁·2020-07-27 14:40

大数据开发常用算法

无论是机器学习，模式识别，数据挖掘，统计学习，计算机视觉，语音识别，自然语言处理都涉及到算法。1.树：决策树（决策树）是在已知各种情况发生概率的基础上，通过构成决策树来求取净现值的期望值大于等于零的概率，评价项目风险，判断其可行性的决策分析方法，是直观运用概率分析的一种图解法。由于这种决策分支画成图形很像一棵树的枝干，故称决策树。在机器学习中，决策树是一个预测模型，他代表的对象属性与对象值之间的一
专注大数据开发·2020-07-27 14:49

职业发展之大数据开发工程师理解

大数据工程师需要具备哪些能力？（1）数学及统计学相关的背景；（2）计算机编码能力；（3）对特定应用领域或行业的知识。大数据工程师这个角色很重要的一点是，不能脱离市场，因为大数据只有和特定领域的应用结合起来才能产生价值。所以，在某个或多个垂直行业的经历能为应聘者积累对行业的认知，对于之后成为大数据工程师有很大帮助，因此这也是应聘这个岗位时较有说服力的加分项。大数据相关的技能很多，按照数据本身，可以分
yinni11·2020-07-27 14:27

SQL人的优势：实战大数据开发10分钟入门

金色的九月，即将开启收获的篇章。一早醒来，魔都湛蓝的天空，暑气未消的阳光，一扫前几日狂风暴雨的阴霾。品着自己煮的咖啡，吃上一口朱家角寄来的苏荷月饼，人生真赞！这个礼拜将32G内存和M.2SSD都买好了，虽有些小波折，但硬件基本到位，安装好，可以干点活了。很多朋友也已经看到我在B站UP的视频了，学习必须要舍得投资！SQL人是大数据时代最得便宜的优势群体，因为10分钟内，我们就可以体验一把Hadoop
dbLenis·2020-07-27 14:42

Hadoop的核心组件HDFS(分布式文件系统HDFS)

Hadoop的核心组件HDFS(分布式文件系统HDFS)HDFS(HadoopDistributedFileSystem)是Hadoop项目的核心子项目,在大数据开发中分布式计算对海量数据进行存储与管理
蜗牛杨哥·2020-07-27 13:16

JVM是如何分配管理内存的？

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
小山猪的沙塔·2020-07-27 13:46

大数据开发及和大数据相关的技术

在现如今，随着互联网技术飞速的发展，目前有不少朋友询问关于大数据方面的问题，比如什么是大数据开发啊，和大数据相关的技术是什么呢等问题，我们今天就浅谈一下大数据开发及和大数据相关的技术的问题。
juan11115·2020-07-27 12:25

BigData：大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略

BigData：大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略BigData：大数据简介及以
一个处女座的程序猿·2020-07-27 11:55

分享一个大数据开发工程师的经验总结

今天的主题，主要是从大数据开发的角度，到大数据治理的必要性，再到图形化建模的畅想，最后在数据质量的把关，然后到大数据可视化的应用，博主总结两年的见闻，和我学习的成果，也不知理解有无偏差吧，希望大家能给出建议
juan11115·2020-07-27 11:35

应对超大规模集群资源管理挑战，这个神器有妙招

很多大数据开发工程师或系统管理员，特别是初级入门Hadoop的工程师，经常会遇到如何高效管理大数据基础平台的问题。
宋懵懵的数据生活·2020-07-27 10:06

网络爬虫技术介绍

首先请问：都说现在是"大数据时代"以及"人工智能时代"，大数据开发和人工智能都需要大量数据的支持，那数据从何而来？
成长之路丶·2020-07-22 10:58

狂神说Java全栈学习路线

一、Java基础二、JavaWeb三、SSM框架四、Linux运维五、微服务和分布式六、大数据开发七、持续学习写在最后成为一个合格的工程师需要1~3年时间，最好的学习方法就是找经典的书籍系统地学习，而不要遇到一个问题到网上搜搜然后就解决了事
狂神说·2020-07-16 06:57

最值得参阅的大数据的技术图谱

现在大数据有三个发展方向：平台搭建/优化/运维/监控大数据开发/设计/架构数据分析/挖掘目录0.前言1.初识Hadoop2.SQLOnHadoop之Hive3.数据采集到Hadoop4.Hadoop结果集提取
布道·2020-07-16 00:14

Kafka常见的导致重复消费原因和解决方案

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
王知无(import_bigdata)·2020-07-15 22:27

Apache Flink入门

适合读者：对大数据开发感兴趣者。
cricket1981·2020-07-15 21:10

精彩视界

信心专业，自我介绍1.华科软件工程毕业2.中国平安软件开发，需求分析师3.华为大数据开发，带团队，交付项目4.互联网创业微信公众号，app开发，带团队希望毛总从事视保领域多年，市场营销极其擅长；施总人脉资源商业头脑
有来复有去·2020-07-15 20:43

大数据开发笔试题(一)

1、Oracle中下列哪个表达式值为true？(D)A、null=nullB、’’=nullC、0=nullD、以上三个都不为true2、Oracle支持的表分区类型为？(ABD)A、ListB、RangeC、HashMapD、复合分区3、下列对Oracle索引的说法正确的是？(AD)A、索引在Oracle中通过B+树存储B、Oracle只支持全局索引C、Oracle不支持分区索引D、索引可以提高
火成哥哥·2020-07-15 19:23

大数据开发学习平台安装配置

入门基础篇本文中直接跳过服务器之间免密码登录以及相关账户的创建和权限配置的工作。相关操作请移步免密码登录，linux账户的添加和配置。软件版本jdkjdk-8u91-linux-x64.tar.gzscalascala-2.10.6.tgzhadoophadoop-2.6.4.tar.gzhadoop-2.6.4-src.tar.gz源代码mahoutapache-mahout-distribut
mincase·2020-07-15 18:23

新书：Scala语言基础与开发实战

详细介绍大数据开发语言Scala及其在分布式框架Akka和Kafka中的应用。秉承“实战”类图书特点，解析大量代码的编写操作，具有较强的可操作性，便于读者学习和理解。
weixin_34210740·2020-07-15 15:45

基于Flink快速开发实时TopN

大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！By大数据技术与架构场景描述：TopN是统计报表和大屏非常常见的功能，主要用来实时计算排行榜。
大数据技术与架构·2020-07-15 15:42

[0.0.0] 大型spark项目实战

前言关于spark大型项目实战话说Snailn个月前,因工作需要准备自学spark，走大数据开发之路。n个月后的今天，自我
彭宇成·2020-07-15 13:03

Linux虚拟机基本环境配置（上）

仅此记录Android转大数据开发的每一步~~虚拟机的搭建，请参考：VMware虚拟机搭建主要配置：ip地址，主机名，网络映射。
鹭岛猥琐男·2020-07-15 13:56

【大数据学习】数学基础及应用

大数据时代已经被抄的很热了，这个行业目前已经逐渐成熟，想学习大数据开发的人越来越多。
云计算小百科·2020-07-15 12:43

数据团队思考：全栈型VS专精型，团队到底需要什么样的人？

其中，一位朋友是资深的大数据开发，多年工作经验均集中在大数据开发领域，目前已经是互联网TOP大厂之
木东居士·2020-07-15 12:57

机器学习的发展史

以掌握机器学习的概念、原理和算法为目标，适合大数据开发者、机器学习开发者学习观看。）机器学习是人工智能研究较为年轻的分支，它的发展过程大体上可分为4个时期。
云计算小百科·2020-07-15 12:13

离线和实时大数据开发实战 笔记四

维度建模:事实表:简单的说就度量值如销售金额维度表:就是5个WWhenWhereWhatWhoWhy星形架构和雪花架构:中间均为事实表，事实表一般都是最细维度，订单事实表一般都是订单项为基准。例如中间是订单金额，订单肯定会关联产品，那么产品可能就会有产品的名称，拥有者，注册地等。星形架构就是将这些信息都冗余在产品维度表中，而雪花架构就是在产品的维表中在建立外键关联另一张表。维度变化:1.当维度数据
新手路上的程序员·2020-07-15 11:53

离线和实时大数据开发实战 笔记三

hive分区:分区在创建表的时候使用PARTITIONEDBY从句定义CREATETABLElogs(tsBIGINT,lineSTRING)PARTITIONEDBY(dtSTRNG,countrySTRING);以dt和country分区分桶:在表或者分区中使用桶通常有两个原因：是为了高效查询,桶在表中加入了特殊的结构,Hive在查询的时候可以利用这些结构提高效率例如，如果两个表根据相同的字段
新手路上的程序员·2020-07-15 11:53

写给大数据开发初学者的话 | 附教程

导读：第一章：初识Hadoop第二章：更高效的WordCount第三章：把别处的数据搞到Hadoop上第四章：把Hadoop上的数据搞到别处去第五章：快一点吧，我的SQL第六章：一夫多妻制第七章：越来越多的分析任务第八章：我的数据要实时第九章：我的数据要对外第十章：牛逼高大上的机器学习经常有初学者在博客和QQ问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，
人在^O^旅途·2020-07-15 10:36

Hadoop完全分布式集群配置文件

本文代码出自《Hadoop大数据开发基础》第二章，把几个修改量大的文件代码给贴出来，便于给同样使用这本书的人复制，因为纯手敲很累还容易出错。
落叶阳光·2020-07-15 10:53

强！大数据之Hadoop伪分布式这样搭建，一次就成功了！

在这里我还是要推荐下我自己建的大数据学习交流裙：532+二一八加上147，裙里都是学大数据开发的，如果
姜果·2020-07-15 07:48

大数据开发套件DataIDE使用教程

阿里云大数据开发平台（DataIDE）是一款集数据开发、数据管理、离线调度、在线运维和数据集成工具为一体的在线大数据开发运维平台，它不仅能够解决上图中各种问题，还可以为用户节省很多的精力和资金。
阿里云小百科·2020-07-15 06:36

大数据开发之Hive篇----使用字符串函数和窗口函数处理表格

处理一份流量表，要求统计出熊猫tv在各月的流量以及按月份来累加总额数据部分数据样例是这样的，每个字段之间用\t来分隔熊猫tv2018-01-025快手2018-01-023YY2018-01-022熊猫tv2018-01-034抖音2018-01-0215快手2018-01-033YY2018-01-031抖音2018-01-0316熊猫tv2018-02-025快手2018-02-023YY20
豆豆总·2020-07-15 06:44

阿里云大学精品课程：深入理解阿里云数加大数据开发套件Data IDE-基本知识

阿里云大学精品课程：深入理解阿里云数加大数据开发套件DataIDE-基本知识写在最前面>>>进入了解更多>>>阿里云数加·MaxCompute大数据计算服务.基于阿里云数加·MaxCompute构建大数据仓库的开发工具利器
weixin_34348174·2020-07-15 05:43

我为什么要写：新书《离线和实时大数据开发实战》

新书《离线和实时大数据开发实战》购买链接（机械工业出版社官方淘宝店铺）感谢@薛奎和@空无大大写推荐书评。
weixin_34335458·2020-07-15 05:30

【大数据开发套件调度配置实践】——不同周期任务依赖配置

大数据开发过程中常遇到不同运行周期的任务进行依赖，常见天任务依赖小时任务、小时任务依赖分钟任务。那么如何通过大数据开发套件开发这两种场景呢？
weixin_34315189·2020-07-15 05:16

阿里云大数据ACP认证知识点梳理9——产品特点（DATA WORKS） ...

DataWorks（数据工场，原大数据开发套件）是阿里云数加重要的PaaS平台产品，它提供全面托管的工作流服务，一站式开发管理的界面，帮助企业专注于数据价值的挖掘和探索。
weixin_33967071·2020-07-15 04:25

视频教程-Hadoop大数据零基础入门课程-Hadoop

精通大数据开发、javaweb网站建设、信息系统项目建设等。百度阅读《Hadoop实操指南》作者。
学院导师-张伟洋·2020-07-15 04:41

WIN10下安装HBASE教程

工作需要，现在开始做大数据开发了，通过下面的配置步骤，你可以在win10系统中，部署出一套hadoop+hbase，便于单机测试调试开发。
weixin_30256505·2020-07-15 02:42

大数据方向学习面试知识图谱

大纲本系列主题是大数据开发面试指南，旨在为大家提供一个大数据学习的基本路线，完善数据开发的技术栈，以及我们面试一个大数据开发岗位的时候，哪些东西是重点考察的，这些公司更希望面试者具备哪些技能。
过往记忆·2020-07-15 02:02

Eclipse大数据开发环境搭建

一、安装jdk并配置环境变量下载安装jdk后，配置环境变量，主要配置JAVA_HOME\PATH\CLASSPATH；如：jdk安装目录为C:\ProgramFiles\Java\jdk1.7.0_03JAVA_HOME配置为：C:\ProgramFiles\Java\jdk1.7.0_03CLASSPATH配置为：;C:\ProgramFiles\Java\jdk1.7.0_03\lib（注意开
sunqingok·2020-07-14 23:56

大数据开发学习 重难点全面解析

大数据开发工程师，很多人都向往的职业，但总有这样那样的理由，在逼迫这自己放弃。明明知道大数据良好的前景，明明知道学完大数据可以找到一份很好的工作，但就是不会对自己下狠心。
乐姐·2020-07-14 23:33

项目实例：KNN预测电影网站用户性别（Hadoop学习笔记三）

通过学习《Hadoop大数据开发基础》这本书，整理了一下书本上的项目案例。让自己再梳理一下流程，也希望能给有需要的人提供一定的帮助，写的不好的希望大家提出来，一起进步。1学习目标理解KNN算法的原理。
Mecury_·2020-07-14 18:23

基于大数据平台分析前程无忧大数据招聘信息实现数据可视化

卸载现有jdk2、传输文件flume环境基于scrapy实现的数据抓取分析网页实现代码抓取全部岗位的网址字段提取代码改进利用hdfs存储文件导出数据存储数据数据分析思路分析具体要求分析“数据分析”、“大数据开发工程师
鱼小洲·2020-07-14 16:16

大数据开发环境搭建步骤

步：输入如下命令第3步：将hadoop安装包放在E盘muke8soft文件夹里第4步：按下键盘Alt+P,进入sftp第5步：输入如下命令第5步：输入下图命令（解压hadoop安装包到~/app里）【大数据开发学习资料领取方式
别盲目追风·2020-07-14 11:09

实时大数据开发实践

原创文章，转载请保留此文链接https://blog.csdn.net/flygfch/article/details/88188117，或访问本人博客http://fangchao.me/2018/12/07/realtime-big-data-best-practice.html本文主要从大数据起源谈起，介绍了几种主要的大数据处理框架，包括其中的容错机制，实现细节及原理等。再主要介绍了使用st
flygfch·2020-07-14 10:35

大数据开发之linux平台基础3

作业1：file.sh===========================#!/bin/bashif[$#-ne1];thenecho"参数个数必须为一个";exit;ficd$1forxin`ls`;doif[-f$x];thenecho$x>>~/1.txt;elseecho$x>>~/2.txt;fidone作业2：case2.sh============================#
arld83728·2020-07-14 07:57

大数据开发之linux平台基础1

大数据讲解：========================================大数据技术：大数据存储大数据计算大数据组件搭建在Linux上的Linux：========================================是操作系统内核Linux发行版：ubuntu//高校教学redhat//红帽Linux//非免费centos//企业用//稳定deepindebian麒麟
arld83728·2020-07-14 07:57

大数据开发之linux平台基础2

作业：========================================/boot启动Linux的核心文件/proc系统内存的映射process/run系统运行时临时数据/mnt挂载目录/usr存放用户的应用程序和文件以上目录含义在centos用户下创建用户centos2，sudouseraddcentos2在centos2家目录创建文件1.txt和文件夹aaa，sudotouch/
arld83728·2020-07-14 07:57

利用FRP实现内网穿透

情况：自己有两台电脑，一台16G内存的Dell，和一台8G内存的MacBookPro，因为自己学的是大数据开发，所以需要搭建大数据集群，因此在MacBookPro开发的话内存太小了，既要用虚拟机搭建大数据集群
Movle·2020-07-14 07:48

0基础入门大数据开发需要学习什么内容？Hadoop体系

0基础入门大数据开发需要学习什么内容？Hadoop体系大数据开发学习需要的基础知识，接下来继续介绍大数据技术学习的重点之一：Hadoop。
HAOXUAN168·2020-07-14 04:01
上一页 31 32 33 34 35 36 37 38 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他