【大数据开发】

Java的HashMap底层实现原理（jdk1.8）

标记：vivo提前批大数据开发岗问到HashMap底层的实现原理，回答的很烂，所以作此知识点的补充，以后在遇到java的这些高频知识点，争取能够流利的回答出来。
Autter·2020-09-17 07:18

Apache Kylin 在美团数十亿数据 OLAP 场景下的实践

大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-09-17 05:48

与大咖面对面，AWS x Unitimes深圳大数据交流会来啦！

金秋9月，AWS与Unitimes携手各大开源社区，将于9月25日在深圳为大数据开发者及科技爱好者带来干货满满的线下交流会。
Unitimes·2020-09-16 17:00

盘点大数据开发常用的编程语言

转自：http://www.pinlue.com/article/2020/09/0123/0511161659052.html
銨靜菂等芐紶·2020-09-16 13:27

数据清洗的几个要点-大数据开发流程

大数据开发流程：从数据采集-》数据清洗-》数据处理（分析，计算···）我们采集过来的数据是有问题的,其中可能有脏数据或者无效数据，所以我们想要进行数据处理之前，就要对采集过来的数据先进行一个数据清洗，把脏数据和无效数据过滤掉
ItStar_·2020-09-16 11:23

Flink实战：自定义KafkaDeserializationSchema(Java/Scala)

微信公众号：大数据开发运维架构关注可了解更多大数据相关的资讯。
陆继森·2020-09-15 21:15

星环一站式大数据平台-4.6

basicsoftwarebigdatahadooptdhtostranswarp大数据星环科技星环一站式大数据平台云操作系统服务优惠价:按服务商许可协议云服务器费用:查看费用立即部署产品详情星环一站式大数据平台星环一站式大数据平台是星环科技为公有云打造的一套完整的大数据开发平台
zangdalei·2020-09-15 18:43

【迭代式开发】v1架构设计文档——大数据开发实战项目（三）

文章目录前言一、背景二、名词解释三、设计目标3.1实现功能3.2性能指标Ⅰ.数据精确度Ⅱ.时间特性Ⅲ.适应性四、系统环境4.1相关软件和硬件4.2数据规模预估五、系统设计5.1基础介绍5.2系统架构图5.3系统流程图六、风险评估6.1已知的或可预知的风险6.2与其他系统可能的影响七、附件及参考资料前言如果你从本文中学习到丝毫知识，那么请您点点关注、点赞、评论和收藏大家好，我是爱做梦的鱼，我是东北大
爱做梦的鱼·2020-09-15 15:15

【迭代式开发】V1软件需求规格说明书——大数据开发实战项目（二）

文章目录前言1、引言1.1目的1.2项目背景1.3缩写说明1.4术语定义1.5参考资料1.6版本信息2、任务概述2.1系统定义2.1.1项目背景2.1.2项目要达到的目标2.1.3系统整体结构2.1.4系统各部分组成，与其他部分的关系，各部分的接口等2.2运行环境2.2.1设备环境2.2.2硬件环境2.2.3软件环境2.2.4网络环境2.2.5操作环境2.2.6应用环境2.3条件限制2.3.1软件
爱做梦的鱼·2020-09-15 15:15

【迭代式开发】v1前端界面展示+代码——大数据开发实战项目（四）

文章目录前言v1版本的前端界面模块参考赵磊：整体趋势、用户分析1、概况1.1、整体趋势2、用户分析2.2、活跃用户（其他界面大同小异，不贴图了）王阔：留存分析、终端属性分析1、留存分析1.1、留存用户1.2、用户新鲜度1.3、用户活跃度2、终端属性分析2.1、设备终端2.2、网络2.3、地域张志浩：渠道分析、用户参与度分析1、渠道分析1.1、渠道列表2、用户参与度分析2.1、使用时长（其他界面大同
爱做梦的鱼·2020-09-15 15:15

大数据开发工作辛苦吗？

大数据开发工作辛苦吗？现在的社会是一个高速发展的社会，科技发达，信息流通，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物。大数据并不在“大”，而在于“有用”。
大数据基础入门教程·2020-09-15 14:47

大数据到底应该如何学？

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
小山猪的沙塔·2020-09-15 12:19

大数据零基础学习，ZOOKEEPER入门

1、解压2、配置环境变量3、修改conf/zoo_sample.cfg文件为zoo.cfgserver为固定值1表示该主机的myid需要与数据目录下的myid文件中的值相同=kd01表示主机名【大数据开发学习资料领取方式
大数据—————————————————·2020-09-15 03:55

Spark修炼之道——Spark学习路线、课程大纲

Spark修炼之道（基础篇）——Linux大数据开发基础（15讲）、Li
weixin_34295316·2020-09-15 03:03

大数据学习基础知识总纲

大数据需要的语言Javajava可以说是大数据最基础的编程语言，据我这些年的经验，我接触的很大一部分的大数据开发都是从Jave
weixin_34151004·2020-09-15 03:01

大数据开发学习路线图（自学必备详细版）

在产业互联网时代，越来越多的企业开始通过大数据分析技术来提升企业竞争力。通过大数据及物联网技术，可以更精准地了解整个生产过程情况，借助大数据收集和分析每个环节的数据，找到具有价值的信息，优化工作，提升效率，制定更有针对性的营销方案，从而更好的增强企业在市场上的核心竞争力。系统学习大数据，通常要具备以下能力：1、逻辑分析能力逻辑分析能力是指正确、合理思考的能力。即对事物进行观察、比较、分析、综合、抽
weixin_33698043·2020-09-15 03:47

大数据学习路线图（知识体系整理）

概述本文针对想学习大数据技术从事大数据开发的人员总结了一套专业的学习路线图。
Eason聊IT·2020-09-15 03:15

零基础学习大数据：零基础学习大数据最完整的学习路线

最近很多人都想学习大数据开发，但是却不知道如何开始学习，今天软妹子专门整理了一份针对大数据初学者的大数据开发学习路线。
大数据开发交流·2020-09-15 03:32

学习大数据开发，一定不可错过的大数据组件图谱——很齐全

HDFSHadoopDistributedFileSystem，简称HDFS，是一个分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。GlusterFS是一个集群的文件系统，支持PB级的数据量。GlusterFS通过RDMA和TCP/IP方式将分布到不同服务器上的存储空间汇集成一个大的网络化并行文件系统。Ceph
juan333·2020-09-15 01:56

大数据开发架构——调度系统的分类解析

、DAG工作流类调度系统一、什么是调度系统调度系统，更确切地说，作业调度系统（JobScheduler）或者说工作流调度系统（workflowScheduler）是任何一个稍微有点规模，不是简单玩玩的大数据开发平台都必不可少的重要组成
故明所以·2020-09-15 01:51

linux下安装scala, scala IDE过程总结

hadoop与spark这两个大数据工具都是针对linux开发的.如果想要进行大数据开发,使用这两个工具.就不得不在使用linux系统,学会在linux下安装各种软件和开发语言.我的linux系统是ubuntu14
qq_23617681·2020-09-14 22:45

大数据开发预览器

/***大数据预览器.java*fileRead*Copyright(c)2018,IT版权所有.*@authorIT_BULL*/packagefileRead;importjava.io.File;importjava.io.RandomAccessFile;importjava.util.Arrays;importjava.util.Scanner;importjavax.swing.JOp
dizaoshen1316·2020-09-14 21:47

Spark实现WordCount的几种方式总结

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多惊喜大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
run_bigdata·2020-09-14 20:50

大数据开发笔记day01

今日所学的知识点：一.软件开发softwaredevelopment1.软件是什么？软件=数据（数字、文字、图像、音频、视频等）+程序（计算机能识别的二进制指令）2.软件的分类【1】系统软件windows系列Linux系列：centOS~面向企业服务器ubuntu~面向学校服务器……【2】应用软件office、聊天软件、视频软件、记事本等二.计算机的硬件常识存储器：（1）cache高速缓存~作用：
fightingteam·2020-09-14 16:43

大数据开发面试题--hive篇(2020最新版)

文章目录Hive基本概念什么是Hive?Hive的优缺点?Hive和传统数据库有什么异同？Hive架构原理?Hive架构简介Hive用户接口Hive元数据Hive的HSQL转换为MapReduce的过程？Hive底层与数据库交互原理?Hive有哪些方式保存元数据，各有哪些特点？Hive如何进行权限控制?Hive安装部署Hive安装部署简介Hive安装部署详情Hive数据仓库位置配置?Hive数据类
new个对象先·2020-09-14 16:57

大数据开发之Sqoop篇----sqoop export

sqoopexport是指将HDFS上的数据导出到RDBMS上，而在RDBMS上目标表要已经存在了。输入格式一般是：sqoopexportcommandargs/sqoop-exportcommandargs一般的参数(这里我只列出一些我们一定要用的参数，其余的可根据各自的业务场景来挑选)：--connect用于输入你要连接的数据库url以及相关数据的驱动标示，例如：jdbc:mysql://xx
豆豆总·2020-09-14 16:52

大数据开发面试题--HBase篇(2020年最新版)

文章目录HBase基本概念什么是HBase?HBase的特点是什么?HBase的使用场景HBase和Hive的区别？HBase相关组件HMasterHRegionServerClientZookeeperHDFS其它组件Write-AheadlogsRegionStoreMemStoreHFileHBase和传统数据库的对比HBase安装部署HBase安装部署简介HBase高可用配置HBase集群
new个对象先·2020-09-14 12:42

scala基础知识

scala是运行在JVM上的多范式编程语言，同时支持面向对象和面向函数编程早期scala刚出现的时候，并没有怎么引起重视，随着Spark和Kafka这样基于scala的大数据框架的兴起，scala逐步进入大数据开发者的眼帘
Hi_Shook·2020-09-14 08:36

集群的时间同步

仅此记录Android转大数据开发的每一步~~由于Linux运行时间久了，会造成时间的误差，需要配置时间同步。在没有联网的情况下，通常都是将其中的一台作为时间服务器，这样时间就能一致。
鹭岛猥琐男·2020-09-14 01:07

【大数据开发】HDFS——配置时间同步、动态节点上线和下线

一、配置时间同步（1）安装命令ntpyum-yinstallntp.x86_64（2）配置ntpservervi/etc/ntp.confyy复制一行p粘贴#restrict192.168.1.0mask255.255.255.0nomodifynotraprestrict192.168.10.131mask255.255.255.0nomodifynotrap修改结果如下图（3）启动ntp协议并
这个妹妹我见过·2020-09-14 01:19

日均5亿，京东 Elasticsearch 架构演进之路

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-09-13 23:10

大数据第一季--Hadoop（day4)-徐培成-专题视频课程

大数据第一季--Hadoop（day4)—2028人已学习课程介绍大数据第一季--Hadoop（day4)课程收益大数据第一季--Hadoop（day4)讲师介绍徐培成更多讲师课程IT十八掌创始人兼首席大数据开发技术金牌讲师
十八掌教育·2020-09-13 20:39

2017年Go语言入门教程-徐培成-专题视频课程

讲师介绍徐培成更多讲师课程IT十八掌创始人兼首席大数据开发技术金牌讲师，曾任驿统金（上海）网络技术有限公司总经理，主导与光大银行总行重点合作的阳光驿站金融结算系统的研发，并
十八掌教育·2020-09-13 20:07

大数据周末班教程-徐培成-专题视频课程

讲师介绍徐培成更多讲师课程IT十八掌创始人兼首席大数据开发技术金牌讲师，曾任驿统金（上海）网络技术有限公司总经理，主导与光大银行总行重点合作的阳光驿站金融结算系统的研发，并指导团队在阿里公有云
十八掌教育·2020-09-13 20:07

大数据开发环境的搭建(原生版)

集群环境搭建1:注意事项1.1windows系统确认所有的关于VmWare的服务都已经启动1.2确认好VmWare生成的网关地址1.3确认VmNet8网卡已经配置好了IP地址和DNS2:复制虚拟机2.1将虚拟机文件夹复制三份，并分别重命名,并使用VM打开重命名2.2分别设置三台虚拟机的内存需要三台虚拟机,并且需要同时运行,分别设置为422在分配的时候,需要在总内存大小的基础上,减去2G-4G作为系
大数据封神之路·2020-09-13 20:38

大数据开发之flume高可用的搭建

高可用架构图下面我们搭建一个高可用的FlumeNG集群，架构图如下所示：图中，我们可以看出，Flume的存储可以支持多种，这里只列举了HDFS和Kafka（如：存储最新的一周日志，并给Storm系统提供实时日志流）。角色分配Flume的Agent和Collector分布如下表所示：名称HOST角色Agent1node01WebServerCollector1node02AgentMstr1Coll
fa124607857·2020-09-13 18:32

大数据第三季--flume（day2)-徐培成-专题视频课程

大数据第三季--flume（day2)—1985人已学习课程介绍大数据第三季--flume（day2)课程收益大数据第三季--flume（day2)讲师介绍徐培成更多讲师课程IT十八掌创始人兼首席大数据开发技术金牌讲师
十八掌教育·2020-09-13 18:07

零基础学Java，掌握Java基础难不难？

目前Java广泛用于Web开发、大数据开发、Android开发以及各种后端服务开发领域，通常情况下，学习Java都从Web开发开始学起。
JAVA高级编程·2020-09-13 18:55

轻松getHadoop大数据开发技术，这一篇文章够了

Hadoop是一个开源框架，可编写和运行分布式应用处理大规模数据。分布式计算是一个宽泛并且不断变化的领域。具备以下4个特性：1)方便：Hadoop运行在由一般商用机器构成的大型集群上，或者云计算服务上，比如EC2。2)健壮：Hadoop致力于在一般商用硬件上运行，其架构假设硬件会频繁失效，Hadoop可以从容地处理大多数此类故障。3)可扩展：Hadoop通过增加集群节点，可以线性地扩展以处理更大的
qunqun8889·2020-09-13 12:02

尚硅谷直播课:（韩顺平）2020大数据学习路线图、大数据开发课程笔记

尚硅谷直播课:2020大数据学习路线图,大数据开发链接：https://pan.baidu.com/s/18Feqa_63640xPB0fYJ8Ttg提取码：9bnr(此链接放这只为方便自己查阅，无恶意分享他人劳动成果之意
ningmengshuxiawo·2020-09-12 19:13

从小白到大数据开发大牛的5个阶段

大数据已成为当下互联网领域的炙热话题，那么一些想朝大数据方向发展的人应该怎样学习大数据开发呢？下面为大家介绍大数据开发的学习步骤！
bobo79888·2020-09-12 19:35

找到100亿个URL中重复的URL以及搜索词汇的top K 问题

前天去腾讯面试大数据开发，问到的题目，总结一下。题目一、有一个包含100亿个URL的大文件，假设每个URL占用16B,请找出其中所有重复的URL。
扎克begod·2020-09-12 19:05

年薪达不到25W大数据工程师、拿不到Offer全额退款

阿里、腾讯、滴滴、美团......几乎现在所有的一线大厂的高级JAVA开发工程师，都要求具备分布式、大数据开发经验。
无精疯·2020-09-12 19:04

Hadoop+eclipse大数据开发环境开发搭建

一虚拟机安装centos71然而…成功得到一个大大的红色叉叉，emmm…,咱不怕，看见红色箭头指向的文件夹名称没有，在上面的安装目录上notepad++打开它人家长这样式儿哟，不要看错人家将vmci0.present=‘TRUE’修改成’FALSE’将图形界面更改为命令行界面1、查看当前的默认界面形式：systemctlget-default结果出现：graphical.target(图形化界面)
方圆猿·2020-09-12 18:53

作为一个Android开发者，你迷茫了吗？

在这里我还是要推荐下我自己建的大数据学习交流qq裙：957205962，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相关的），包括我自
数据工程师大牛·2020-09-12 15:09

视频教程-Python开发零基础入门-Django和前后端项目-Python

和前后端项目马哥教育Python金牌讲师，国内知名Python技术专家，在Python全栈、Python运维开发、Python数据挖掘、爬虫、人工智能等领域有深入研究，有15年Python开发经验及JAVA大数据开发经验
weixin_33681894·2020-09-12 11:35

Spark，Hadoop，Hive ，哪个更香？

众所周知，大数据开发和分析、机器学习、数据挖掘中，都离不开各种开源分布式系统。最常见的就是Hadoop、Hive、Spark这三个框架了。
过往记忆·2020-09-12 11:41

1. Kafka 集群安装

0.规划注意替换路径，本文中安装路径为/data/wow/moudle/kafka参考教程：尚硅谷大数据开发视频localhost-100localhost-102localhost-1691.下载http
Javv·2020-09-12 10:38

大数据开发之Hadoop篇----hadoop和lzo结合使用

hadoop-lzo经过我上一篇博文的介绍，大家都知道在我们大数据开发的过程中，其实我们都会对数据进行压缩的，但不同的压缩方式会有不同的效果，今天我来介绍一下lzo这种hadoop原生并不支持的压缩方式的配置和使用
豆豆总·2020-09-12 07:48

腾讯云发布全链路数据开发平台WeData，大数据开发迈入新时代

借助WeData，企业数据开发门槛降低60%构建大数据开发平台是企业数字化转型的关键步骤，然而从数据集成到开发调度
CSDN 程序人生·2020-09-12 05:13
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他