【大数据开发】

大数据开发之Spark篇----使用Dataset中遇到的小坑

Dataset的使用按照官网上面的提示，我将DataFrame转换成Dataset来使用，代码如下：packagecom.doudou.www.sql01importorg.apache.spark.sql.{Encoders,SparkSession}objectJDBCApp{defmain(args:Array[String]):Unit={valspark=SparkSession.bui
豆豆总·2020-08-03 07:53

SpringBoot构建大数据开发框架

为什么使用SpringBoot1、web工程分层设计，表现层、业务逻辑层、持久层，按照技术职能分为这几个内聚的部分，从而促进技术人员的分工2、需要各种XML配置，还需要搭建Tomcat或者jetty作为容器来运行，每次构建项目，都需要经历此流程3、一个整合良好的项目框架不仅仅能实现技术、业务的分离，还应该关注并满足开发人员的“隔离”springBoot是什么SpringBoot是由Pivotal团
weixin_34306676·2020-08-03 07:48

数据仓库和数据集市建模体系化总结

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源来源:穆晨作者:http://suo.im/5ZcDu2大数据技术与架构点击右侧关注，大数据开发领域最强公众号！
大数据技术与架构·2020-08-03 05:35

数据仓库和数据集市建模体系化总结

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源来源:穆晨作者:http://suo.im/5ZcDu2大数据技术与架构点击右侧关注，大数据开发领域最强公众号！
大数据技术与架构·2020-08-03 05:35

SparkSQL内核解析之逻辑计划

大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-08-03 05:03

Hive小知识之分桶抽样

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-08-03 05:32

Hive小知识之分桶抽样

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-08-03 05:32

入门到精通：资深程序员规划JAVA大数据学习路线（附视频教程）

本文主要针对从事大数据开发的程序员们整理了整套的大数据学习相关的路线图和知识材料，希望能帮助到大家。
金罗老师·2020-08-03 03:35

从0到1，大数据开发实战进阶！

最近到了招聘旺季，发现一些朋友很纠结一个问题：做后端开发和做大数据开发？这个问题还是比较普遍的。
fuyipingwml1976124·2020-08-03 00:49

SSM 轻量级框架 应用实战

安装MySQL8JDK12下载SpringMVC课工场视频资料链接提取码:30fb博客链接idea从菜鸟到大神SpringMVC超市会员管理系统springmvc课前知识补充Java大数据开发学习方法总结
a李凯雄℡¹⁸⁵⁶⁶⁷⁷²³²⁴·2020-08-02 19:49

（文末赠书）亲谈 Java 程序员的职业方向与核心竞争力

每每自己把简历给面试官时，对方总以为我是做大数据开发的，而面试完后，对方给的offer不是Hadoop工程师的职位，就是大数据平台架构部的职位。我觉得挺有趣的，因为每次我投递
code小生_·2020-08-02 17:42

java大数据开发训练营--Java语言基础

题记：文章内容输出来源：拉勾教育大数据开发高薪训练营本篇文章是java学习课程中的一部分笔记。
Laozizuiku·2020-08-02 12:27

java大数据开发训练营--Java核心类库（下）

题记：文章内容输出来源：拉勾教育大数据开发高薪训练营本篇文章是java学习课程中的一部分笔记。
Laozizuiku·2020-08-02 12:27

java大数据开发训练营--Java面向对象编程

题记：文章内容输出来源：拉勾教育大数据开发高薪训练营本篇文章是java学习课程中的一部分笔记。本博文主要是记录一些基础的知识点，通过实操更容易理解面向对象编程面向对象编程的概念•万物皆对象。
Laozizuiku·2020-08-02 12:27

大数据、云计算该如何学习？

大数据之Linux+大数据开发篇【大数据开发学习资料领取方式】：加入大数据技术学习交流群458345782，点击加入群聊，私信管理员即可免费领取阶段一、大数据、云计算-Hadoop大数据开发技术课程一、
yyyyyyyyyooi·2020-08-01 08:24

写给大数据开发初学者的话 | 附教程

第一章：初识Hadoop第二章：更高效的WordCount第三章：把别处的数据搞到Hadoop上第四章：把Hadoop上的数据搞到别处去第五章：快一点吧，我的SQL第六章：一夫多妻制第七章：越来越多的分析任务第八章：我的数据要实时第九章：我的数据要对外第十章：牛逼高大上的机器学习经常有初学者在博客和QQ问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很
大数据首席数据师·2020-08-01 07:43

大数据开发面试总结

大数据开发面试总结上海合合实习面试一面（电话died）1、熟悉那些java的list集合2、ArrayList和LinkedList的区别？
Macan_ML·2020-08-01 05:06

大数据开发总结

大数据开发总结个人总结kafka1、kafka的消费者组是如何消费的？2、kafka为什么有消费者组？java1、进程间通信的方法，共享内存这种方式要注意什么问题？
Macan_ML·2020-08-01 05:35

2019春招——Vivo大数据开发工程师面经

Vvio总共就一轮技术面+一轮HR面，技术面总体而言，比较宽泛，比较看中基础，面试的全程没有涉及简历上的东西(都准备好跟他扯项目了，感觉是抽取的题库。。。)具体内容如下：1.熟悉Hadoop哪些组件？答：hdfs、yarn、MapRedue、Hive2.讲一讲yarn的调度过程？答：blabla。。。3.yarn的调度器有哪些？答：FIFO、多队列分开调度、CapacityScheduler、Fa
weixin_30755393·2020-08-01 03:55

后端，还是大数据？

最近到了招聘旺季，发现一些朋友很纠结一个问题：做后端开发和做大数据开发？这个问题还是比较普遍的。
过往记忆·2020-08-01 02:46

Sqoop 使用shell命令的各种参数的配置及使用方法

设为星标”回复”资源“获取更多资源本文作者：SheepSun本文链接：https://www.cnblogs.com/yangxusun9/p/12558683.html大数据技术与架构点击右侧关注，大数据开发领域最强公众号
大数据技术与架构·2020-08-01 02:42

Kafka消费者分区分配策略及自定义分配策略

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-08-01 02:41

Yarn 使用 Cgroup 实现任务资源限制

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源本文作者：http://suo.im/5DcrnH大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-08-01 02:41

分析和定位线上作业 OOM 问题利器-MAT

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
大数据技术与架构·2020-08-01 02:41

Flink成为字节跳动流处理唯一标准

大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
run_bigdata·2020-07-31 23:15

到底什么才是大数据开发？

♥️大数据开发是干什么的？大数据作为时下火热的IT行业的词汇，随之而来的数据开发、数据仓库、数据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。
qq_43958076·2020-07-31 23:53

大数据开发学习时间，学习大数据开发需要多久

当下互联网行业大数据火了，随之大数据开发人才突然编变成了紧缺人才。因为市场上没有对口的大数据开发专业的毕业生，所以对于很多想要进入大数据开发行业的人来说，参加大数据培训，是目前主要的方式。
qq_43958076·2020-07-31 23:52

怎样进行Java大数据入门知识学习

分享之前我要推荐下我自己建的大数据开发学习群：119599574，专注大数据分析方法,大数据编程，大数据仓库，大数据案例，人工智能,数据挖掘都是纯干货分享都是学大数据开发的，如果你正在学习大数据，欢迎初学和进阶中的小伙伴
大数据开发交流·2020-07-31 23:00

智慧园区中心服务平台建议方案

第1章项目概述1.1项目背景发展大数据开发与应用、生物技术和知识产权转化培育等虚拟经济与实体经济有机融合的新兴经济业态。
llooyyuu·2020-07-31 19:23

2019 大数据学习入门必备规划

其他（数据挖掘本质算是机器学习，不过和数据相关，也可以理解为大数据的一个方向吧）一、大数据工程师的技能要求二、大数据学习路径在这里还是要推荐下我自己建的大数据学习交流群:199427210，群里都是学大数据开发的
铁拳虎·2020-07-31 18:19

【实时数仓篇】（04）利用 Flink 实现实时状态复用场景

写在前面：我是「云祁」，一枚热爱技术、会写诗的大数据开发猿。昵称来源于王安石诗中一句[云之祁祁，或雨于渊]，甚是喜欢。
云 祁·2020-07-31 13:12

2019大数据工程师必备技能_0基础学大数据开发

摘要：我们在学习大数据开发前需要先找到适合自己的方式方法，首先需要审视一下自身的情况，是否是以兴趣为出发点，对大数据是不是自己是真的感兴趣吗，目前对大数据的了解有多少，自己的学习能力和理解能力是否适合学习
qq_43958076·2020-07-31 12:48

大数据开发平台(Data Platform)在有赞的最佳实践

在统一的大数据开发平台产生之前，面临一系列的问题：多个开发和调度入口，不同的业务部门之间的项目或组件很难复用，同时带来繁
weixin_34419326·2020-07-30 20:04

2018年大数据面试题总结

目前面试了多家大数据开发工程师，成长了很多，也知道了很多知识，下面和大家分享一下我遇到的面试题和答案。1.kafka集群的规模，消费速度是多少。答：一般中小型公司是10个节点，每秒20M左右。
~小辉辉·2020-07-30 18:10

一文了解 Hadoop 运行机制

大数据技术栈在当下已经是比较成熟的了，Hadoop作为大数据存储的基石，其重要程度不言而喻，作为一个想从java后端转向大数据开发的程序员来说，打好Hadoop基础，就相当于夯实建造房屋的地基，本文以上图结构为基本
a781613438·2020-07-30 14:38

如何在mac上使用idea做大数据开发

1软件包下载链接地址::https://pan.baidu.com/s/17Ouja530SbOI_8C6tyePow密码:k8oujdk1.8(jdk1.8.0_231)idea(包括2018,2019)(ideaIC-2019.3.3/ideaIC-2018.3.5)汉化包:汉化包.rarmaven3.6.3(apache-maven-3.6)2jdk的安装第一:把包直接放到自定义目录下第二:
千锋教育官方博客·2020-07-30 13:18

Windows下大数据开发环境安装和配置详细步骤（Java、Maven、IDEA）

目录前言一、Java下载安装和配置1、下载Java安装包2、安装Java3、配置Java环境变量4、验证Java是否安装成功二、Maven下载安装和配置1、下载Maven安装包2、安装Maven3、配置Maven环境变量4、验证Maven是否安装成功三、IDEA下载安装和配置1、下载安装2、IntelliJIDEA环境设置1）配置JDK2）配置Maven3）设置编译环境前言上周末在进行虚拟机升级的
都市狼人·2020-07-30 13:56

#数据小白的面试路#NO.1_震惊！某硕士学习一周就敢去面小米？！

第一次面试——小米大数据开发（凉凉）人生总归是要勇敢地迈出第一步，以下是第一次面试的记录。留作对自己日后的时时提醒！
鸭蛋儿·2020-07-30 13:47

大数据告诉你：2018年该学习什么技术

在这里还是要推荐下我自己建的大数据学习交流群:199427210，群里都是学大数据开发的，如果你正
金罗老师·2020-07-29 23:54

【御风大数据】linux教程-大数据定制版

linux教程-大数据定制版很多同学跟我说，他想学大数据技术进军大数据开发行业。
御风大世界·2020-07-29 22:55

【大数据】什么是大数据开发套件DataIDE

大数据开发套件(DataIDE)是阿里云数加重要的Paas平台产品，是”DataWorks”中最重要的核心组件。提供全面托管的工作流服务，一站式开发管理的界面，帮助企业专注于数据价值的挖掘和探索。
开发者社区小百科·2020-07-29 20:10

大数据内推就一定能进？

最近到了招聘旺季，发现一些朋友很纠结一个问题：做后端开发和做大数据开发？这个问题还是比较普遍的。
JAVA葵花宝典·2020-07-29 17:13

大数据开发-问题总结

1，利用scala语言开发spark程序实现单词统计–集群运行打成jar包提交到集群中运行运行出错。原因：类名称写错了。获得需要运行的类的类名：Java》选择主类名》右键》CopyReference错误的：com.kaikeba.WordCountOnSpark正确的：scala.com.kaikeba.WordCountOnSpark[hadoop@node01~]$spark-submit--
weiwei_js·2020-07-29 17:21

Java初学者可以关注哪些书籍

开发方向来制定学习计划，一方面原因是JavaWeb相关的技术体系已经比较成熟了，有大量的案例可以参考，另一方面JavaWeb开发领域的就业岗位比较多，比较容易实现就业，最后JavaWeb开发技术与移动互联网开发和大数据开发也都有一定的关联性
顾延笙·2020-07-29 16:00

Eclipse的安装配置 - Windows

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
小山猪的沙塔·2020-07-29 14:52

这可能是JAVA程序员进入BAT年薪80w+最好的一次机会！

因为JAVA程序员转型大数据开发具有天然进阶优势，不仅仅是前景和薪资。
JAVA葵花宝典·2020-07-29 13:56

Spark Core面试篇01

SparkCore面试篇01随着Spark技术在企业中应用越来越广泛，Spark成为大数据开发必须掌握的技能。
weixin_41267871·2020-07-29 12:44

Spark修炼之道（基础篇）——Linux大数据开发基础：第二节：Linux文件系统、目录（一）

本节主要内容如何获取帮助文档Linux文件系统简介目录操作访问权限1.如何获取帮助文档在实际工作过程当中，经常会忘记命令的使用方式，例如ls命令后面可以跟哪些参数，此时可以使用man命令来查看其使用方式，例如//man命令获取命令帮助手册xtwy@ubuntu:~$manls可以使用键盘上的来显示下一行或上一行命令，也可以使用进行上一页或下一页（屏）命令的查看，另外空格鍵也可以用来显示下一屏的命令
zhouzhihubeyond·2020-07-29 05:53

2019年美团，滴滴，蘑菇街Java大数据面经分享！

目前从事Java大数据开发相关的工作，对大数据spark等分布式计算领域有着浓厚的兴趣，欢迎一起交流，一起进步。本文为作者投稿，有兴趣投稿的同学，请在后台回复投稿！
架构师小秘圈·2020-07-29 05:23

Hadoop2.6.5/Spark1.6.3 HA集群构建

在基于Spark的大数据开发中，我们确定使用Centos6.5,在intellijIDEA中使用Scala语言进行开发。
易悠·2020-07-29 01:19
上一页 29 30 31 32 33 34 35 36 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他