A大数据开发

scala概述入门

由于做大数据开发，使用最多的语言就是scala和python，java。刚开始由于spark是scala开发的，就去学习了scala，然后看spark的源码。
若与·2023-03-29 06:05

推荐：成为大数据开发全能高手的100篇文章

开源（OpenSource）用之于大数据技术，其作用有二：一方面，在大数据技术变革之路上，开源在众人之力和众人之智推动下，摧枯拉朽，吐故纳新，扮演着非常重要的推动作用。另一方面，开源也给大数据技术构建了一个异常复杂的生态系统。每一天，都有一大堆“新”框架、“新”类库或“新”工具，犹如雨后春笋般涌出，乱花渐欲“迷”人眼。为了掌控住这些“新玩意”，数据分析的达人们不得不“殚精竭虑”地“学而时习之”。无
haotian1685·2023-03-29 04:49

Hadoop的概念及架构介绍

Hadoop的概念及架构介绍Hadoop是大数据开发所使用的一个核心框架。使用Hadoop可以方便的管理分布式集群，将海量数据分布式的存储在集群中（hdfs），并使用分布式程序来处理这些数据。
江河或野花·2023-03-28 19:06

大数据开发实用命令收集

系统命令：xargsxargs可以接收管道中的字符串，并将字符串用空格分割，传递给之后的命令。-decho"12#34#56"|xargs-d'#'echo123456-p执行命令前会先显示完整的命令，确认后才会执行-necho"12#34#56"|xargs-n1-d'#'echo123456rsyncfree-m查看机器内存情况hadoop生态相关命令：hdfs相关hadoopfs=hdfsd
一米的光年·2023-03-28 03:52

零基础学Java，掌握Java基础难不难？

目前Java广泛用于Web开发、大数据开发、Android开发以及各种后端服务开发领域，通常情况下，学习Java都从Web开发开始学起。
java高级编程中心·2023-03-27 03:26

渣渣秋招路

背景：211渣硕，传统万金油专业9.19第一碗凉面微盟大数据开发微盟面我的小哥哥超级超级好。
niffler_·2023-03-26 11:47

外企面试，哪有你想象的那么难!（已收埃森哲、NTTDATA等8家外企offer）

从大二开始自学Java并开始了第一份实习，后面也是通过自学转到了大数据，之前在一家大数据独角兽实习，现在在一家西班牙公司就职大数据开发。
风平浪静如码·2023-03-26 07:16

大数据学习路线，芜湖 起飞~

本文已收录于Github开源项目：github.com/hansonwang99/JavaCollection，里面有各大方向编程的详细自学路线、面试题和面经、编程资料及系列技术文章等，资源持续更新中大数据开发基
CodeSheep程序羊·2023-03-25 17:49

学习大数据 推荐用这套大数据学习路线

我们的大数据开发课程，真实商业数源授课，致力于大数据系统集能及区块链为辅，全程企业真实项目深度实操，带领学生一站式搞定匪夷所思的大数据开发技术。
QFdongdong·2023-03-25 09:10

hadoop大数据入门篇-hdfs（一）

HDFS是大数据开发入门必备掌握知识，今天给大家介绍下hadoop一些常用的命令点击链接，从零开始学习大数据1.查看hadoop版本hadoopversion2.创建hdfs文件夹hadoopfs-mkdir-phdfs
呆子_23c9·2023-03-25 00:10

Java现在好找工作吗？

Java庞大的市场占有率和需求，它依然在保持着更新迭代，依然是最常用的底层开发语言，基于其安全性、开放性、稳定性和跨平台性与云计算高可靠、高拓展的优势相得益彰；同时基于云服务平台的拓展性，成功链接到了大数据开发应用领域
北大青鸟天府校区·2023-03-24 01:48

统一观测丨使用 Prometheus 监控 E-MapReduce，我们该关注哪些指标？

EMR简介开源大数据开发平台E-MapReduce（简称“EMR”）作为大数
阿里云云栖号·2023-03-23 21:58

大数据开发必读书目（持续更新）

在这里插入图片描述1.HadoopHadoop大数据开发案例教程与项目实战.pdfHadoop技术内幕深入解析YARN架构设计与实现原理.pdfHadoop技术内幕深入理解MapReduce架构设计与实现原理
鄙人王道长·2023-03-23 21:00

我的新书《Flink大数据分析实战》出版啦

本书基于Flink1.13.X最新版本编写，作为Flink的入门书，主要使用函数式编程语言Scala进行讲解，知识面比较广，涵盖了当前整个Flink生态系统主流的大数据开发技术。
大数据张老师·2023-03-23 20:54

大数据行业怎么样？真的好找工作么？

大数据开发主要是负责大数据挖掘，大数据清洗处理，大数据建模等，负责大规模数据的处理和应用，工作以开发为主与大数据可视化分析工程师相互配合，从数据中挖掘出价值为企业业务发展提供支持。大数据开发做什么？
我想去吃ya·2023-03-23 11:49

零基础学习大数据可以找到工作么？

每年都有大量的人才涌入到大数据行业中，对于现在刚刚入场大数据开发技术的人来说，现在还有机会吗？
我想去吃ya·2023-03-23 11:49

都说大数据就业好，为什么数据分析这么难就业？

大数据和数据分析还是两个不同的方向的哈~大数据开发做什么？大数据开发分两类，编写Hadoop、Spark的应用程序和对大数据处理系统本身进行开发。
我想去吃ya·2023-03-23 11:49

大数据方向学习方向和目标

一、学习目标企业级大数据工程师实训以Java，Python，数据库，Linux为技术基础，提高学员大数据开发技术水平及综合素质为根本目标。
小白保姆·2023-03-23 07:13

浅谈 Spark 在大数据开发中的一些最佳实践

一、字段名规范‍字段名应足够简洁清晰，使阅读者能快速理解字段内容。相似字段名应加上数据源、级别名、细分属性加以区分，例如我们有Google的click数据和内部的click数据，那么就应该使用PARTNER_CLICK,INTERNAL_CLICK来命名不同的点击数据。二、业务字典对于公司已有统一命名的专业术语，应采用此命名方式，例如GMB。对于公司级别命名并未统一的专业术语，在domain或te
Python知识大全·2023-03-22 17:50

两年车间技术员转型大数据开发，说说转型这点事儿

在6月份找的我规划学习路线，8月份就收了联想等offer了，可见学习毅力之强大，目前在广州的某大型银行做大数据开发。折腾转型,我不要你觉得，我要我觉得--黄晓明大家好，我是黄晓明。
程序员峰哥·2023-03-22 04:24

Spark2.x精通：TaskScheduler的Task任务提交源码剖析

微信公众号：大数据开发运维架构关注可了解更多大数据相关的资讯。
大数据开发运维架构·2023-03-19 18:04

大数据开发：Azkaban和Oozie调度系统对比

今天的大数据开发分享，我们就主要来讲讲Azkaban和Oozie调度系统对比。所谓DAG工作流类调度系统，这一类系统的方向，重点定位于任务的调度依赖关系的正确处理，分片执行的逻辑通常不是系统关注的
成都加米谷大数据·2023-03-19 09:10

纠结做大数据开发？大数据运维？还是大数据分析？

经常有同学在后台留言问我，自己觉得大数据行业薪资很高，想往大数据方向发展，但不知道该学哪些知识，应该具备的技能树是啥样的。迷茫和焦虑都要溢出屏幕了……如果觉得薪资高就业好，想往大数据方向发展，也不是不可以。那么你的专业是计算机相关专业？还是数学/统计专业？再不然工程专业，就是想转行干IT？那你对计算机的兴趣是什么呢？我列举下大数据岗位有哪些，你可以根据你的兴趣来找对应关系：对操作系统、硬件、网络
BigDataSam·2023-03-18 07:32

商业数据分析入门笔记——以双十一优惠券案例为例

大数据的职业蓝图话说大数据这几年非常火爆、既有营销体系的商业数据分析职位，也有研发体系的大数据开发工程师，像产品经理一样，只要你有心，都可以有自己的发展道路。
卷毛角大丁·2023-03-17 22:19

大数据架构进阶目录

从事了多年的大数据开发，不甘心一直做小罗罗，希望在更上一层。
风轻云淡lq·2023-03-17 10:13

选择java大数据开发方向学习，应该怎么规划学习路线

Java是目前使用广泛的编程语言之一，具有的众多特性，特别适合作为大数据应用的开发语言。Java语言功能强大和简单易用，不仅吸收了C++语言的各种优点还摒弃了C++里难以理解的多继承、指针等概念。Java跨平台应用能力，比C、C++更易用更容易上手。同时还具有简单性、面向对象、分布式、健壮性、安全性、平台独立与可移植性、多线程、动态性等特点。但Java语言也仅是大数据技术体系下的一个技术选型，Py
我想去吃ya·2023-03-15 11:07

大数据开发 - Java入门5

目录标题流程控制语句1、Scanner输入语句2、分支语句2.1if-else2.2switch-case2.3while循环流程控制语句1、Scanner输入语句顺序结构：从上到下，一步步执行importjava.util.Scanner;publicclassTestone{publicstaticvoidmain(String[]args){Scannerinput=newScanner(S
海星？海欣！·2023-03-14 16:02

马蜂窝毕博：分析完这9点工作原理，我们最终选择了 Apache SeaTunnel！

incubator-seatunnel讲师简介毕博马蜂窝数据工程师在10月15日，ApacheSeaTunnel&IoTDB联合Meetup期间，马蜂窝网数据工程师毕博给大家介绍了SeaTunnel的基本原理和相关企业实践思考、马蜂窝大数据开发调度平台典型场景下的痛点和优化思考
SeaTunnel·2023-03-14 15:58

大数据工程师、BI工程师、数据库工程师什么区别？

大数据开发工程师、BI工程师、数据仓库工程师、ETL工程师、有什么区别？今天我们来看一位大神如何解释。BI,商务智能。BI工程师即为从事商务智能行业的工程师。
傲娇的程序媛·2023-03-13 00:09

大数据开发-Spark-RDD的持久化和缓存

1.RDD缓存机制cache,persistSpark速度非常快的一个原因是RDD支持缓存。成功缓存后，如果之后的操作使用到了该数据集，则直接从缓存中获取。虽然缓存也有丢失的风险，但是由于RDD之间的依赖关系，如果某个分区的缓存数据丢失，只需要重新计算该分区即可。涉及到的算子：persist、cache、unpersist；都是Transformation缓存是将计算结果写入不同的介质，用户定义可
Hoult-吴邪·2023-03-12 08:36

自学Python迷茫了怎么办

Python是当前流行程度比较高的全场景编程语言，可以用于Web开发、大数据开发、人工智能开发和嵌入式开发等
甜茸·2023-03-12 02:53

大数据开发-分布式文件系统HDFS

HDFS,全称HadoopDistributedFileSystem,意思是分布式文件系统。Hadoop分布式文件系统是指被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。大数据处理的主要应用场景包括数据分析、数据挖掘与机器学习。数据分析主要使用Hive、SparkSQL等SQL引擎完成；数据挖掘与机器学习则有专门的机器学习框架TensorFlow、Mahout以
jason_syf·2023-03-11 15:59

大数据开发：Hadoop与Spark如何设计容错

今天的大数据开发学习分享，我们就来讲讲Hadoop与Spark是如何设计容错的？一般来说，关于容错，最朴素的想法就是通过下面的步骤实现状态与容错：①暂停所有数据的接收。
成都加米谷大数据·2023-03-11 14:08

使用VNC远程连接Ubuntu - 内网穿透实现公网远程办公

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
一头小山猪·2023-03-11 01:03

挑战海量数据：基于Apache DolphinScheduler对千亿级数据应用实践

点亮⭐️Star·照亮开源之路GitHub:https://github.com/apache/dolphinscheduler精彩回顾近期，初灵科技的大数据开发工程师钟霈合在社区活动的线上Meetup
DolphinScheduler社区·2023-03-10 15:11

Java从入门到精通一步到位

课程主要有以下几个特点：•从事云计算、大数据开发工作必备技能•6大阶段，26门免费课程，871课时，助您全面掌握Java开发技能•每阶段包含初、中、高三个难度等级考试，全方位自测掌握
Java架构蒙塔·2023-03-09 21:45

大数据开发和大数据分析应该怎么选择？

主要还是看你个人的兴趣和未来的发展方向，下面给你罗列一下大数据开发和数据分析都是做什么的以及需要掌握哪些技能，然后你自己再选择一下喜好的方向~大数据开发主要是负责大数据挖掘，大数据清洗处理，大数据建模等
我想去吃ya·2023-03-01 07:17

Java面向对象之封装(二)

Java日报部门：**大数据开发六部姓名：cqmfx(阡陌飞絮)日期：2020.10.31大纲一、成员变量和局部变量的初始化二、类的加载内存图三、值传递和引用传递四、方法的递归，斐波那契数列五、包装类，
cqmfx·2023-02-28 22:30

大数据开发学习之Spark系统架构解读

今天的大数据开发学习分享，我们来对Spark系统架构做一个详细的介绍。Spark性能优势的原因Spark是UCBerkeleyAMPlab所开源的类HadoopMapReduce的通用并行框
加米谷大数据张老师·2023-02-26 07:18

女生学习大数据专业未来前景怎么样

而据第三方职友集最新统计，大数据开发人才的平均薪资可以达到30-50k，随着工作经验的增加，薪资更是可以轻
我想去吃ya·2023-02-24 18:29

2021年末大盘点。IT行业那些薪资高前景好的岗位，你知道几个？

大数据开发工程师从每年公布的IT从业人员薪金调查中可以看出，大数据从业人员面临巨大缺口。目前的两
银盾泰安·2023-02-22 09:05

神策沙龙回顾：大数据技术和金融、房产、理财的深度结合

12月17日，由神策数据和极客帮、InfoQ共同策划的技术沙龙在中关村成功举办，来自诸葛找房、神策数据、91金融和51理财的技术专家分享了大数据开发场景，建模，结果应用，扩展等技术内容，全面展示互联网金融
神策数据·2023-02-22 02:37

JavaWab开发的总括以及HTML知识

一、Web开发的总括在这里我来给大家介绍一下Wab开发需要配合哪些前后端的对应语言:首先是Java(Java通常的工作):Wab开发android开发大数据开发另外,Wab开发想要学好就需要配合之前博客中的内容
zyx22334·2023-02-20 23:43

字节跳动广告场景使用的“ClickHouse”介绍

近两年针对大数据的开发工具开启了开源大潮，为大数据开发者提供了多个选择，但是也增加了开发者选择合适的工具的难度。尤其是新入行的开发者，会增加很大的学习成本，框架
IT巅峰技术·2023-02-18 15:05

深入浅出聊Taier—大数据分布式可视化DAG任务调度系统

袋鼠云数栈大数据开发专家、Taier项目主导人偷天为大家带来了《Taier入门介绍》的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深技术细节的了解。
数栈DTinsight·2023-02-18 06:07

大数据开发面试题目

Hadoop介绍MapReduce的运行过程，shuffle过程如果在现场，我可以手绘MapReduce从InputFormat到OutputFormat的流程，一边画图一边说。如果讲到环形缓冲区那里，是不是有很多调优的方式.combiner也可以考虑讲一下。Hadoop集群的搭建过程至少自己集群的配置.框架的技术选型是不是都要清楚的明明白白。Hadoop优化HDFS小文件的影响.输入输入时的小文
QLchuan·2023-02-17 18:06

大数据开发培训学习是怎样的

在科多大数据进行了近三个月的学习，随着Java三阶段考核的结束，开发班Java阶段已经进入尾声。这次考核总的来说学员在三阶段较二阶段有明显进步，但表达上会拖整体表现的后腿。所以交流表达还是未来程序猿们的通病啊。坚持我们每日晨会，在巩固知识的同时，锻炼自己。努力的人不仅仅是幸运的，更是优秀的！特别是大数据的学习，没有大量充足的练习，没有花费时间整理学习思路，都不会有太大的成效。专精一门，在大数据行业
G小曲·2023-02-17 14:10

大数据开发之Hive篇12-Hive正则表达式

备注:Hive版本2.1.1一.Hive正则表达式概述Hive的正则表达式虽然没有关系型数据库的正则表达式那么强大，但是一样可以解决HQL开发过程中的诸多问题，数据工作者平时也离不开正则表达式。对此，特意做了个hive正则表达式的小结。所有代码都经过亲测，正常运行。Hive支持如下三个正则表达式:regexpregexp_extractregexp_replace1.1字符集合:字符匹配的字符\d
只是甲·2023-02-17 12:36

ChatGPT到底是个啥 - 它甚至会和狗说话

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
一头小山猪·2023-02-16 20:32

【CSDN 2022 年度征文】你不停的翻找答案，只不过是在找一个替你讲故事的人——Oracle DBA转型大数据开发DBA的自述

文章目录个人简介前言一、过去的20221、工作技术上的收获2、生活也很努力2.1、运动使我快乐2.2、做饭使我快乐2.3、养了一只猫二、2023年的打算1.工作上2.生活上总结个人简介个人主页：赵延东的一亩三分地擅长领域：大数据&Oracle数据库实施、运维、开发认证：华为大数据专家认证、Oracle专家认证爱好：做饭、收拾家务、骑行、跑步、音乐前言一岁有一岁的味道，一站有一站的风景，花会沿路盛开
赵延东的一亩三分地·2023-02-07 07:09
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他