【大数据开发】第12页

大数据需要学哪些内容

随着物联网、人工智能、云计算等技术的发展，数据的规模不断增大，数据分析、数据挖掘、人工智能等应用也随之蓬勃发展，对大数据开发的需求越来越多。因此，大数据开发人才将会在未来的职场中占据重要的地位。

千锋IT教育·2023-04-14 23:10

大数据=SQL Boy,SQL Debug打破SQL Boy 的僵局

网上经常盛传大数据=sqlboy，后端开发=crudboy，算法工程师=调参boy在大数据领域也工作了好几年了，确实大数据开发，很多工作就是写sql，hivesql、sparksql、flinksql等等

诸葛子房_·2023-04-14 18:36

大数据发展趋势如何？

现在，在数字化转型的推动下，越来越多的企业意识到大数据的魅力，并不断在这个领域投入资金，Python+大数据开发相关人才也备受青睐！

我想去吃ya·2023-04-14 12:17

Apache ORC深度探索（上篇）

相信对Hadoop生态系统熟络的大数据开发者对ORC都不会陌生，笔者也是，那么ORC具体是什么？有哪些应用呢？

阿福Chris·2023-04-14 07:06

Hadoop2.7.5集群搭建

pdf：链接：https://pan.baidu.com/s/1WDWgZLlErWf6S-9JJwiAqQ提取码：umnh参考课程：【好程序员】最新大数据Hadoop入门基础视频教程，适合零基础自学的大数据开发课程

QYHuiiQ·2023-04-14 04:26

火山引擎 DataLeap 推出全链路智能监控报警平台

字节数据平台·2023-04-13 05:08

从Hive源码解读大数据开发为什么可以脱离SQL、Java、Scala

从Hive源码解读大数据开发为什么可以脱离SQL、Java、Scala前言【本文适合有一定计算机基础/半年工作经验的读者食用。

虎鲸不是鱼·2023-04-12 20:43

数据湖 | Apache Hudi 设计与架构最强解读

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！大数据真好玩点击右侧关注，大数据真好玩！

王知无(import_bigdata)·2023-04-12 12:45

大数据学习完可以做什么

接下来我们就具体说下学大数据可以从事的岗位：1、大数据开发工程师开发，建设，测试和维护架构，负

我想去吃ya·2023-04-12 01:55

学习大数据需要什么语言基础

并且大数据开发

我想去吃ya·2023-04-12 01:55

日本留学生算法转型大数据开发？听他怎么说

但19年归国之后，求职算法一职半年无果，遂开始学习开发的内容，目前在某大厂担任大数据开发工程师一职。留学日本本科所在专业是中日合办的专业，会有日方老师过来授课。接触的多了以后对日本的文化很有兴趣，

大数据肌肉猿·2023-04-11 19:55

Kafka Connect简介

一.KafkaConnect简介Kafka是一个使用越来越广的消息系统，尤其是在大数据开发中（实时数据处理和分析）。

wandy0211·2023-04-11 17:19

大数据开发的前景和就业如何？该如何去学习它？

python大数据开发学习路线如下：2022最新MySQL知识精讲+mysql实战案例_零基础mysql数据库入门到

测试小扎·2023-04-11 11:26

大数据开发、Java技术笔记整理

整理了一下电脑里的笔记，只doc格式的已有这么些。以后更文便按着列表来吧。当初留下笔记也只是习惯问题而已，如今将他们都分享出来也算是个新的“习惯”吧。技术这东西没有标答，若看官们有任何异议，欢迎交流。PS：当然，此后一系列文章应该对技术小白有点困难，若没有基础可能会看不懂，以后空了会考虑出小白笔记。好啦，以上废话到此为止。今日分享：“idea破解”1、将文件解压到E:\idea目录中2、进行破解将

卿卿老祖·2023-04-11 09:29

CDA证书值得考吗？数据分析前景怎么样？

在数据时代快速发展的现在，涌现出一批高薪的岗位，像大数据开发工程师、数据挖掘工程师、数据分析师等等。相对开发工程师等类型更偏向于技术的岗位而言，数据分析师对于学习者的要求同样严格。

IT自学妹·2023-04-10 23:38

java入门

1、为什么要选用java目前全球Top1开发语言，最大的开发社区，最多的厂商支持企业和互联网后端开发/安卓开发/大数据开发全球需求量最大的工程师，高薪就业掌握java作为第一门工作语言后，掌握其他语言非常容易

一一垚·2023-04-10 16:57

dodaf体系结构建模与分析系统软件

互联网是个神奇的大网，大数据开发和软件

seolutong·2023-04-10 15:52

【闲聊】大数据开发秋招面试准备

现在真的是越来越卷了，这才6月，很多公司秋招都开始了（比如华为官网已经可以投递了）。打算从明天开始准备秋招，后面继续更新一些面试题，包括计算机基础、算法、数仓、Java、SQL，以及常考题。不知道外企难度怎么样，计划把八股文的英语版也准备起来，网上好像没找到八股文英文版，打算自己更新一套。1.算法算法是个积累的过程，突击没有用，只能每天坚持。后面打算每天做一道题，把每种类型的题多做几遍。下面是

和风与影·2023-04-10 06:41

大数据环境-云平台（阿里云）

本节内容参考：【2023新版黑马程序员大数据入门到实战教程，大数据开发必会的Hadoop、Hive，云平台实战项目全套一网打尽-哔哩哔哩】阿里云VPC配置1、注册账户登陆2、构建云上虚拟局域网virtualprivatecloud

Kilig*·2023-04-09 21:22

美团大数据开发转正实习面经(已OC)

一面面试体验整体很不错，面试官很温柔，也不会故意为难你。一面(2023.3.21)自我介绍简单介绍项目(研一在国电做的)你认为学习到的技术和实际使用的差距在哪项目中的数据都是哪里来的(集团中各种设备运行的数据)你说你用到了Spark那你介绍一下Spark的组件和整体架构(结合Dirver和Executor各自的作用)介绍一下Spark的RDD(分布式弹性数据集、基本的数据抽象、封装了计算逻辑、RD

落花雨时·2023-04-09 14:35

3000字梳理大数据开发流程及规范(建议收藏)

点击上方"大数据肌肉猿"关注,星标一起成长点击下方链接，进入高质量学习交流群今日更新|1052个转型案例分享-大数据交流群来源：五分钟学大数据全文共2933个字，建议阅读5分钟在大数据时代，规范地进行数据资产管理已成为推动互联网、大数据、人工智能和实体经济深度融合的必要条件。贴近业务属性、兼顾研发各阶段要点的研发规范，可以切实提高研发效率，保障数据研发工作有条不紊地运作。而不完善的研发流程，会降低

无精疯·2023-04-09 08:17

面经5：美团：22年实习生大数据开发面试

本人是一个双非硕士在读地研二狗，非科班出身，最近也是参加了大数据开发地面试，已拿到了哔哩哔哩和顺丰的大数据开发岗实习offer，现在把自己的面试经历分拨记录下来，记录了面试各个公司的问题和心经，给正在面试的你做一些适当的参考如果这篇文章对你有所帮助

牧码文·2023-04-09 01:08

python大数据开发学习路线

大数据开发入门01Linux基本命令用户管理权限管理网络管理SSHVIMySQLDDLDMLDQL多表查询分组查询约束Kettle数据转换脚本组件Job开发BI工具基本操作常用图表仪

测试小扎·2023-04-09 00:02

干货｜数据仓库工具hive面试题集锦

与此同时大数据开发工程师的薪资也成为行业内高薪的代表。想从事大数据开发需要掌握多种核心技术：Hadoop、Hive、Storm、Spark、Scala等等。

传智播客·2023-04-09 00:31

大数据开发面试题必备20题

问答题:HDFS的组织架构？由HDFSClient、NameNode、DataNode和ScondaryNameNode四部分组成一个HDFS集群是由一个NameNode和一定数目的DataNode组成的。NameNode是一个中心服务器，负责管理文件系统的名字空间(Namespace)及客户端对文件的访问HDFS读写流程?客户端向NameNode发出文件请求检查是否存在文件，检查权限。通过检查直

㫪旧·2023-04-09 00:01

数据仓库工具hive面试题集锦

大数据技术成为互联网发展的核心要素之一，想从事大数据开发需要掌握多种核心技术：Hadoop、Hive、Storm、Spark、Scala等等。

Blue92120·2023-04-09 00:58

大数据开发必备面试题Hive篇

1、数据建模常用的模型有哪些？（1）星型模型。星形模式(StarSchema)是最常用的维度建模方式。星型模式是以事实表为中心，所有的维度表直接连接在事实表上，像星星一样。星形模式的维度建模由一个事实表和一组维表成，且具有以下特点：A、维表只和事实表关联，维表之间没有关联；B、每个维表主键为单列，且该主键放置在事实表中，作为两边连接的外键；C、以事实表为核心，维表围绕核心呈星形分布。（2）雪花模型

技术人小柒·2023-04-09 00:26

flink sql 知其所以然：flink sql 开发企业级利器之 Dlink

搞大数据开发的同学基本都知道在HUE上面写hivesql贼爽。那么有没有写flinksql的企业级的webIDE推荐的呢？经过博

javastart·2023-04-08 20:40

大数据开发·关于虚拟机Hadoop完全分布式集群搭建教程

hadoop完全分布式集群搭建一、搭建准备1.安装VMware虚拟机2.Xshell7远程客户端及Xftp7安装3.搭建模板虚拟机hadoop100配置虚拟机网络为虚拟机普通用户配置root权限4.克隆三台虚拟机用于搭建完全分布式集群二、环境搭建1.主机地址的映射2.使用Xshell连接虚拟机3.SSH免密登录配置（另一篇文章写过，这里就直接放链接了）4.配置集群分发脚本5.配置hadoop及ja

月过枫·2023-04-08 18:36

【大数据开发】sqoop报错汇总

持续更新ing解决办法：删除该目录解决办法：cp/usr/local/hive/lib/hive-shims-*/usr/local/sqoop/lib/解决办法：cp/usr/local/hive/lib/hive-common-1.1.0-cdh5.13.2.jar/usr/local/sqoop/lib/没有hive环境，需要分发一个hive到该机器4.hive存在状态88，则说明这个名为“

这个妹妹我见过·2023-04-08 07:25

Data IDE：盘活数据，让数据发挥价值的一体化在线开发运维平台

阿里云大数据开发平台（DataIDE）是一款集数据开发、数据管理、离线调度、在线运维和数据集成工具为一体的在线大数据开发运维平台，它不仅能够解决上图中各种问题，还可以为用户节省很多的精力和资金。

weixin_33858485·2023-04-08 07:55

大数据开发面试知识点复习2

文章目录大数据开发复习课程1、Hadoop1.1、介绍Hadoop1.2、Hadoop特性优点1.3、hadoop集群中hadoop都需要启动哪些进程，他们的作用分别是什么？

爱敲代码的小黑·2023-04-08 07:52

大数据开发hive数据库常用命令汇总

今天的大数据开发分享，和大家分享Hive的基础知识点。

爱开发V·2023-04-08 07:45

【大数据开发】报错汇总

目录HadoopAttemptingtooperateonhdfsnamenodeasrootjps后没有namenodeHiveExceptioninthread"main"java.lang.NoSuchMethodError:com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Obj

岱宗夫如何、·2023-04-08 07:43

亲身经历告诉你，0基础如何转行学Python。

学科|Python+大数据开发薪资|15000时间总是在你回忆往事时才会觉得短暂，来黑马之前觉得六个月将是一段很漫长的煎熬，总是怀疑自己是否能够坚持。

骨灰级收藏家·2023-04-08 07:28

学大数据需要具备什么基础和知识点？

学大数据应具备编程开发经验，今天主要介绍学大数据应具备的基础，学员从java基础开始，学习大数据开发过程中的离线数据分析、实时数据分析和内存数据计算等重要内容；涵盖大数据体系中核心技术;Linux、Zookeeper

我想去吃ya·2023-04-08 03:23

初中毕业可以学python数据分析吗_初中毕业学大数据能学会不？

虽然大数据技术体系比较庞大，而且大数据开发、大数据分析等技术也有较大的学习难度，但是大数据领域也有很多技能型岗位，比如数据采集、数据整理、数据呈现等岗位对于从业者的要求就相对比较低，所以可以从这些岗位的相关知识开始学起

weixin_39593469·2023-04-08 03:50

新手转行学大数据开发难吗？新手学需要注意的6个方面！

现如今，随着大数据时代的来临，很多从业者开始进入大数据领域，那么对于新手而言，学习大数据开发难吗？该注意哪些因素呢？对于大数据这个新兴的IT行业，其学习难度究竟有多大呢？

小迪和夫人·2023-04-08 03:11

学大数据需要什么基础？

并且大数据开发

我想去吃ya·2023-04-08 03:37

spark 动态预加载数据_spark便捷开发总体流程介绍

在公司做大数据开发已经四五年了，因此也积累了一些心得体会，便趁着这次机会大体描述下。

weixin_39830303·2023-04-08 01:34

大数据开发：Spark SQL数据读取

今天的大数据开发分享，我们就来讲讲SparkSQL数据读取这个环节，也会给到相应的一些示例。

成都加米谷大数据·2023-04-08 01:25

大数据开发零基础需要学习什么内容？（1）Java、大数据基础

所以也就出现了大数据开发工程师、数仓工程师、ETL工程师

程序员老金·2023-04-07 16:45

【大数据是什么】

大数据运维工程师数据仓库开发工程师ETL工程师大数据开发工程师BI工程师算法工程师大数据平台开发工程师大数据架构师讲述一下自己的大数据学习之路大数据是做什么的？

BigDataTuTu·2023-04-07 16:11

什么是大数据及其背后的关键技术

数据工程师陈晨·2023-04-07 16:07

大数据参考架构和关键技术

数据工程师金牛·2023-04-07 16:07

大数据开发怎么样

就目前来看，大数据的发展前景是毋庸置疑的如果零基础入门数据开发行业的小伙伴，可以从Python语言入手。Python语言简单易懂，适合零基础入门，在编程语言排名上升最快，能完成数据挖掘、机器学习、实时计算在内的各种大数据集成任务。Python优势明显应用领域超多如果要推荐一种人人都能掌握的编程语言，应该没有比Python更合适的了。Python简单易学，用途广泛，不仅可以在日常办公中提高大家的职场

我想去吃ya·2023-04-06 23:32

0基础跨专业参加大数据培训学习可行吗？

大数据开发课程的学习是有一定难度的，薪资水平也是一个体现。0基础可以学习大数据吗？可以。跨专业可以学习大数据吗？可以。

Hadoop998·2023-04-06 23:23

转行大数据未来发展怎么样？可行么

大数据开发做什么？大数据开发分两类，编写Hadoop、Spark的应用程序和对大数据处理系统本身进行开发。大数据开发工程师主要负责公司大数据平台的开发和维护、

我想去吃ya·2023-04-06 23:19

第一次在大厂工作的感想——滴滴

这次实习岗位依然是最想做的大数据开发。在说工作感受之前，想先聊聊我是怎么收到这次面试机会的，感觉挺幸运的。清晰记得2月6日下午，牛客上那个求职助手收到一条消息，发现是有

苍夜月明·2023-04-06 22:45

一个分布式服务器集群架构方案

方案简介集群服务器解决方案，以多块核心板的组合方式，提供标准的软硬件接口，支持分布式AI运算，可用于机器学习、人工智能和大数据开发等，相对传统的集群服务器，拥有低功耗、高可管理性、高灵活性等特点。

添越智创·2023-04-06 22:42

推荐频道

【大数据开发】