大数据开发常用技术第17页

大数据开发-mysql

目录标题介绍SQL语言数据处理之查询函数创建和管理表数据处理之增删改数据库事务约束和分页约束分页介绍DB:数据库（database）：存储数据的“仓库”。它保存了一系列有组织的数据。DBMS：数据库管理系统（DatabaseManagementSystem）。数据库是通过DBMS创建和操作的容器SQL：结构化查询语言（StructureQueryLanguage）：专门用来与数据库通信的语言。常见

海星？海欣！·2023-04-03 17:24

星环科技TDS 2.4.0 发布：数据开发、数据治理、数据运营套件能力再次升级

近日，星环科技大数据开发工具TranswarpDataStudio2.4.0版本重磅发布，新版本中数据开发、数据治理、数据运营三大套件能力全部升级，让数据开发更便捷、数据治理更高效、数据运营更智能。

星环科技·2023-04-03 11:06

2023秋招—大数据开发面经—多益网络

一面hr面：问个人情况，问官网投递时回答的一些问题二面——技术面1、实习的工作是什么？2、SQL调优有哪些？3、介绍一下项目，主要做什么工作？（项目介绍还不顺畅）4、为什么学大数据？5、项目里的Flume是怎么用的？6、TailDir为什么可以断点重传？（面试官说不能）7、Linux什么指令可以监听文件？8、Flume的事务是怎样的？（因为上一题提到了事务）9、Kafka的基本架构？10、RXR队

不断学习的克里斯·2023-04-03 06:58

2023秋招—大数据开发面经—蚂蚁金融

一面：电话面试1、自我介绍2、挑一个实习项目讲一讲3、项目里的数据是怎么处理的？4、数据研发选择哪一块？（数据仓库、数据平台、数据算法、数据挖掘）5、讲讲MapReduce的原理6、环形缓冲区为什么要反向？7、实习的存储计算用的是什么组件8、有金融相关知识的储备吗？反问：1、这一面算是第一面吗（是）？算专业面吗（是）？2、做什么工作的？（国外金融银行业务）3、用到哪些技术栈？4、希望候选人所具备哪

不断学习的克里斯·2023-04-03 06:27

2023秋招—大数据开发面经—网易云音乐

一面1、实习的工作内容是什么？2、有写过UDF吗？如何实现UDF？3、UDF要成为永久函数怎么做？如果不加temperory，函数下次还能用吗？4、UDTF了解吗？5、Hive的窗口函数有了解过吗？6、开窗函数Over()中有没有orderby有什么区别？7、汇总数据开发是怎么做的？（实习工作）8、Flink任务的并行度和内存怎么设置的？9、Flink的TaskManager内存模型了解吗？10、

不断学习的克里斯·2023-04-03 06:27

字节给我发感谢信，我也感谢字节（内附一面面经）

前几天面的一面，投的是大数据开发岗位，没有笔试面完感觉自己有点凉，毕竟SQL没写出来，有个数据倾斜的问题也没答出来但最后面试官问了一句最早几时可以上岗，让我感觉尚有希望，于是等了三天，就给我发信这个结局自己其实也是料到了

不断学习的克里斯·2023-04-03 06:26

ZooKeeper的一些总结

是什么二、Zookeeper用来做什么三.Zookeeper的优势是什么四.为什么用zookeeper五.zookeeper解决了什么问题总结前言Zookeeper作为一个分布式协调服务，在Java以及大数据开发中都遇到过

易逑实战数据·2023-04-03 04:44

01、ThingsBoard-物联网技术栈介绍篇

1、概述根据我这么多年对物联网的了解，以及以前一个腾讯的大佬给我们的技术分享，整理了一套物联网常用技术栈，以下的技术我以前就使用过了，恰好ThingsBoard也再使用；仅代表个人观点，请勿抬杠，也不要问我为什么要这样选用

了凡啊·2023-04-03 04:27

大数据HCIE认证更新升级，要考大数据HCIE的过来看看

HCIE-BigData-DataMiningV2.0定位于数据挖掘方向的专家级别认证，适用于大数据开发和运维高级工程师以及致力于向AI领域发展的人员的技能提升。

智汇云校·2023-04-03 03:28

Java，php，运维工程师转型大数据开发怎么样？你属于哪一类？

一：java转型大数据“2019年可能会是过去十年里最差的一年，但却是未来十年里最好的一年”。市场发展的受限，不仅波及了各个行业的从业者，就连IT领域也受到了影响，很多IT人开始寻找新的出路，其中，很多java程序员将转型大数据看成是迎接“春天”的一个契机，其原因究竟是什么呢？在资本“寒冬”的影响下，互联网巨头们纷纷的传出缩招的消息，像阿里、京东等。而像华为这样的企业，也曾传出了停止社招的信息。大

大数据基础入门教程·2023-04-03 03:14

Java程序员转行大数据开发怎么样？难吗？

提到大数据，很多人会想到Java，提到Java，也会想到大数据，二者有什么关系呢？哪个发展更好？二者关系？大数据框架的编写支持很多开发语言，目前流行的大数据Hadoop框架，很多部分都是用开源的Java语言编写。Hadoop的创始人DougCutting曾说过：Java在开发者的生产率和运行效率之间取得很好的权衡。开发者可以使用广泛存在的高质量类库，切身受益于这种简洁、功能强大、类型安全的语言。谁

juan188·2023-04-03 02:34

盘点那些高大上的量化择时方法都有哪些？

常用技术指标作为策略依据，比如MA、MACD、ADX、BOLL等等。趋

小壁虎的春天·2023-04-03 01:29

分布式系统：数据一致性解决方案

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！大数据真好玩点击右侧关注，大数据真好玩！

王知无(import_bigdata)·2023-04-02 21:50

大数据开发可以自学吗?有哪些需要注意的地方？

我们在学习大数据开发前需要先找到适合自己的方式方法，首先需要审视一下自身的情况，是否是以兴趣为出发点，对大数据是不是自己是真的感兴趣吗，目前对大数据的了解有多少，自己的学习能力和理解能力是否适合学习。

yoku酱·2023-04-01 23:11

java和python哪个更好找工作？

1、就业现状从目前的就业现状来看，Java的工作机会肯定是更多的，如Web开发、大数据开发和移动互联网开发等都是基于Java的应用方向。

Lalalajtyy·2023-04-01 21:57

产业互联网时代有哪些软件开发任务

首先，软件开发当前的划分方式非常多，如果按照技术领域进行划分，软件开发涉及到物联网开发、云计算开发、大数据开发和人工智能开发等等，而如果按照软件自身的技术体系来划分，又可以划分为前端开发、后端（服务端）

飞翔的勇士·2023-04-01 15:39

大数据专业毕业后前景如何？能做什么职位？

大数据开发岗位是当前人才需求量比较大的岗位之一，不论是本科生还是研究生，当前选择大数据开发岗位会有相对较大的选择空间。

我想去吃ya·2023-04-01 11:19

大数据专业前景怎么样？

大数据专业毕业生未来的岗位选择空间比较大，有三大类岗位可选择分别是大数据开发岗位、大数据分析岗位和大数据运维岗位，在不同的行业和技术体系结构下这些岗位也包含很多细分的岗位。

我想去吃ya·2023-04-01 11:19

大数据就业前景怎么样?需要学会哪些技术?

智能时代的来临，我们日常生活中的很多技术都可以用大数据来实现，大数据开发行业做为IT行业中的一类更是前景无限。所以很多人想转行做大数据开发。那么现在大数据就业前景怎么样?需要学会哪些技术?

千锋教育qyf·2023-04-01 10:29

2023大数据开发就业前景怎么样？

大数据开发就业班正在火热招生中。大数据开发做什么？大数据开发分两类，编写Hadoop、Spark的应用程序和对大数据处理系统本身进行开发。

泰迪智能科技·2023-04-01 10:45

dubbo实战之二：与SpringBoot集成

[管理控制台dubbo-admin](()[](()本篇概览本文是《dubbo实战》系列的第二篇，一起来实战SpringBoot（2.3.3.RELEASE版本）与dubbo的集成，这也是分布式服务的常用技术组合

qdwd888·2023-04-01 10:31

数据倾斜及一些解决方法

一、数据倾斜原理做大数据开发，很有可能会遇到数据倾斜的问题，要想解决数据倾斜，首先要理解什么是数据倾斜，以及产生数据倾斜的原因。

hunter95671·2023-04-01 02:26

大数据工程师需要学习哪些内容

大数据开发对于Java语言的依赖程度比较高，如果想尝试大数据开发，学习过Java语言就很容易上手Java是目前使用广泛的编程语言之一，具有的众多特性，特别适合作为大数据应用的开发语言。

我想去吃ya·2023-03-31 22:02

前端常用技术网站总结

1、时间选择插件：eg：datedropperjQueryUIdatepickerplugin2、Echarts图表柱状图等：eg:ECharts3、JqueryAPI：eg：jQueryAPI中文文档|jQueryAPI中文在线手册|jqueryapi下载|jqueryapichm4、Hui构建后台页面框架：eg：H-ui前端框架官方网站-专注前端解决方案5、Mui手机端页面构建框架：eg：MU

热心程序猿黄帅哥·2023-03-31 18:38

基于阿里云官网文档-大数据开发治理平台 DataWorks研读+数据质量扩展+相应的大数据组件知识扩展

网址：阿里DataWorkers网址：数据集成概述-大数据开发治理平台DataWorks-阿里云目录网址：阿里DataWorkers网址：数据集成概述-大数据开发治理平台DataWorks-阿里云一、DataWorks

ListenerDMT·2023-03-31 16:08

学习大数据的基础

目前大数据分为两大方向：大数据开发和大数据分析。这两大方向的对于基础知识的要求不同，大数据分析偏向于分析，对于编程要求不高，相较而言对于基础知识这块要求低一点。

kuntoria·2023-03-31 14:27

数据通大数据导航，助力CSDN大数据的伙伴们！

数据通大数据导航大数据网站政府类社会组织类媒体论坛类大数据开放平台国内城市开放数据统计机构（全球）国外开放数据平台国内各省市县统计机构机器学习数据源AI开源数据数据科学平台大数据交易平台大数据开发分析工具问卷调查工具大数据分析工具网站分析监测工具移动应用监测工具移动应用测试工具网站热点分析工具爬虫工具

点滴聚变·2023-03-31 07:10

数据中台05：数据中台之数据加工总线

并且数仓还是分层的，针对每一层的数据都需要进行实时计算，此时就需要开发很多实时计算程序，实时计算程序的复用性很低，针对每一种类型的数据都需要开发对应的实时计算程序，开发成本高，并且对程序员也不友好，需要专门的大数据开发工程师

做一个有趣的人Zz·2023-03-31 07:31

测试平台开发

常用技术架构与组件前端技术架构bootstrapantdvuereact后端技术架构djangoflaskspringboot数据存储mysqlesneo4j任务调度架构jenkins数据报表echartsvegakibanagrafana

有猫饼233·2023-03-31 06:32

大数据开发：Hive分桶表及动态分区、静态分区

今天的大数据开发分享，我们就来讲讲Hive分桶表及动态分区、静态分区。一、Hive的分桶表1、分桶表原理分桶是相对分区进行更细粒度的划分，Hive表或分区表可进一步的分桶。

成都加米谷大数据·2023-03-31 04:51

Java大数据开发Hadoop MapReduce

目录1MapRedcue的介绍1.1MapReduce定义1.2MapReduce的思想1.3MapReduce优点1.4MapReduce的缺点1.5MapReduce进程1.6MapReduce-WordCount2Hadoop序列化2.1序列化的定义2.2hadoop序列化和java序列化的区别3MapReduce的原理3.1MapReduce工作的过程3.2InputFormat数据输入3

·2023-03-31 01:18

【闲聊】我用ChatGPT参加了大数据面试

问：那么为什么你要投递大数据开发这个岗位答：我对于大数据开发的岗位深感兴趣，因为我有着多年的编程经验，我熟悉分析数据、解决问题和提出创新解决方案的能力，并且拥有扎实的数据库和计算机科学的基础知识。

和风与影·2023-03-30 23:31

一文搞懂大数据开发，大数据开发体系详解

如果只有数据量大是不是太片面单一了，实际上如果你说是从事大数据开发，那么起码要满足下面

盈梓的博客小站·2023-03-30 16:03

大数据开发之Hadoop学习3--Hadoop运行模式

Hadoop运行模式目录Hadoop运行模式4.1本地运行模式（官方wordcount）4.2完全分布式运行模式4.2.1虚拟机准备4.2.2编写集群分发脚本xsync4.2.3SSH无密登录配置4.2.4集群配置4.2.5群起集群4.2.6集群启动/停止方式总结4.2.7配置历史服务器4.2.8配置日志的聚集4.2.9集群时间同步Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式

Lcreator·2023-03-30 03:37

系统架构设计随想

文章目录1.系统架构的定义1.1抽象是真正的银弹1.2生长才能应对复杂1.3系统架构的意义1.3.1高性能1.3.2高可用1.3.3效率与成本1.4架构设计的原则1.5架构设计的流程1.6常用技术栈2.

悟空学编程·2023-03-30 02:21

Spark零基础入门实战（七）Spark生态系统架构

大数据开发总体架构在正式讲解Spark之前，读者首先需要了解大数据开发的总体架构，如图数据来源层在大数据领域，数据的来源往往是关系型数据库、日志文件（用户在Web网站和手机App中浏览相关内容时，服务器端会生成大量的日志文件

大数据张老师·2023-03-29 18:35

大数据算法_阿里十年大数据专家实践经验分享：离线和实时大数据分析和算法...

大数据践行者，致力于通过数据和算法的智能化来赋能商业与社会，拥有十余年大数据一线实战经验，尤其对于智能化产品的大数据开发、架构和未来数据产品设计有丰富经验及深入认识。

weixin_39962758·2023-03-29 15:50

Java就业岗位有哪些？

Java是一门典型的全场景编程语言，可以用于Web开发、大数据开发、云计算开发等多种不同的开发场景下。

Java入门到如风·2023-03-29 11:38

scala概述入门

由于做大数据开发，使用最多的语言就是scala和python，java。刚开始由于spark是scala开发的，就去学习了scala，然后看spark的源码。

若与·2023-03-29 06:05

推荐：成为大数据开发全能高手的100篇文章

开源（OpenSource）用之于大数据技术，其作用有二：一方面，在大数据技术变革之路上，开源在众人之力和众人之智推动下，摧枯拉朽，吐故纳新，扮演着非常重要的推动作用。另一方面，开源也给大数据技术构建了一个异常复杂的生态系统。每一天，都有一大堆“新”框架、“新”类库或“新”工具，犹如雨后春笋般涌出，乱花渐欲“迷”人眼。为了掌控住这些“新玩意”，数据分析的达人们不得不“殚精竭虑”地“学而时习之”。无

haotian1685·2023-03-29 04:49

快速入门大数据与机器学习基础专栏

为初学者快速入门找到方法，本课程专栏涵盖了大数据与机器学习的基础知识、常用技术和实践案例，旨在帮助学习者全面掌握大数据与机器学习相关知识和技能，为未来的大数据与机器学习工作和研究提供帮助。

源代码杀手·2023-03-29 02:58

Hadoop的概念及架构介绍

Hadoop的概念及架构介绍Hadoop是大数据开发所使用的一个核心框架。使用Hadoop可以方便的管理分布式集群，将海量数据分布式的存储在集群中（hdfs），并使用分布式程序来处理这些数据。

江河或野花·2023-03-28 19:06

大数据开发实用命令收集

系统命令：xargsxargs可以接收管道中的字符串，并将字符串用空格分割，传递给之后的命令。-decho"12#34#56"|xargs-d'#'echo123456-p执行命令前会先显示完整的命令，确认后才会执行-necho"12#34#56"|xargs-n1-d'#'echo123456rsyncfree-m查看机器内存情况hadoop生态相关命令：hdfs相关hadoopfs=hdfsd

一米的光年·2023-03-28 03:52

零基础学Java，掌握Java基础难不难？

目前Java广泛用于Web开发、大数据开发、Android开发以及各种后端服务开发领域，通常情况下，学习Java都从Web开发开始学起。

java高级编程中心·2023-03-27 03:26

渣渣秋招路

背景：211渣硕，传统万金油专业9.19第一碗凉面微盟大数据开发微盟面我的小哥哥超级超级好。

niffler_·2023-03-26 11:47

外企面试，哪有你想象的那么难!（已收埃森哲、NTTDATA等8家外企offer）

从大二开始自学Java并开始了第一份实习，后面也是通过自学转到了大数据，之前在一家大数据独角兽实习，现在在一家西班牙公司就职大数据开发。

风平浪静如码·2023-03-26 07:16

大数据学习路线，芜湖起飞~

本文已收录于Github开源项目：github.com/hansonwang99/JavaCollection，里面有各大方向编程的详细自学路线、面试题和面经、编程资料及系列技术文章等，资源持续更新中大数据开发基

CodeSheep程序羊·2023-03-25 17:49

学习大数据推荐用这套大数据学习路线

我们的大数据开发课程，真实商业数源授课，致力于大数据系统集能及区块链为辅，全程企业真实项目深度实操，带领学生一站式搞定匪夷所思的大数据开发技术。

QFdongdong·2023-03-25 09:10

hadoop大数据入门篇-hdfs（一）

HDFS是大数据开发入门必备掌握知识，今天给大家介绍下hadoop一些常用的命令点击链接，从零开始学习大数据1.查看hadoop版本hadoopversion2.创建hdfs文件夹hadoopfs-mkdir-phdfs

呆子_23c9·2023-03-25 00:10

Java现在好找工作吗？

Java庞大的市场占有率和需求，它依然在保持着更新迭代，依然是最常用的底层开发语言，基于其安全性、开放性、稳定性和跨平台性与云计算高可靠、高拓展的优势相得益彰；同时基于云服务平台的拓展性，成功链接到了大数据开发应用领域

北大青鸟天府校区·2023-03-24 01:48

推荐频道

大数据开发常用技术