04--数据开发

大数据开发要学Java框架吗？

从java基础开始,学习大数据开发过程中必备的离线数据分析、实时数据分析和内存数据计算等，掌握大数据体系中几乎所有的核心技术。
骨灰级收藏家·2022-09-29 19:23

给数据开发的SQL面试准备路径！

作者：韩信子@ShowMeAI数据分析实战系列：https://www.showmeai.tech/tutorials/40AI面试题库系列：https://www.showmeai.tech/tutorials/48本文地址：https://www.showmeai.tech/article-detail/342声明：版权所有，转载请联系平台与作者并注明出处收藏ShowMeAI查看更多精彩内容大
ShowMeAI·2022-09-28 21:17

开源技术公开课丨Taier工作流的介绍

一、直播介绍之前的内容，我们为大家分享了Taier基本介绍、控制台、Web前端架构、数据开发介绍以及Taier任务调度介绍，本期我们为大家分享Taier工作流的介绍。
·2022-09-28 12:29

大数据自学要多久？为什么零基础自学大数据那么久？

伴随着大数据时代的冲击，大数据开发相关的技术人才成为目前招聘市场炙手可热的高薪岗位，越来越多想要通过技术获得高薪工作的同学选择大数据技术方向。
我想去吃ya·2022-09-28 11:40

什么人适合学习大数据开发？学大数据难吗？

什么人适合学习大数据开发？学大数据难吗？
我想去吃ya·2022-09-28 11:09

本科应届生应聘大数据开发工程师，有机会吗？

本科应届生想去应聘大数据开发工程师的岗位有没有机会？我平时用的语言是Java和Python，看过《机器学习实战》(python)和《Hadoop权威指南》，确实很多地方一知半解，也没有实践过。
大数据基础入门教程·2022-09-28 10:37

大数据开发工程师到底是干嘛的？日常做什么呢？

最近后台收到很多私信，内容大都差不多，总结下来就是：目前在学习大数据专业，想提前了解一下大数据开发工程师的工作职责是怎么的？需要提前准备些什么？大数据分了哪些岗位？
程序员小陶·2022-09-28 10:37

转大数据开发，适合什么岗位？

/转岗原因分析/相信有不少人在从事某个行业一定时间之后都有过想要转岗的想法，或许是薪资达不到心理预期，或者是技术上遇到瓶颈等等等等。下面我们来梳理一下一个人工作一段时间后，为什么想要转岗的可能原因吧，从转岗前工作和想转去的岗位两个角度我们来简单总结一下：转岗前工作情况行业发展前景不佳，要么过于冷门，要么趋于饱和工作内容重复，枯燥，技能提升不明显薪水涨幅小目前工作与个人性格相悖，比如性格内向的人从事
大数据基础入门教程·2022-09-28 10:06

大数据开发的作用是什么？

首先从工作内容，大数据开发主要负责大数据的大数据挖掘，数据清洗的发展，数据建模工作，主要负责处理和大数据应用，结合大数据可视化分析工程师，挖掘出价值的数据，为企业提供业务发展支持。
大数据基础入门教程·2022-09-28 10:06

java大数据开发做什么你知道吗？大数据的职业发展规划

你想过自己的未来规划吗？java大数据程序员只需要学到技术就行吗？1.如何成为大数据工程师Java开发是IT行业的经典岗位，行业当中存在普遍的需求，Web开发、Android开发、游戏开发等基本上Java语言是主力队伍。而进入大数据时代，Java又在大数据方向上有了用武之地，又该如何进行成长路线规划。在Java程序界流行着一种默认的说法叫黄金5年，也就是一个程序员从入职的时候开始算起，前五年的选择
Duminh·2022-09-28 10:36

2020年大数据行业就业如何，大数据开发工程师需求大吗？

因为疫情的影响，2020年大的就业环境不景气，所以，近段时间越来越多的朋友开始担心自己就业问题，想要学习大数据课程的朋友也有点慌了阵脚，学完大数据就业该怎么办？2020年大数据行业仍被看好，在就业形势不好的情况下，更需要不断更新自己的技能水平，多学习技能，才能不被淘汰。不管是什么时候，淘汰的都是那些无法顺应时代发展的人。大数据行业就业薪资以及行业前景：1、大数据行业目前还处在发展初期，虽然落地应用
jiamigudashuju·2022-09-28 10:36

高薪岗位大数据开发工程师要如何入门？【重磅】

最近，谷歌爸爸又收购了一家公司。长期以来，谷歌致力于推动围绕GoogleCloud的企业业务，但在这方面一直被亚马逊和微软吊打，这次的收购正是为了弥补自身的短板。被收购的CaskData是一家专门提供基于Hadoop的大型数据分析服务解决方案的初创公司。基于此，谷歌进一步加强他的大数据分析能力。除了谷歌、微软、亚马逊、IBM等国际大佬全力布局大数据外，国内企业也积极投入大数据的怀抱，无论是BAT这
bobo79888·2022-09-28 10:05

大数据开发工程师是做什么的？岗位要求高吗？

大数据开发工程师是做什么的？岗位要求高吗？大数据开发工程师要负责数据仓库建设、ETL开发、数据分析、数据指标统计、大数据实时计算平台及业务开发、平台建设及维护等工作内容。
我想去吃ya·2022-09-28 10:33

react是什么？react和vue的区别？react有什么优点？

（1）是什么：组件化的，面向数据开发的，是一个mvc的框架，是一个跨平台的框架（2）区别：vue是mvvm框架，react是mvc框架，vue是数据的双向绑定，react是单向数据流vue是一个渐进式的框架
qq_52382617·2022-09-26 12:25

在 KubeSphere 中部署高可用 Redis 集群

作者：余生大大，大数据开发工程师，云原生爱好者，KubeSphere社区用户。前言Redis是在开发过程中经常用到的缓存中间件，在生产环境中为了考虑稳定性和高可用一般为集群模式的部署。
·2022-09-26 10:12

redis 主从配置_Redis6.0主从、哨兵、集群搭建和原理

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
weixin_39729115·2022-09-26 09:05

学习大数据必须了解的大数据开发课程大纲

大数据开发最核心的课程就是Hadoop框架，几乎可以说Hadoop就是大数据开发。
安靜@忧伤·2022-09-25 10:00

推荐零基础学习大数据的10本经典图书

这里为大家推荐零基础学习大数据的8本经典图书，希望同学们能够通过不同的学习途径充分掌握大数据开发技能。1、大数据时代《大数据时代》是国外大数据系统研究的先河之作，本书
我想去吃ya·2022-09-24 14:22

计算机大数据的前景方向_大数据专业未来就业前景如何？

首先，从近两年大数据方向研究生的就业情况来看，大数据领域的岗位还是比较多的，尤其是大数据开发岗位，目前正逐渐从大数据平台开发向大数据应用开发领域覆盖，这也是大数据开始全面落地应用的必然结果。
weixin_39808877·2022-09-24 14:20

码农转型大数据开发有必要吗？有前景吗？

想要学习大数据开发，第一件事并不是要找书籍或者是找视频教程，而是要了解一下大数据行业前景，了解一下成为大数据工程师需要具备什么样的能力，掌握哪些技能我当初学习大数据之前也有过这样的问题，作为一个过来人，
juan777·2022-09-24 14:17

从开发角度看羊了个羊

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
一头小山猪·2022-09-24 12:57

钉钉小程序从搭建到发布---企业内小程序

下载开发工具--申请成为钉钉开发人员：2.开启开发工具，创建第一个项目（有模板可供选择）--创建文件路径3.在钉钉文档中点击企业创建应用4.介绍钉钉配置信息应用信息：表示当前钉钉需要获取登录信息等等用到的数据开发
明天用来嘲笑昨天·2022-09-24 00:56

复盘离线电商数仓3.0项目–数据开发梳理

复盘离线电商数仓项目–数据开发梳理业务数据数仓分层ods层到ads层的开发开源BI工具SupersetODS层业务数据&日志数据ods层业务数据使用Sqoop脚本从Mysql数据库拉取数据落盘到hdfs
岁月的眸·2022-09-23 15:56

Pandas数据分析：快速图表可视化各类操作详解+实例代码(一)

目录前言一、基础绘图：plot二、底图板块1.条形图2.直方图点关注，防走丢，如有纰漏之处，请留言指教，非常感谢前言一般我们做数据挖掘或者是数据分析，再或者是大数据开发提取数据库里面的数据时候，难免只能拿着表格数据左看右看
fanstuck·2022-09-23 15:15

50万年薪都招不来大数据开发工程师，究竟是什么样的？

2010年，大数据投资热潮与大数据岗位需求集中爆发，时至今日，大数据的热度仍高居不下。从360指数来看，目前大数据在市场的热度远远高于前几年特别火的产品经理。大数据如此火热，身边很多人对于大数据的相关趋势及词汇都能随口就来。但如果问他大数据和他之间的关系，却很难能说出一二三来。大家虽置身于大数据环境下，耳濡目染各种新的概念，但是真正参与实践大数据的案例少之又少，造成了对大数据整体认知的缺失。下面讲
chigubiao4837·2022-09-22 14:22

Pandas数据分析：快速图表可视化各类操作详解+实例代码(三)

目录前言一、六边形箱图二、饼图三、缺失数据绘制处理点关注，防走丢，如有纰漏之处，请留言指教，非常感谢前言一般我们做数据挖掘或者是数据分析，再或者是大数据开发提取数据库里面的数据时候，难免只能拿着表格数据左看右看
fanstuck·2022-09-22 07:34

Pandas数据分析：快速图表可视化各类操作详解+实例代码(二)

目录前言一、箱线图二、面积填充图三、散点图点关注，防走丢，如有纰漏之处，请留言指教，非常感谢前言一般我们做数据挖掘或者是数据分析，再或者是大数据开发提取数据库里面的数据时候，难免只能拿着表格数据左看右看
fanstuck·2022-09-21 07:26

ApacheCon Asia 2022 精彩回顾 | 如何让更多人从大数据中获益？

点亮⭐️Star·照亮开源之路GitHub:https://github.com/apache/dolphinscheduler在ApacheConAsia2022Meetup上，有着十余年大数据开发工作经验
·2022-09-20 14:46

3年DBA之路

毕业时候参加过数据开发、游戏研发以及DBA的实习，或许是因为我当时感觉DBA的职业特性跟我性格比较匹配的缘故吧，最终我选择了DBA作为我第一份正式职业。
葱shen·2022-09-20 13:14

【DataOps】- 数据开发治理一体化之网易数帆数据治理2.0实践分享

文章目录前言导读0X01网易数帆大数据1.网易数帆大数据的发展历史2.网易数帆大数据产品矩阵3.网易数帆大数据商业化定位4.用户案例墙0X02为什么数据治理项目经常失败1.我们为什么要做数据治理2.网易数帆数据生产力架构3.传统数据治理1.00X03网易数帆数据治理2.01.到底什么是数据治理？2.网易数帆对数据治理的理解？3.网易数帆数据治理的方法论DataFusion4.量化的指标监控和分析5
Pushkin.·2022-09-18 07:40

大数据计算框架-FLINK精华篇1

这些都迫使大数据开发人员需要掌握一种流（实时）处理框架。而Flink正是这块的佼佼者，因此Flink无疑就被捧上了神座。一、Flink是个什么玩
他们叫我技术总监·2022-09-16 13:07

大数据开发之小文件合并

问题背景：MR计算引擎一般把一次查询切分成多个stage，每个stage是一次MapReduce计算，而MapReduce计算则是将多个MapTask读取到的数据，划分成不同的分区，汇聚到不同的Reduce上进行计算。Spark计算引擎也是先将一次查询划分成多个stage，各自计算，再写入表中。文件的平均大小=分区大小/文件数，理想情况下，文件的平均大小在128MB~256MB之间，如果文件的平均
归去来？·2022-09-16 13:36

使用SQL将多行记录合并成一行实例代码

目录前言1、数据处理前2，结果数据展示3，hive处理方式4，MySQL处理方式总结前言我们在数据开发的过程中，经常会遇到这样的需求，就是将多行合并为一行，并且用特定字符隔开。
·2022-09-14 15:14

[大数据开发]什么是堡垒机？带你了解堡垒机！

主要目录1.背景2.讲个故事吧（堡垒机的作用）3.什么是堡垒机3.1定义define3.2工作机制3.3堡垒机运维操作审计的工作原理4.使用堡垒机4.1堡垒机部署4.2配置思路4.3堡垒机的使用5.堡垒机品牌1.背景公司集群有堡垒机节点，不知不觉听到“堡垒机”这个词已经有些日子了。emmm…（由于周围的小伙伴搞开发表较多，这个属实得问运维…询问未果后决定自己查资料！）2.讲个故事吧（堡垒机的作用）
bigdata王一·2022-09-14 14:26

比MySQL快801倍，OLAP两大神器ClickHouse和Doris到底怎么选？

2021年4月程序员薪资水平，大数据开发工程师：月薪低至5K，高达45K，差距相当大在信息化时代，数据即价值。
公众号:肉眼品世界·2022-09-14 07:16

DolphinScheduler&RocketMQ 联合 Meetup 即将重磅开启，集中展示任务调度与消息队列能力！

在大数据开发中，任务调度和消息队列是两个非常关键的能力。任务调度对异步、周期性
·2022-09-13 18:37

【SQL屠夫系列】- 高频面试之SQL计算用户留存率

文章目录指标背景指标计算真题思路开撸拓展在如今的程序员面试过程中,考察SQL部分能力,虽不是难点,但几乎是必考.为检查思路盲点,避免翻船,各位看官也可以复盘下,如对你有一丝的帮助,欢迎给个赞叭~ps:数据开发者
Pushkin.·2022-09-10 18:09

终于有人把不同标签的加工内容与落库讲明白了丨DTVision分析洞察篇

上一篇文章详细给大家介绍了标签的设计与加工，在标签生命周期流程中，标签体系设计完成后，便进入标签加工与上线运行阶段，一般来说数据开发团队会主导此过程，但我们需要关心以下几个问题：·标签如何快速创建和实现标签逻辑的在线化管理
·2022-09-08 16:15

重磅发布！阿里云全链路数据湖开发治理解决方案

简介：阿里云重磅发布全链路数据湖解决方案，主要包含开源大数据平台E-MapReduce(EMR)+一站式大数据数据开发治理平台DataWorks+数据湖构建DLF+对象存储OSS等核心产品。
·2022-09-08 11:01

Hive Explain 详解

导读前文《一文读懂SQLServer执行计划》中介绍过关系型数据库SQLServer的执行计划执行计划在数据开发过程中的重要性，以及如何阅读执行计划，根据执行计划分析SQL语句的执行效率问题并提出优化方案
Data-Developer·2022-09-08 10:44

Flink面试题大全(建议收藏)

时至今日，Flink已经发展到1.9版本，在大数据开发领域，面试中对于Flink的考察已经是大数据开发求职者必须面对的，本文结合自己作为面试官过
无精疯·2022-09-08 10:23

一幅长文细学华为MRS大数据开发（五）——MapReduce和Yarn

5MapReduce和Yarn摘要：本文中主要讲述大数据领域中最著名的批处理和离线处理计算框架——MapReduce，包括MapReduce的原理、流程、使用场景，以及Hadoop集群中负责统一的资源管理和调度的组件——Yarn。作者：来自ArimaMisaki创作文章目录5MapReduce和Yarn5.1基本介绍5.1.1MapReduce概述5.1.2资源调度与分配5.1.3Yarn概述5.
ArimaMisaki·2022-09-07 20:09

一文快速了解MaxCompute

同时，很多拥有大数据开发经验的开发者，也希望能够结合自身的背景知识，将MaxCompute产品能力与开源项目、商业软件之间建立某种关联和映射，以快速寻找或判断MaxCompute是否满足自身的需要，并结合相关经验更轻松地学习和使用产品
阿里云技术·2022-09-07 14:19

阿里云大数据工厂DataWorks学习之--数据同步任务常见日志报错总结

在使用大数据开发套件时最常用的就是数据同步模块，工单里最常见的问题就是其中数据同步的问题，这里总结一些常见一些从Maxcompute到其他数据源的同步任务报错案例，主要是日志中出现数据回滚写入的问题。
weixin_34128411·2022-09-07 13:40

行业案例｜长安汽车质量管理数据分析实践

KyligenceEnterprise解决了当前长安大数据平台的不足，在大规模数据场景下，满足高并发亚秒级多维查询的性能要求，避免当前Vertica和Impala多维查询性能不足的问题；其次，基于免编程拖拽式模型开发，降低数据开发门槛
Kyligence·2022-09-07 10:12

大数据开发必须掌握的五大核心技术

大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。首先给出一个通用化的大数据处理框架，主要分为下面几个方面：数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。一、数据采集与预处理对于各种来源的数据，包括移动互联网数据、社交网络的数据等，这些结构化和非结构化的海量数据是零散
xyzkenan·2022-09-07 10:39

大数据开发必须掌握哪些技术？

大数据开发的工具与语言：编程语言（Java，python，R语言等）1、大数据离线处理架构Hadoop（基于JAVA）开源免费，懂JavaSE；2、大数据实时计算的架构storm（基于JAVA）开源免费
juan333·2022-09-07 09:06

想学好大数据开发，要掌握哪些技术

大数据开发的工具与语言：编程语言（Java，python，R语言等）1、大数据离线处理架构Hadoop（基于JAVA）开源免费，懂JavaSE；2、大数据实时计算的架构storm（基于JAVA）开源免费
asd3331380·2022-09-07 09:02

大数据开发，就要掌握哪些技术？

大数据开发的工具与语言：编程语言（Java，python，R语言等）1、大数据离线处理架构Hadoop（基于JAVA）开源免费，懂JavaSE；2、大数据实时计算的架构storm（基于JAVA）开源免费
asd3331380·2022-09-07 09:02

【面经】Thoughtworks 大数据开发面经

1.自我介绍2.结对编程面试之前会给一个GitHub仓库，需要提前下载，配置环境，运行代码，熟悉代码。2.1讲一下代码是干什么的提前熟悉理解即可。2.2知道TDD吗测试驱动开发。建议提前学习B站视频。2.3重构代码，实现三个需求按照测试驱动开发的方法：先写测试样例并运行-不通过；修改业务逻辑代码；运行测试代码，不通过返回第二步骤，直到通过测试。3.介绍简历上的项目项目中用到了Elasticsear
和风与影·2022-09-05 19:03
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他