【大数据开发】

IDC：阿里云获2021中国数据治理平台市场份额第一

分析师评价：阿里云在数据治理领域主要提供自主研发的全链路大数据开发治理平台DataWorks。DataWorks是中国市场上较早的数据治理平台型产品，从2009开始在阿里
·2022-06-28 17:38

图解大数据 | 大数据分析挖掘-Spark初步

本文地址：http://www.showmeai.tech/article-detail/173声明：版权所有，转载请联系平台与作者并注明出处收藏ShowMeAI查看更多精彩内容1.Spark是什么学习或做大数据开发的同学
ShowMeAI·2022-06-25 07:34

Apache基金会正式宣布Apache InLong成为顶级项目

这个最初由腾讯捐献给Apache社区的一站式海量数据集成框架，可以为大数据开发者提供百万亿级数据流高性能处理能力，以及千亿级数据流高可靠服务。
开源头条·2022-06-24 15:31

Apache基金会正式宣布Apache InLong成为顶级项目

这个最初由腾讯捐献给Apache社区的一站式海量数据集成框架，可以为大数据开发者提供百万亿级数据流高性能处理能力，以及千亿级数据流高可靠服务。
CSDN资讯·2022-06-23 10:34

大数据开发内容太多了，我到底应该怎么学？（附应届生学习路线）

背景：有很多小伙伴找老刘讨论大数据开发相关内容，第一句往往是：”大数据内容太多了，我到底应该怎么学习大数据开发“。
小刘讲大数据·2022-06-21 07:29

Java码农是否有必要转型大数据开发

没有什么是亘古不变的，就像手机软件的不断更新迭代一样，陈旧的事物终将会被取代。相比于十年前程序员“高需求、高薪资、高难度”的三高状态，到如今，也开始逐渐被打破。虽然在科技时代，码农几乎永远不会失业，但随着新技术的产生，如果不去提升自己，那么你将会被取代。从去年开始，相信很多的码农，都看到了各类关于大数据的信息。新闻、自媒体、科技媒体等都在对它进行解读。各个大型的互联网公司，像BAT也已经快速的实施
bobo79888·2022-06-09 15:13

数栈技术分享前端篇：TS，看你哪里逃~

数栈是—站式大数据开发平台，我们在github和gitee上有一个有趣的开源项目：FlinkX，FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，也可以采集实时变化的数据，
数栈DTinsight·2022-06-07 18:28

数栈产品分享：Kafka—实时离不开的那个TA

一、前言随着技术不断的成熟及市场需求的日益旺盛，实时开发已经成为当前大数据开发不可或缺的一部分。在整个实时开发的链路中，数据采集需要写入到Kafka，数据处理也需要使用到Kafka。
数栈DTinsight·2022-06-07 18:57

Java大数据学习路线图

Java大数据学习路线图准备篇适用/适合人群：适合基础小白在这里还是要推荐下我自己建的大数据学习群:199427210，群里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入,大家都是软件开发党，
铁拳虎·2022-06-05 15:19

大数据学习路线总结

背景引入考虑到有对大数据开发感兴趣的同学，因为找资料方向上特别迷茫，不知道大数据具体需要学习什么组件。为了让大家少走弯路，我就把之前的学习笔记发一遍在自己博客，本文就是提供这个博客的链接。
默主归沙·2022-06-05 15:45

云开发+低代码+可视化+微服务+大数据开发平台

正在开发一套基于java的云开发+低代码+可视化+微服务+大数据开发平台，简单点取名为DUO大数据开发平台。
yonsin·2022-05-31 19:26

如何将年薪从十五万到五十万系列之大数据开发轻量级入门方案

这么多年一直和数据打交道，也没有在CSDN上面留下过一些内容。基本上总结心得全放在微信公众号上面了（数据仓库践行者）。最近有粉丝问，说想了解一下进入大数据行业的发展方向，很早之前我在微信公众号上写过一篇（https://mp.weixin.qq.com/s/e-PD8p3UQ6nUV-LLiCS4kg）。今天把它搬到这里，希望能为更多迷茫的人找到一条适合自己的道路。前言经过这么多年的发展，大数据的
嘉祐-小萝卜算子·2022-05-28 03:31

【数仓】大数据开发全流程 - 实习总结

  工作了快一个月了，今天简单说一下大数据开发的整个流程。假设就以自己这个公众号为例，这样不会抽象，比较直观。1.数据源前端会对用户行为进行埋点，并上报后端服务器。
大风在睡觉·2022-05-27 07:26

学习java的第一课——初识java

客户端（银行软件）浏览器（浏览器）移动端（安卓app）高速运算和存储（大数据开发）嵌入式（微波炉，冰箱）2.职业发展路线编写程序的工具就是计算机语言，java就是多语言的一种1995年sun公司推出java
从零开始的java代码生活·2022-05-26 09:38

初识JAVA——java的安装与环境配置

JAVA特点：开源：面向对象跨平台，一次编写，到处运行，JAVA的应用：互联网后端开发大数据开发安卓APP开发不适用于前端的开发学习步骤：安装环境>Javase>数据库>
起风了！！！·2022-05-26 09:06

基线监控：基于依赖关系的全链路智能监控报警

随着字节跳动业务的快速发展，大数据开发场景下需要运维管理的任务越来越多，然而普通的监控系统只支持配置相应任务
·2022-05-25 21:17

达人专栏 | 还不会用 Apache Dolphinscheduler？大佬用时一个月写出的最全入门教程【三】

作者|欧阳涛招联金融大数据开发工程师02Master启动流程2.10WorkFlowExecutorThread里执行SubmitStandByTask方法SubmitStandByTask干了5件事情
·2022-05-25 17:58

为什么都建议学java而不是python-为什么java比python复杂，还是有很多人选择学习java？...

首先，当前Java和Python都是流行程度比较高的编程语言，而且二者都同为全场景编程语言，在Web开发、大数据开发等领域都有广泛的应用，从应用前景来看，未来很长一段时间内，Java和Python都依然会占据着重要的位置
编程大乐趣·2022-05-22 07:31

大数据开发必备技能

一，题记要说当下IT行业什么最火？ABC无出其右。所谓ABC者，AI+BigData+Cloud也，即人工智能、大数据和云计算(云平台)。每个领域目前都有行业领袖在引领前行，今天我们来讨论下大数据BigData这个方向。二，大数据里面的角色角色一：大数据工程大数据工程需要解决数据的定义、收集、计算与保存的工作，因此大数据工程师们在设计和部署这样的系统时首要考虑的是数据高可用的问题，即大数据工程系统
weixin_34356138·2022-05-22 07:08

聊聊FLINK-25631贡献

从入行做数据库开发，到2018年过渡到大数据开发，可以说我已经与sql朝夕相处了七八年了，经常惊讶于简单的语法就能产生复杂的操作，而且还能根据索引等统计信息自动优化，不禁很想实现自己的sql语法，却不知道这是怎么做到的
码以致用·2022-05-13 17:00

Apache DolphinScheduler 2.X保姆级源码解析，中国移动工程师揭秘服务调度启动全流程

随着5G、物联网等网络信息技术的快速发展以及应用的快速增长，数据量也呈指数级增长，纵观运营商整个大数据开发的链路上，
·2022-05-11 15:39

择业迷茫期？非IT专业如何进入互联网行业

一，选择合适自己的技术方向IT方向的岗位有很多，包括大数据开发工程师、大数据运维工程师、Java语言开发、前后端开发、云
超级实习生·2022-05-11 12:28

面向大数据开发的集群之ip与主机修改配置（三）

（一）关闭防火墙因为关闭防火墙才能让网络设置过程顺利systemctlstopfirewalldsystemctldisablefirewalldsystemctlstopNetworkManagersystemctldisablefirewalld（二）配置虚拟机的网络vmware的编辑菜单-->虚拟网络编辑器-->更改设置-->选中VMnet8,修改子网IP段位为192.168.10.0-->
林柚晞你今天博学了吗·2022-05-10 05:56

Apache DolphineScheduler4月 Meetup 大佬手把手教你大数据开发，离线调度

随着互联网技术和信息技术的发展，信息的数据化产生了许多无法用常规工具量化、处理和捕捉的数字信息。面对多元的数据类型，海量的信息价值，如何有效地对大数据进行挖掘分析，对大数据工作流进行调度，是保障企业大数据任务高效运行的基础。有了数据平台和数据仓库，选择什么系统来调度和管理数仓任务就显得尤为重要。ApacheDolphinScheduler作为新一代的大数据任务调度系统，致力于让调度变得更加容易。身
·2022-04-30 10:52

【大数据开发笔记1】什么是Hadoop?

Hadoop介绍狭义上Hadoop指的是Apache软件基金会的一款开源软件。用java语言实现，开源允许用户使用简单的编程模型实现跨机器集群对海量数据进行分布式计算处理Hadoop核心组件-HadoopHDFS（分布式文件存储系统）：解决海量数据存储-HadoopYARN（集群资源管理和任务调度框架）：解决资源任务调度-HadoopMapReduce（分布式计算框架）：解决海量数据计算官网htt
Lubang_Future·2022-04-26 12:43

袋鼠云批流一体分布式同步引擎ChunJun（原FlinkX）的前世今生

一、前言ChunJun（原FlinkX）是一个基于Flink提供易用、稳定、高效的批流统一的数据集成工具，是袋鼠云一站式大数据开发平台-数栈DTinsight的核心计算引擎，其技术架构基于实时计算框架Flink
·2022-04-26 11:21

【大数据开发】Hive——Hive的概念、架构、安装Hive三种模式、Hive的基本操作day43

一、hive的概念为什么有HiveHive最初由FaceBook研发出来。由于每天产生的数据量大，使用MapReduce处理的效率比较低，而MapReduce的学习成本比较高，且类SQL的方法，工作效率比较高。Hive的入门简单。Hive是什么Hive是一个基于hadoop的数据仓库。可以通过类SQL的方式来对数据进行读、写等管理的功能。Hive是基于hadoop的一个数据仓库工具，可以将结构化的
这个妹妹我见过·2022-04-24 15:13

BigData大数据开发路线详细完整结构知识体系学习大全（2022）

BigData一、基础知识（一）采集：（二）存储：（三）计算：（四）查询：（五）可视化：（六）任务调度：（七）集群监控：（八）元数据管理：（九）数据质量监控：二、开发平台（一）Hadoop大数据处理框架1、MapReduce磁盘离线分布式计算框架2、HDFS分布式文件系统3、HBase实时数据存储管理系统4、Zookeeper集群分布式协调系统5、Hive离线数据仓库6、Yarn运行调度资源管理平
REMLILI·2022-04-22 20:46

深入浅出聊Taier—大数据分布式可视化DAG任务调度系统

袋鼠云数栈大数据开发专家、Taier项目主导人偷天为大家带来了《Taier入门介绍》的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深技术细节的了解。
·2022-04-20 14:23

深入浅出聊Taier—大数据分布式可视化DAG任务调度系统

袋鼠云数栈大数据开发专家、Taier项目主导人偷天为大家带来了《Taier入门介绍》的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深技术细节的了解。你能看到�
数栈DTinsight·2022-04-20 13:00

2020大数据开发工程师知识点整理（更新）

写在前面博主今年在准备大数据工程师岗位的校招，整理了大数据相关的部分知识点，希望可以帮助和博主一样备战秋招大数据岗位的朋友，另外，博主正在准备各大厂已经出来的面试题Q&A的整理，会在这两个星期内发出来，感兴趣的同学可以关注我哦~如果这篇博文在你面试的时候有帮助的话，欢迎回来还愿哦~目录写在前面javaHadoophdfsYarnhivezookeeperflumesqoopHBasejava1.请
艾姆鸥·2022-04-17 12:35

大数据开发面试部分：zookeeper集群的搭建（大数据开发面试）

官方简洁版：1.3节点java安装2.所有集群节点创建目录:mkdiropt/sxt3.zk压缩包解压在其他路径下:：#tarxfzookeeper-3.4.6.tar.gz-C/opt/sxt/4.进入conf目录，拷贝zoo_sample.cfgzoo.cfg并配置dataDir，集群节点。修改文件目录：/var/sxt/zk添加服务器：server.1=node07:2888:3888ser
道法—自然·2022-04-17 00:29

理想汽车 x StarRocks：为 Hive 数据查询插上极速之翼！

作者张博晗理想汽车大数据平台-高级大数据开发负责公司级数据集成平台的设计和开发，以及OLAP平台的体系化建设对于致力创造移动的家、成为全球领先的智能电动车企业的理想汽车，所要管理的数据规模非常庞大。
·2022-04-15 14:16

java程序员开发常用的工具推荐,快来看鸭~

各互联网公司对大数据开发的人才可以用求贤若渴来描述。这里带领大家看看,java程序员都使用哪些大数据开发工具。
aifans_bert·2022-04-01 01:32

Molecule实现数栈至简前端开发新体验

数栈是一个专注一站式产品体系，覆盖数据全链路开发流程，全面国产化兼容，核心源码自主可控的云原生一站式大数据开发治理平台。2021年12月16日，基于数栈多年大数据开发经验的基础
·2022-03-25 11:48

Molecule实现数栈至简前端开发新体验

数栈是一个专注一站式产品体系，覆盖数据全链路开发流程，全面国产化兼容，核心源码自主可控的云原生一站式大数据开发治理平台。2021年12月16日，基于数栈多年大数据开发经验的基础
袋鼠云数栈前端·2022-03-25 11:00

流计算宝藏文章 | 端到端一致性，Spark/Flink/Kafka/DataFlow对比总结

强烈推荐：大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
run_bigdata·2022-03-25 09:01

Python-sklearn之PCA主成分分析

文章目录写在前面一、PCA主成分分析1、主成分分析步骤2、主成分分析的主要作二、Python使用PCA主成分分析写在前面作为大数据开发人员，我们经常会收到一些数据分析工程师给我们的指标，我们基于这些指标进行数据提取
绝域时空·2022-03-20 07:39

【虐到哭】 10家大厂面试真题

大数据开发方向知识图谱，请点击下面的连接：《大数据方向学习面试知识图谱》腾讯关键词【Java基础】【数据结构】【操作系统】【算法】【数据库】【缓存】自我介绍介绍一下你在项目中的承担的任务你对哪种语言熟悉线程池使用过吧
GOD_WAR·2022-03-19 09:33

图解大数据 | 大数据分析挖掘-Spark初步

www.showmeai.tech/tutorials/84本文地址：http://www.showmeai.tech/article-detail/173声明：版权所有，转载请联系平台与作者并注明出处1.Spark是什么学习或做大数据开发的同学
·2022-03-08 19:21

大数据开发如何入门？大厂程序员分享一下我的学习路线

相信近几年大家也都感受到了计算机行业的火爆，越来越多的同学选择报考计算机专业，甚至很多非计算机专业的同学也一直想要转行当程序员。在这样的环境下，公司对程序员的要求也是水涨船高，几年前校招的同学，想找一份JAVA开发的工作，可能只需要会一些JavaWeb基础，再加spring框架，写几个毕设水平的小项目就行了。而现在，算法、微服务、分布式、高并发，很多工作中可能都遇不上的场景，也都要考察。现在JAV
极伪·2022-03-07 14:22

Apache Kyuubi & SeaTunnel 联合 Meetup | 见证中国大数据崛起！

12日（星期六），ApacheKyuubi和ApacheSeaTunnel两大新锐社区携手，邀请来自eBay、T3出行、oppo等团队的五位实战型专家，从技术实践到业务优化，从项目发展到社区参与，为企业大数据开发者
·2022-03-02 10:28

如何成为一个领域的专家

我的目标是成为大数据开发专家，显然现在我还不是，但我立志要做成这个。我一直在思考和寻找，如何成为专家，直到遇到这本书《刻意练习》。读完这本书，有以下思考。
epitomizelu·2022-02-28 20:05

大数据开发面试：impala和hive的比较

Impala:Cloudera公司推出，提供对于hdfs，hbase数据的高性能，低延迟的交互式sql查询功能基于hive，使用内存计算，兼顾数据仓库，具有实时，批处理，多并发等优点是CDH首选的PB级大数据实时查询，分析引擎。内存计算比I/O计算要快，内存计算不依赖于磁盘，受制于内存大小，对于磁盘的要求更高。Hive是基于MapReduce，内存可以很小。Map阶段是一条一条的处理Reduce是
道法—自然·2022-02-28 15:44

面试官：hive表有数据，但为什么impala查询不到数据？

张工是一名程序员，做java开发的，有两年多开发经验，有次到一家软件公司应聘大数据开发岗位，面试官问了他这样一个问题。hive表有数据，但为什么impala查询不到数据？
爱开发V·2022-02-28 15:08

腾讯微信部门大数据开发面试题-附答案

今天给大家分享一篇腾讯面试一位求职者的大数据开发面经。答案由土哥结合网上总结的，如有错误，请多指教！
3分钟秒懂大数据·2022-02-28 10:04

大数据开发岗面试真题-附答案详细解析

以下为面试过程中提问，岗位为大数据开发，根据提问内容看出，主要偏数仓方向自我介绍到北京工作的意愿SQL题，给一张城市和交易额表，一张城市对应省份表，取出省份总交易额大于500的省份的名字SQL题，基于刚才
大数据开发工程师i·2022-02-28 10:20

大数据开发，聊聊离线数仓和实时数仓

今天的大数据开发学习分享，我们就来讲讲，大数据环境下的数据仓库。
加米谷大数据张老师·2022-02-28 09:39

图解大数据技术：从入门到精通系列教程

www.showmeai.tech/tutorials/84声明：版权所有，转载请联系平台与作者并注明出处引言本篇是ShowMeAI组织的「图解大数据处理与开发系列教程」入口，本教程以大数据技术为根基，给大家讲解大数据开发与数据处理分析的相关知识与技能
·2022-02-24 22:53

Flink 面试通关手册

时至今日，Flink已经发展到1.9版本，在大数据开发领域，面试中对于Flink的考察已经是大数据开发求职者必须面对的，本文结合自己作为面试官过
王知无·2022-02-18 16:59
上一页 16 17 18 19 20 21 22 23 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他