大数据开发数据中台

Spark Core进阶知识

小知识:大数据开发人员/数据分析人员,必须要对自己统计的指标结果负责!!!
MSJ3917·2024-01-08 07:52

DataOps：数据中台的必备底座

DataOps的历史2014年，LennyLiebmann提出DataOps[1]的概念，在《3reasonswhyDataOpsisessentialforbigdatasuccess》这篇文章中，Lenny提出DataOps是优化数据科学和运营团队之间协作的一些实践集。2015年，AndyPalmer[2]将这个理念发扬光大，提出了DataOps的四个关键构成，数据工程，数据集成，数据安全和数
灯惉·2024-01-07 15:32

有用的技术分享主题

SQLServer数据库和AgentJob集成化监控工具Airflow调度工具的安装和使用Tableau报表开发网络爬虫技术开发PythonGUI应用开发基于S3的数据湖架构设计和大数据开发Hive大数据仓库超大数据集去重解决方案
weixin_30777913·2024-01-07 10:42

数澜科技：面向企业数据中台的数据智能实现方案

面向企业数据中台的数据智能实现方案黄飞2019.08.01企业创新探索企业战略&数据智能企业数据中台战略：丰富数据中台的能力，驱动业务创新数据中台是一种战略选择和组织形式，通过有型的产品支撑和实施方法论
夏末微风·2024-01-07 02:33

数据中台三部曲：数据中台从概念走向实践

数据中台从概念走向实践2019.06主要内容为什么要有数据中台？
夏末微风·2024-01-07 02:03

艾瑞咨询：2022年中国数据中台行业研究报告

中国数据中台行业研究报告©2022.11iResearchInc.摘要狭义来看，数据中台是一套实现数据资产化和服务复用的工具；广义来看，数据中台是一套运用数据推动企业数字化转型升级的机制和方法论。
夏末微风·2024-01-07 02:30

PB级大数据中台架构详解

所以，阿里一直非常重视大数据领域的建设和投入，其中赫赫有名的就是大数据中台战略。OneData体系下的数据公共层已经支撑了淘宝、天猫、聚划算
qianshanding0708·2024-01-06 19:06

中台唯一的胜利果实：大数据中台架构详解

所以，阿里一直非常重视大数据领域的建设和投入，其中赫赫有名的就是大数据中台战略。OneData体系下的数据公共层已经支撑了淘宝、天猫、聚划算
中生代技术·2024-01-06 19:06

2022年iuap春季培训技术平台&YonBIP产品安装培训

用友iuap云平台，应用最新的云计算、大数据、人工智能、移动互联、物联网、区块链等新技术，为现代企业数字化转型提供业务中台、数据中台、智能中台、技术平台、连接集成、低代码开发等服务与解决方案，实现最新科技与数字化
用友iuap·2024-01-06 16:45

Linux常见面试题

题目说明：LINUX类的面试题适合传统行业实施，运维以及大数据开发，运维等岗位，在以上提到的岗位面试中均会有所涉及，初级岗位大部分为基础命令考核，难度丌大，但需要准确不熟练,会编写SHELL脚本会成为此类岗位求职优势
莓是草莓的莓·2024-01-06 01:17

Hadoop面试题与python基础

python基础（面向大数据开发）如果你是面向python开发，那么我的这些应该是不够用的，我的这些只够大数据开发人员使用；每一个岗位它对一门语言的要求掌握程度是不一样的；但是我写的这些你必须要会，它是基础中的基础
中长跑路上crush·2024-01-05 23:02

数据分析求职-入职必备-工具篇

通常所说的数据分析岗位这个大类，细分的话还可以分为3个细类：数据研发/大数据开发：专注于数据的清洗和预处理，为后续消费数据的服务（比如数据分析
阿清陪你聊聊数据分析·2024-01-05 18:56

大数据开发-Hive-常用日期函数&&日期连续题sql套路

前面是常用日期函数总结，后面是一道连续日期的sql题目及其解法套路。1.当前日期和时间selectcurrent_timestamp--2020-12-0519:16:29.2842.获取当前日期，当前是2020-12-05SELECTcurrent_date;##ORSELECTcurrent_date();--2020-12-053.获取unix系统下的时间戳SELECTUNIX_TIMEST
Hoult-吴邪·2024-01-05 17:37

【亚马逊云科技】自家的AI助手 - Amazon Q

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
一头小山猪·2024-01-05 14:00

大数据开发个人简历范本（2024最新版-附模板）

大数据开发工程师个人简历范本>男22本科张三计算机科学与技术1234567890个人概述具备深入的Hadoop大数据运维工程师背景，熟悉相关技术和工具具备良好的团队合作能力，善于沟通和协作具有快速学习新知识和解决问题的能力对于数据科学和分析充满热情
itLeeyw·2024-01-05 13:53

JS实现多线程数据分片下载

在大数据开发过程中，为了提高大文件的上传速度，往往需要将大文件切割为小的数据分片，这样小分片数据可以充分利用有限的带宽，加快上传速度。
码说AI·2024-01-05 10:22

大数据开发者应该知道的分布式系统 CAP 理论

无论你是一个系统架构师，还是一个普通开发，当你开发或者设计一个分布式系统的时候，CAP理论是无论如何也绕不过去的。本文就来介绍一下到底什么是CAP理论，如何证明CAP理论，以及CAP的权衡问题。CAP理论概述CAP理论：一个分布式系统最多只能同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partitiontolerance）这三项中的两项。读者需要注意的
Hadoop技术博文·2024-01-05 09:51

大数据开发学习资料汇总

目录大数据系列HadoopHadoop权威指南Hadoop权威指南修订Hadoop实战Hadoop实战_2Hadoop源码分析大数据处理系统：Hadoop源代码情景分析Hadoop开发者入门专刊Hadoop技术内幕：深入解析MapReduce架构设计与实现原理Hadoop技术内幕：深入解析YARN架构设计与实现原理HadoopYARN权威指南Hadoop奶妈级基础入门视频课：Linux嵌入式Lin
比屋大数据·2024-01-05 08:44

大数据开发与低代码：加速数据处理与解决方案开发

随着数据量的爆炸式增长，大数据开发变得愈发重要。然而，传统的大数据开发方法往往需要复杂的编码和开发过程，消耗时间和资源。而低代码开发平台的出现为大数据开发带来了全新的解决方案。
液态不合群·2024-01-05 08:25

大数据开发的专业术语

作者主页：青花锁简介：Java领域优质创作者、Java微服务架构公号作者简历模板、学习资料、面试题库、技术互助文末获取联系方式系列专栏目录[Java项目实战]介绍Java组件安装、使用；手写框架等[Aws服务器实战]AwsLinux服务器上操作nginx、git、JDK、Vue等[Java微服务实战]Java微服务实战，SpringCloudNetflix套件、SpringCloudAlibaba
青花锁·2024-01-04 23:21

数据中台建设之路

数据中台是在政企数字化转型过程中，对各业务单元业务与数据的沉淀，构建包括数据技术、数据治理、数据运营等数据建设、管理、使用体系，实现数据赋能。数据中台，是新型信息化应用框架体系中的核心。
诗者才子酒中仙·2024-01-04 20:30

常见的中台架构

—01—数据中台通用体系架构不同的企业对数据有不同的需求。企业数据应用不断更新迭代，企业的中台系统也需要不断变化。从数据处理与数据治理两个维度出发，可以设计一个解耦的数据中台体系架构。
Elivis Hu·2024-01-04 08:10

大数据项目

项目说明：利用scrapy爬取中华英才网和前程无忧上面有关’数据分析师’,‘大数据开发工程师’,'数据采集’的数据并保存到mongodb。
for_syq·2024-01-03 16:05

年薪80万+的大数据开发【教程】都在这儿！

事实上，大数据工作者可以施展拳脚的领域非常广泛，从国防部、互联网创业公司到金融机构，到处需要大数据项目来做创新驱动。其实JAVA工程师转型大数据有着天然优势，不仅仅是前景和薪资等。技术层面来说，大数据使用的Hadoop(在分布式服务器集群上存储海量数据并运行分布式分析应用的一种方法)需要JAVASE基础，即使你没有学过JAVAEE上手Hadoop也是可以的。面对如此光明而诱人的前景，大批JAVA工
yoku酱·2024-01-03 13:36

「曾哥读书」数据中台实战：手把手教你搭建数据中台

本书题目中有两个“数据中台”，但是实际上大部分内容是“电商数据分析”。名不副实，所以豆瓣上的评分有点低。但是如果把它当作电商数据分析入门书来看，基本的架构还是挺完整的。
frozeng·2024-01-03 12:06

数睿通2.0功能更新：支持多版本 Flink 切换，新增数据标签模块

文章目录引言支持多版本Flink切换功能展示使用方法数据标签合并微服务Bug修复，细节优化结语引言小伙伴们，大家好，数睿通2.0数据中台迎来了12月份的更新，由于年底工作繁忙，所以本次更新内容稍微少了点
小螺旋丸·2024-01-03 10:22

数睿通2.0数据接入、数据开发、系统权限、集群监控全面升级

引言数睿通2.0数据中台迎来了11月份的更新，感谢大家的支持，本次更新主要包括以下内容：数据库支持MongoDB数据接入支持MongoDB，支持自定义SQL采集，支持停止运行中的任务数据生产支持FlinkJar
小螺旋丸·2024-01-03 10:21

数睿通2.0数据中台数据资产、数据集市功能发布

引言数睿通2.0数据中台迎来了7月份的首次更新，本次更新主要是添加了数据资产，数据集市的相关核心功能，完整的功能实现尚需要时间打磨，因为最近工作实在是有些繁忙，琐事也多，所以能投入开发的时间着实有限，只实现了部分功能
小螺旋丸·2024-01-03 10:51

数字化转型必备：数睿通 2.0 数据中台升级详解

引言转眼又过了一个月的时间，数睿通2.0数据中台也迎来了本月的更新，本次更新主要包括：数据资产完善（资源评价）数据集市完善，打通审批流程修复数据生产由于DruidSQLUtils不支持Doris导致无法建表的问题优化贴源数据模块
小螺旋丸·2024-01-03 10:51

数睿通2.0：高效的数据处理，主数据与数据表功能全面升级

引言八天很短，七天很长，数睿通2.0数据中台也随之迎来了新一轮的版本迭代，本次更新主要包括：主数据模型（可视化建模）主数据派发（支持派发主数据到下游数据表，rabbitMq，kafka，接口）数据表（数仓分层表信息展示
小螺旋丸·2024-01-03 10:51

数睿通2.0数据中台数据治理—元数据功能发布

文章目录引言数据集成-实时日志数据治理-元模型数据治理-元数据采集数据治理-元数据管理结语引言数睿通2.0目前基本完成了数据集成，数据开发，数据服务三大模块，初步具备了拉数，造数，供数的能力。因为平台相关人员都是兼职开发，并非全职，所以进度没有那么快，这点希望大家可以理解。3月份主要是完善了一下数据集成，添加了实时日志的展示，同时开发了数据治理模块—元数据的相关功能，主要包括元模型，元数据采集，元
小螺旋丸·2024-01-03 10:21

新年快乐—数睿通2.0数据中台全新功能模块发布

文章目录引言数据集成数据库管理文件管理数据接入贴源数据数据开发数据生产sql作业开发FlinkSql作业开发调度中心运维中心资源中心配置中心其他模块结语引言离上次发文已经有接近三个月了，这三个月主要在开发数睿通的数据生产模块，同时优化了一下数据集成，目前已经基本开发完毕了，集成了Flink，Hadoop，可以在线开发FlinkSql作业任务，同时支持Sql任务开发，使平台初步具备了拉数，造数的能力
小螺旋丸·2024-01-03 10:43

全面解读数据中台、数据仓库和数据湖

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵
公众号:肉眼品世界·2024-01-03 00:44

MongoDB学习红宝书 - MongoDB官网使用指南

产品：包含云服务Atlas、MongoDBStich、Server、Compass，Charts以及最新推出的Atlas数据湖等MongoDB所有产品解决方案：包含企业战略的创新方法：遗留系统现代化以及数据中台等
MongoDB中文社区·2024-01-02 09:17

数据中台的数据处理及应用说明

数据中台把数据统一之后，会形成标准数据，再进行存储，形成大数据资产层，进而为客户提供高效服务。支持海量数据的存储、计算、产品化包装过程，为前台基于数据的定制化创新及为业务中台
数通畅联·2024-01-01 11:57

Flink 内容分享(二十七)：Hadoop vs Spark vs Flink——大数据框架比较

大数据开发离不开各种框架，我们通过学习ApacheHadoop、Spark和Flink之间的特征比较，可以从侧面了解要学习的内容。
之乎者也··2024-01-01 05:52

李广乾ppt：数据中台促进“互联网＋”产业创新

2019年9月26日，我应邀参加了中国信息协会主办的“2019（第二届）中国互联网+产业创新合作发展论坛”，并作了《数据中台促进“互联网+”产业创新》的主题报告。
数据智能谷·2024-01-01 03:53

评估数据中台成熟度的7个维度

我们认为数据中台的成熟度评估应该从文中的七个维度入手。
ThoughtWorks·2023-12-31 20:25

Maxcompute数据上云一致性比对

注：这里对数的场景就是指在阿里云平台使用dataworks等大数据开发工具集成业务系统数据库（oracle等）数据上云到maxcompute的场景，所以，示例的SQL也是针对maxcompute。
阿里云大数据AI技术·2023-12-31 19:36

【亚马逊云科技】使用Amazon Lightsail快速建站

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
一头小山猪·2023-12-31 17:57

HBase 例行灾备方案：快照备份与还原演练

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
　Laurence·2023-12-31 12:28

大数据开发【3】 -- hadoop的云集群配置

首先要配置好一台机器的伪分布式，这样方便后面的配置。关于伪分布式的：请看伪分布式搭建文章目录1.配置yarn2.各个主机配置3.集群的配置4.一些问题5.强烈推荐的参考文章1.配置yarn配置yarn-env.sh,对于3版本的就不用配置了，因为已经默认从hadoop-env.sh读取了。配置yarn-site.xml文件。yarn.nodemanager.aux-servicesmapreduc
天下一般·2023-12-31 10:25

你需要懂一点ClickHouse的基础知识

大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！
王知无(import_bigdata)·2023-12-30 09:39

数据中台-架构、构建与体系建设

数据中台-架构、构建与体系建设数据中台架构数据中台构建方法论技术体系数据体系服务体系运营体系数据中台功能架构数据中台技术架构企业构建数据中台评估统计分析阶段决策支持阶段数据驱动阶段运营优化阶段数据汇集-
Ybb_studyRecord·2023-12-30 03:53

大数据实践之路 读后感

CSDN博客商业银行数据资产估值白皮书，推荐系统源码下载-CSDN博客用友BIP数据资产入表解决方案白皮书，推荐系统源码下载-CSDN博客1、内容总体概括简单来说一下，本书内容可以分四个大部分：一是介绍了数据中台的五大功能模块即元数据中心
Michael_Shentu·2023-12-29 19:24

重磅发布！《2022中国数据智能产业图谱+中国企业数智化转型升级服务全景图》

中新赛克海睿思从数千家企业中脱颖而出，成功入选大数据、大数据分析平台、数据中台等3大板块，被评选为典型代表企业。此图谱中，中新赛克海睿思入选的核心服
海睿思·2023-12-29 17:24

爬虫现在还有那么吃香嘛？

Python作为一种广泛应用的编程语言，在Web开发、大数据开发、人工智能开发和嵌入式开发等领域都有着重要的应用。Python的易学性、清晰性和可移植性等特点使它得到很多技术人士的喜爱。
会python的小孩·2023-12-28 17:40

Flink开发利器StreamX

背景Hadoop体系虽然在目前应用非常广泛，但架构繁琐、运维复杂度过高、版本升级困难，且由于部门原因，数据中台需求排期较长，我们急需探索敏捷性开发的数据平台模式。
Apache StreamPark·2023-12-28 15:34

推荐几个开源HTTP服务接口快速生成工具

（3）数据中台架构中，企业数据资产对外
大龄码农有梦想·2023-12-28 13:10

数据中台架构原理与开发实战：从数据采集到数据清洗

1.背景介绍数据中台是一种架构模式，主要用于解决企业内部数据的采集、存储、清洗、分析和应用等问题。
一枚可爱的程序女孩·2023-12-28 05:13
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他