E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据开发数据中台
Java从入门到精通
1、首先要学习JavaSE,掌握Java语言本身、Java核心开发技术以及Java标准库的使用;2、如果继续学习JavaEE,那么Spring框架、数据库开发、分布式架构就是需要学习的;3、如果要学习
大数据开发
nightluo
·
2024-02-13 01:52
基础学习
java
开发语言
小白入门大数据,这一篇就够了
所以不论是计算机专业的程序员,还是非计算机专业准备转行计算机的跨行人员都想学习大数据,从事
大数据开发
工作。但是当你站在一个行业门外的时候,你更多的是看到他的价值和前景,这会促使你义无反顾地往里冲。但
弄潮大数据
·
2024-02-12 18:03
一本Python爬虫的书,凭什么能畅销10W册
Python作为一种广泛应用的编程语言,在Web开发、
大数据开发
、人工智能开发和嵌入式开发等领域都有着重要的应用。Python的易学性、清晰性和可移植性等特点使它得到很多技术人士的喜爱。
程序员老冉
·
2024-02-12 11:21
python
爬虫
开发语言
pycharm
青少年编程
供应链领域
数据中台
架构建设(上)
负责:中央/分销预订系统性能优化;活动&优惠券等营销中台建设;交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可
JavaEdge.
·
2024-02-12 11:40
架构
字节跳动官方出品AI,白嫖使用GPT4!
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
JavaEdge.
·
2024-02-12 03:44
java
大厂的供应链域
数据中台
设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-11 18:16
后端
深入浅出 testing-library
我们是袋鼠云数栈UED团队,致力于打造优秀的一站式
数据中台
产品。我们始终保持工匠精神,探索前端道路,为社区积累并传播经验价值。
·
2024-02-11 18:52
前端单元测试单测
基于 Webpack5 Module Federation 的业务解耦实践
我们是袋鼠云数栈UED团队,致力于打造优秀的一站式
数据中台
产品。我们始终保持工匠精神,探索前端道路,为社区积累并传播经验价值。
·
2024-02-11 17:16
供应链域
数据中台
设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-11 17:09
后端
大厂的供应链域
数据中台
设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-11 17:09
后端
大数据开发
之电商系统架构从零到一
福兴信息科技:揭秘电商系统架构,从零到一打造大数据驱动的购物新世界了解更多信息,请关注:福兴信息科技了解更多信息,请关注:福兴信息科技随着互联网的迅猛发展,电子商务已成为人们生活中不可或缺的一部分。然而,背后的电商系统架构是如何构建的呢?今天,就让我们一起跟随福兴信息科技的脚步,从零开始,探索大数据驱动的电商系统架构的奥秘。一、从零开始:规划电商系统架构蓝图在福兴信息科技,我们深知电商系统架构的重
福兴信息科技
·
2024-02-10 17:55
零售
科技
小程序
大数据
大数据
京东面试总结
出现的问题:
大数据开发
没有理论支撑,应该可以涉及多一点的应用方面;其次引导面试官提问MapReduce;在
小小少年Boy
·
2024-02-09 21:45
数据中台
pdf_
数据中台
到底怎么建设,有人把他说清楚了
各位朋友,大家晚上好,我给大家分享的是《关于
数据中台
建设之思考》。
weixin_39699121
·
2024-02-09 18:59
数据中台
pdf
读透《阿里
数据中台
实践》
最近阿里巴巴分享了《阿里巴巴
数据中台
实践》这个PPT(自行搜索原始文章),对于
数据中台
的始作俑者,还是要怀着巨大的敬意去学习的,因此仔细的研读了,希望能发现一些不一样的东西。
TD_TH
·
2024-02-09 18:58
阿里技术阅读
阿里数据中台
数据中台
中台实践
中台
八问
数据中台
:关于
数据中台
你想知道的都在这里!
数据中台
最近特别火,各个企业都在关注如何构建自己的
数据中台
,利用
数据中台
打造数据驱动的经营能力。
pucheung
·
2024-02-09 18:58
大数据
学习大数据应该掌握哪些技能
想要了解
大数据开发
需要掌握哪些技术,不妨先一起来了解一下
大数据开发
到底是做什么的~1、什么是大数据?
我想去吃ya
·
2024-02-09 13:15
单元测试
开发语言
python
数据库开发
大数据
使用 Kubernetes 部署 Flink 应用
作者:薄荷脑https://blog.csdn.net/zjerryj/article/details/100063858大数据技术与架构点击右侧关注,
大数据开发
领域最强公众号!
王知无(import_bigdata)
·
2024-02-09 06:38
大数据从何学起?大数据脑图+学习路线清晰的告诉你!
【
大数据开发
学习资料领取方式】:加入大数据技术学习交流扣扣群458345782,点击加入群聊,私信管理员即可免费领取第一阶段linux+搜索+hadoop体系Linux基础→sh
yoku酱
·
2024-02-08 18:16
大数据系列—数据迁移(Sqoop,Flume,DataX)对比学习(stage3)
MynameisJinsuo.Shi.一个不正经的
大数据开发
工程师,目前从事在公司主要进行CDP平台的数据接入、数据的ETL、数据的融合与事件的展开工作。
道-闇影
·
2024-02-08 06:07
big
data
大数据
sqoop
flume
图解大数据 | 大数据分析挖掘-Spark初步
www.showmeai.tech/tutorials/8…本文地址:www.showmeai.tech/article-det…声明:版权所有,转载请联系平台与作者并注明出处1.Spark是什么学习或做
大数据开发
的同学
Dashesand
·
2024-02-08 03:22
大数据
数据分析
spark
数仓:用户行为类指标一网打尽
关注公众号,回复关键字【资料】,获取【10万字大数据框架面试知识点】与【
大数据开发
的命令手册】先来看下用户类行为指标说明,然后下面详解常写的指标。
大数据左右手
·
2024-02-07 09:35
大数据
大数据
数仓:事实表设计方法,原则和三种类型选择
关注公众号,回复关键字【资料】,获取【10万字大数据框架面试知识点】与【
大数据开发
的命令手册】事实表设计方法事实表作为数据仓库维度建模的核心,紧紧围绕着业务过程来设计。
大数据左右手
·
2024-02-07 09:35
大数据
数据仓库
数据挖掘
数据分析
【Flink】FlinkSQL实现数据从Kafka到MySQL
简介未来Flink通用化,代码可能就会转换为sql进行执行,
大数据开发
工程师研发Flink会基于各个公司的大数据平台或者通用的大数据平台,去提交FlinkSQL实现任务,学习Flinksql势在必行。
一杯咖啡半杯糖
·
2024-02-07 06:39
Flink实战
Flink解决方案
flink
kafka
mysql
各互联网企业测绘资质调研
1导航地图甲级测绘资质2互联网地图服务甲级资质2007空间
数据中台
产品间数据同步、空间数据探查、空间数据标准与质量、空间数据开发、空间数据建模与融合、空间数据服
shishi521
·
2024-02-07 03:04
测绘资质申请
网络
Flink 动态表 (Dynamic Table) 解读
博主历时三年精心创作的《大数据平台架构与原型实现:
数据中台
建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行,点击《重磅推荐:建大数据平台太难了!给我发个工程原型吧!》
Laurence
·
2024-02-06 11:26
大数据专题
flink
dynamic
table
动态表
连续查询
无界表
为什么传统
数据中台
搞不下去了
现在大厂又开始拆中台了,传统行业中很多企业花大价钱构建的
数据中台
要么是成为一个摆设一个玩具,要么就处于“IT疲于应付、业务极度不满、数据质量混乱、开发成本周期失控”的窘境。
Trident敏捷数据开发平台
·
2024-02-06 07:57
大数据
sql
数据仓库
数据库开发
SQL在
数据中台
/数据仓库领域的局限性
在复杂数据项目场景下,SQL的使用存在局限巨大的局限性可能表现为业务逻辑的碎片化、不能全局优化、无效的数据移动以及大量使用临时表。业务逻辑的碎片化问题在冗长的SQL脚本中,每一个目标数据项(指标、标签等)的逻辑分散在众多的SQL代码段中,每个SQL代码中又承载了多个目标数据项业务逻辑的碎片。在冗长的SQL脚本中,业务逻辑碎片交叉耦合。目标数据项目业务逻辑碎片化,破坏了业务逻辑的原子性,导致一系列问
Trident敏捷数据开发平台
·
2024-02-06 07:56
sql
大数据
数据仓库
etl
数据库开发
MSR架构:推动
数据中台
进入2.0时代
MSR架构MSR架构,实现语义层、模型层、运行层的彻底解耦,模型层封装常用的业务对象视图,为前端语义化、自助化提供基础。语义层基于业务对象视图面向业务端用户提供语义化的业务逻辑表达式,支持业务端用户自助开发业务逻辑,业务端的开发者只关注于业务逻辑本身,不需要考虑后台是何种数据计算处理框架(MR、SPARK、FLINK、SQL…),也不需要考虑后台是批处理还是流处理。运行框架层提供面向各种主流运行框
Trident敏捷数据开发平台
·
2024-02-06 07:54
架构
大数据
数据仓库
数据库开发
大数据开发
之机器学习总结(一)
大数据开发
之机器学习总结1.背景在
大数据开发
中,数据分析目的一般分为2大类,一个是基于已有数据,提炼出想要的数据汇总信息。一个是基于已有数据使用算法训练出模型,基于模型预测和分析未来的新数据。
闻香识代码
·
2024-02-05 21:41
大数据
机器学习
用户画像
机器学习
大数据
算法
数据中台
第5章 数据汇聚联通:打破企业数据孤岛
要构建企业级的
数据中台
,第一步就是要让企业内部各个业务系统的数据实现互联互通,从物理上打破数据孤岛,这主要通过数据汇聚和交换的能力来实现。
四月天03
·
2024-02-04 12:51
云原生数据中台:让数据用起来
big
data
大数据
智慧水务(水厂)大数据平台,打造水务运营管理驾驶舱
以物联感知技术、大数据、智能控制、云计算、人工智能、数字孪生、AI算法、虚拟现实技术为核心,以监测仪表、通讯网络、数据库系统、
数据中台
、模型软件、前台展示、智慧运维等产
郭靖守襄阳【软芯民用】
·
2024-02-04 09:52
智慧水务
数据大屏可视化
大数据
智慧城市
信息可视化
物联网
MySQL调优
优化类型大概分类三个类型结构/架构优化:读写分离、集群热备、分布式架构、引入缓存/消息/搜索中间件、分库分表、中台架构(大
数据中台
、基础设施中台)等配置/参数优化:调整应用系统中各层面的配置文件、启动参数达到优化性能的目标代码
whiteBrocade
·
2024-02-04 06:48
MySQL
mysql
数据库
性能优化
【
大数据开发
运维解决方案】Hadoop+Hive+HBase+Kylin 伪分布式安装指南
Hadoop2.7.6+Mysql5.7+Hive2.3.2+Hbase1.4.9+Kylin2.4单机伪分布式安装文档注意:####################################################################本文档已经有了最新版本,主要改动地方为:1、zookeeper改为使用安装的外置zookeeper而非hbase自带zookeeper,新
运维道上奔跑者
·
2024-02-04 05:43
大数据
hadoop
分布式
2019-10-08
大数据开发
进阶之路
市场需要的水平熟练掌握Linux、SQL与HiveSQL掌握Hadoop生态主流技术,如HDFS/MapRedunce/Yarn/HBase/Flume等掌握Spark生态核心技术,如Spark架构/RDD转换算子/行动算子/持久化算子/任务调度/SparkStreaming等能够对崭新的问题进行建模分析,使用一直只是进行解决掌握大数据平台调优技能,源码阅读技巧具备应对BAT级别相关岗位面试能力学
红瓦李
·
2024-02-03 20:39
API服务假死
1、OOM,直接看日志服务挂掉了2、服务假死,看服务日志,日志还在正常打印,但是所有请求都被拒绝项目背景:以前在别的项目现场,
数据中台
,使用API服务对外提供接口之前,都是对数据进行加工处理之后,A
爱晒太阳的小老鼠
·
2024-02-03 03:03
#
问题排查
java
#
高并发
java
问题排查
专业数据治理:
数据中台
系统塑造企业未来的数字化运营管理新秩序
数据中台
应运而生,它被认为是企业数字化转型的至关重要的组成部分,为企业提供了崭新的数据管理和应用模式。
亿发软件YiFaRJ
·
2024-02-02 23:36
数据分析
某知名乳业集团:夯实软件安全基础,助力乳业数字化创新发展
代码隐患凸显,数字化进程遇挑战在数字化浪潮中,该乳业集团积极响应,并制定了突破性数字化战略规划,通过智能制造、ERP系统、智能办公三大核心能力,结合
数据中台
和业务中台的支撑,来推动新零售和智慧供应链的创新发
开源网安
·
2024-02-02 21:48
案例精选
安全
大数据
人工智能
都 2024 年了!程序员的到底出路在哪里!?继续卷技术?晋升管理层?还是转业?
1)程序员的难处2)程序员专业方向3)大数据3.1.
大数据开发
涉及到哪些技术3.2.
大数据开发
涉及到的框架3.3.大数据前景4)程序员的三大出路4.1.继续卷技术4.2.晋升管理层4.3.转业4.3.1
bmyyyyyy
·
2024-02-01 21:25
其他
#大数据
#程序员的出路
秋招的一些面经吧——大数据面经和java面经(阿里巴巴)
应聘方向是
大数据开发
和java开发大概拿到的offer有:阿里、美团、快手、贝壳、作业帮、旷视、农行总部、浙江大华、海康威视、有赞、云从科技、招银网络科技、oppo一.阿里巴巴(已拿offer):渣硕阿里面了总共三个部门
大数据教学笔记
·
2024-02-01 20:19
大数据
面经
java后台
java
大数据
开发语言
实现成本最优的一体化管理,新一代数据平台的建设方式丨爱分析调研
导读1.当前,企业在大数据和
数据中台
建设上取得成果,但数据开发管理仍具挑战性(成本、效率、复杂度)。
ifenxi爱分析
·
2024-02-01 20:10
人工智能
Flink 读取 Kafka 消息写入 Hudi 表无报错但没有写入任何记录的解决方法
博主历时三年精心创作的《大数据平台架构与原型实现:
数据中台
建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行,点击《重磅推荐:建大数据平台太难了!给我发个工程原型吧!》
Laurence
·
2024-02-01 15:24
大数据专题
付费专栏
flink
hudi
kafka
无数据
无写入
streaming
大数据开发
流程图
1、大数据流程图2、大数据各个环节主要技术2.1、数据处理主要技术Sqoop:(发音:skup)作为一款开源的离线数据传输工具,主要用于Hadoop(Hive)与传统数据库(MySql,PostgreSQL)间的数据传递。它可以将一个关系数据库中数据导入Hadoop的HDFS中,也可以将HDFS中的数据导入关系型数据库中。Flume:实时数据采集的一个开源框架,它是Cloudera提供的一个高可用
xyzkenan
·
2024-02-01 14:30
大数据开发
大数据
大数据开发流程
Spark系列(十)Shuffle的技术难点问题--Spark比MapReduce快的真正原因
写在前面:我是「nicedays」,一枚喜爱做特效,听音乐,分享技术的
大数据开发
猿。这名字是来自worldorder乐队的一首HAVEANICEDAY。
NICEDAYSS
·
2024-02-01 12:03
Spark
大数据
spark
mapreduce
【
大数据开发
Spark】第一篇:Spark 简介、Spark 的核心组成(5大模块)、Spark 的主要特征(4大特征)、Spark 对比 MapReduce
文章目录1Spark简介2Spark的核心组成(5大模块)3Spark的主要特征(4大特征)4Spark对比MapReduce1Spark简介初步了解一项技术,最好的方式就是去它的官网首页,一般首页都会有十分官方且准确的介绍,学习Spark也不例外,官方介绍:ApacheSpark™是一种多语言引擎,用于在单节点机器或集群上执行数据工程、数据科学和机器学习。我们可以得知,Spark可以单节点运行,
超周到的程序员
·
2024-02-01 12:02
#
Spark
大数据开发技术
spark
big
data
mapreduce
大数据开发
之离线数仓项目(用户行为采集平台)(可面试使用)
第1章:数据仓库概念数据仓库,是为企业指定决策,提供数据支持的,可以帮助企业,改进业务流程、提高产品质量等。数据仓库的输入数据通常包括:业务数据、用户行为数据和爬虫数据等。业务数据:就是各行业在处理事务过程中产生的数据。比如用户在电商网站中登录、下单、支付等过程中,需要和网站后台数据库进行增删改查交互,产生的数据就是业务数据。业务数据通常存储在mysql、oracle等数据库中。用户行为数据:用户
Key-Key
·
2024-02-01 08:46
大数据
面试
职场和发展
hadoop
分布式
弹性分布式数据集
spark
有赞一面:亿级用户DAU日活统计,有几种方案?
尼恩作为技术中台、
数据中台
的架构师,致力于为大家研究出一个3高架构知识宇宙,所以,
40岁资深老架构师尼恩
·
2024-01-31 09:35
面试
java
面试
大数据
后端
redis
如何通过Hive/tez与Hadoop的整合快速实现
大数据开发
一、Hive的功能Hive是基于Hadoop的一个外围数据仓库分析组件,可以把Hive理解为一个数据仓库,但这和传统的数据库是有差别的。传统数据库是面向业务存储,比如OA、ERP等系统使用的数据库,而数据仓库是为分析数据而设计的。同时,数据仓库是在数据量巨大的情况下,为了进一步挖掘数据资源、为了企业决策需要而产生的,它不是所谓的“大型数据库”。Hive通过将结构化的数据文件映射到一张数据库表上,然
小枫@码
·
2024-01-31 08:00
大数据架构师
hadoop
大数据
hive
大数据开发
:hadoop系统搭建以及spark编程
相关文章已上传至github,可以移步至GitHub查看。csdn这个坑先留着…传送门:https://github.com/louxinyao/Hadoop-spark
墨染枫
·
2024-01-31 06:47
大数据开发
大数据
分布式
hadoop
spark
秒级响应,显著增效:明日控股携手奇点云,打造大宗贸易的
数据中台
标杆
而在
数据中台
项目三期落地后,明日控股不仅越过了数据在线化、数据可视化阶段,进而达成了10秒内的业
奇点云
·
2024-01-31 00:16
奇点案例
奇点云
数据中台
开发接单群及网站
单子有:Python、java、爬虫、数据分析、
大数据开发
、matlab等等~有的让工程师自己谈!有的发单人员直接报价!因为有的单子客户心里没有预算!甚至有的客户只有一个题目!
「已注销」
·
2024-01-30 15:19
接单
hadoop
大数据
big
data
hive
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他