E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库数据中台数据湖
数据技术的进化史:从
数据仓库
到
数据中台
再到数据飞轮
数据技术介绍:1.
数据仓库
(DataWarehouse)概念与起源:
数据仓库
是20世纪90年代初期兴起的一种数据管理和分析技术。
Earth explosion
·
2025-02-22 15:28
spark
大数据
分布式
【面试系列】TypeScript高频面试题及详细解答
⭐️全流程数据技术实战指南:全面讲解从数据采集到数据可视化的整个过程,掌握构建现代化数据平台和
数据仓库
的核心技术和方法。文章目录常见的初级面试题1.什么是TypeSc
野老杂谈
·
2025-02-22 11:01
全网最全IT公司面试宝典
面试
typescript
编程语言
前端
深入浅出
数据中台
:概念、架构与应用
一、
数据中台
概念(一)定义
数据中台
是一套可持续“让企业的数据用起来”的机制,是一种战略选择和组织形式。
小四的快乐生活
·
2025-02-22 10:53
架构
大数据
在虚拟机上安装MySQL和Hive
文章目录零、学习目标一、Hive概述(一)Hive的SQL-HQL(二)数据库与
数据仓库
(三)Hive的适用场景二、下载、安装和配置MySQL(一)下载MySQL组件压缩包(二)将MySQL组件压缩包上传到虚拟机
酒城译痴无心剑
·
2025-02-22 06:23
数据库编程世界
hive
mysql
数据库
市场调研
数据中台
架构:Python 爬虫集群突破反爬限制的工程实践
为了构建一个高效的
数据中台
架构,我们需要从多个数据源采集数据,而网络爬虫是获取公开数据的重要手段之一。然而,许多网站为了保护数据,设置了各种反爬机制,如IP封禁、验证码、动态内容加载等。
西攻城狮北
·
2025-02-22 02:40
架构
python
爬虫
实战案例
Oracle 12c 并发统计信息收集功能:技术解析与实践指南
对于大规模数据库或
数据仓库
环境,这种串行模式可能导致统计信息收集耗时过长,影响维护窗口效率。
安呀智数据
·
2025-02-22 01:28
Oracle
并发统计信息收集
oracle
12c19c21c
oracle
数据库
SQLMesh 系列教程7- 详解 seed 模型
在本文中,我们介绍了Seed模型的定义及其在实际项目中的应用,展示了如何通过简单的SQL查询创建Seed模型,并将其加载到
数据仓库
中。通过一个电
梦想画家
·
2025-02-22 00:17
#
python
数据分析工程
sqlmesh
数据工程
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
主要分为以下四个部分:一、鹰角数据平台架构二、
数据湖
选型三、湖仓一体建设四、未来展望一、鹰角数据平台架构首先给大家介绍一下鹰角目前的数据平台架构。在介绍之前,关于鹰角我先给大家做简单的介绍。
·
2025-02-21 19:13
flink大数据实时计算
【AI大数据】
数据中台
的数据分析与挖掘:从数据到业务的决策
文章目录1.前言2.基本概念术语说明2.1数据模型及其实体关系实体(Entity)属性(Attribute)实体关系(EntityRelationships)2.2
数据仓库
2.3分析引擎2.4噪声数据2.5
AI天才研究院
·
2025-02-21 08:34
DeepSeek
R1
&
大数据AI人工智能大模型
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
为AI聊天工具添加一个知识系统 之113 详细设计之54 Chance:偶然和适配 之2
和它在实操中的三种槽(占据槽,请求槽和填充槽,实时数据库(source)中数据(流入ETL的一个正序流程行列并发靶向整形绑定变量)是如何通过“命名所依的AI行为”、“分类所缘的因果结构”和“求实所据的机器特征”(元
数据仓库
一水鉴天
·
2025-02-21 00:15
软件智能
智能制造
人工语言
开发语言
人工智能
(一)大数据---Hadoop整体介绍(架构层)----(组件(3)
==================================================================基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、
数据仓库
2401_84166965
·
2025-02-19 16:15
程序员
大数据
hadoop
架构
数据统一高效管理 HashData支撑“数智石油”高质量发展
酷克数据(HashData)作为赋能石油石化企业数字化转型的先进代表,受邀参加此次行业盛会,展示了与昆仑数智携手打造的油气行业
数据湖
联合解决方案和创新成果。
·
2025-02-19 15:02
数据库
正式开源:使用Kafka FDW 加载数据到 Apache Cloudberry™
Cloudberry可以作为
数据仓库
使用
·
2025-02-19 15:58
数据库开源软件
数仓_数据口径
数仓_数据口径数据口径含义数据口径包含口径收敛数据口径含义在
数据仓库
(数仓)中,数据口径是指在数据统计和分析过程中,对数据的定义、计算方法、范围和标准等方面的详细规定。
TTXS123456789ABC
·
2025-02-19 06:56
#
XM1离线数仓_金融零售
大数据
DeepSeek的训练与优化流程
DeepSeek的训练与优化流程一、数据工程体系1.多模态数据融合处理动态
数据湖
架构:实时摄入互联网文本、科学论文、专利文献、传感器数据等20+数据源日均处理原始数据量达1.2PB,支持200+文件格式自动解析智能清洗流水线
程序猿000001号
·
2025-02-18 17:01
DeepSeek
训练
优化
数据仓库
和
数据湖
数据仓库
和数据库
数据仓库
和
数据湖
是两种不同的数据存储解决方案,它们在设计、用途和数据管理方式上有着显著的区别。
qq_25467441
·
2025-02-18 12:11
数据仓库
数据库
数据仓库
、
数据湖
和
数据湖
仓
数据仓库
、
数据湖
和
数据湖
仓是三种常见的数据存储和管理技术,各自有不同的特点和适用场景。
阿湯哥
·
2025-02-18 11:58
数据仓库
spark
大数据
数据库MySQL 8.0.32安装包网盘资源下载(附教程)
MySQL支持多种操作系统,包括Windows、Linux和MacOS等,并且广泛用于各种应用程序中,如Web应用程序、
数据仓库
和电子商务系统等。
听风说雨的人儿
·
2025-02-17 14:56
数据库
mysql
百度云
数据仓库
与
数据湖
的协同工作:智慧数据管理的双引擎
数据仓库
与
数据湖
的协同工作:智慧数据管理的双引擎引言在数据驱动的今天,企业和组织收集和存储的数据量正以惊人的速度增长。如何高效管理和利用这些数据,成为了决策者和技术专家的共同难题。
Echo_Wish
·
2025-02-17 07:58
实战高阶大数据
人工智能
科技
大数据
MariaDB数据库部署
数据库初始化4.设置防火墙策略5.登录数据库·数据库常用语句·创建数据库·查询指定位置数据·数据库备份·彻底删除数据库·恢复数据·数据库介绍数据库:是指按照某些特定结构来存储数据资料的
数据仓库
数据库管理系统
m0_修道成仙
·
2025-02-16 00:03
Linux
linux
数据库
《Python全栈开发:构建高并发物联网
数据中台
实战》
一、项目概述本文将基于Python生态构建一个完整的物联网
数据中台
系统,实现从设备接入到商业智能的全链路开发。
放氮气的蜗牛
·
2025-02-15 22:15
深度博客
python
物联网
开发语言
数据总线/一致性维度/总线矩阵
数据仓库
数据总线一种技术解决方案,旨在实现
数据仓库
与各个数据源之间的数据集成、交换和共享,通常做法是将所有的数据源连接到一条共享的数据总线上。
DouMiaoO_Oo
·
2025-02-15 17:43
数据仓库
Apache Iceberg 与 Apache Hudi:
数据湖
领域的双雄对决
在数据存储和处理不断发展的领域中,
数据湖
仓的概念已经崭露头角,成为了一种变革性的力量。
夜里慢慢行456
·
2025-02-15 12:35
大数据
大数据
探索数据云的无缝桥梁:Apache Spark 与 Snowflake 的完美结合
spark-snowflakeSnowflakeDataSourceforApacheSpark.项目地址:https://gitcode.com/gh_mirrors/sp/spark-snowflake项目介绍在大数据处理的浩瀚宇宙中,Snowflake以其独特的云
数据仓库
能力闪耀
窦育培
·
2025-02-15 12:32
基于Odoo的
数据中台
建设:助力企业数据驱动决策
数据中台
作为企业数字化转型的核心,承担着整合数据资源、优化业务流程、提升决策效率的重要使命。Odoo作为全球领先的开源ERP系统,凭借其强大的数据整合与分析能力,正在成为企业构建
数据中台
的理想选择。
邹工转型手札
·
2025-02-15 02:39
风吟九宵
Duodoo开源
企业信息化
人工智能
开源
制造
数据仓库
与数据挖掘记录 二
1.
数据仓库
的产生从20世纪80年代初起直到90年代初,联机事务处理一直是关系数据库应用的主流。
匆匆整棹还
·
2025-02-14 22:08
数据仓库
数据挖掘
人工智能
数据仓库
与数据挖掘记录 三
数据仓库
的数据存储和处理数据的ETL过程数据ETL是用来实现异构数据源的数据集成,即完成数据的抓取/抽取、清洗、转换.加载与索引等数据调和工作,如图2.2所示。
匆匆整棹还
·
2025-02-14 21:27
数据挖掘
高聚合 低耦合
同样的,可以将这个思想用在建设企业
数据仓库
上。做
草藤木屋
·
2025-02-14 21:56
软件设计
Data
Warehouse
软件工程
高聚合
低耦合
高聚合低耦合
数据湖
和
数据仓库
的区别?
简介
数据湖
这个概念和
数据仓库
这两个概念一直搞不清楚,之前感觉区别就是
数据湖
是
数据仓库
的父集。
数据湖
是个伪命题,平时生活中也用不到,然后今天听了我的一个师哥的讲解,然后简单总结下。
春风不会绿大地
·
2025-02-14 08:25
大数据
数据仓库
Paimon实战 -- paimon原理解析
FlinkTableStore,2022年1月在ApacheFlink社区从零开始研发,Flink社区希望能够将Flink的Streaming实时计算能力和Lakehouse新架构优势进一步结合,促进数据在
数据湖
上真正实时流动起来
阿华田512
·
2025-02-13 14:06
Paimon学习必读系列
paimon
数据湖
paimon介绍
flink写入
paimon实战 --核心原理和Flink应用进阶
简介Flink社区希望能够将Flink的Streaming实时计算能力和Lakehouse新架构优势进一步结合,推出新一代的StreamingLakehouse技术,促进数据在
数据湖
上真正实时流动起来,
阿华田512
·
2025-02-13 14:36
Paimon学习必读系列
Flink学习必读系列
flink
大数据
flink读写
paimon
数据湖
新型大数据架构之湖仓一体(Lakehouse)架构特性说明——Lakehouse 架构(一)
湖仓一体(Lakehouse)——新的大数据架构模式同时具备数仓与
数据湖
的优点湖仓一体架构存储层计算层湖仓一体特性单一存储拥有
数据仓库
的查询性能存算分离开放式架构支持各种数据源类型支持各种使用方式架构简单数据共享
m0_74825238
·
2025-02-13 05:24
面试
学习路线
阿里巴巴
大数据
架构
分布式架构设计全解:以银行系统为例
Hadoop用于构建大
数据仓库
并支持数据分析,F5优化网络流量并确保高可用性,Dubbo和SpringCloud实现服务间的通信和微服务架构。
聚合收藏
·
2025-02-12 04:54
hive数仓的分层与建模
Hive
数据仓库
分层和数据建模是一种常见的
数据仓库
设计方法,旨在通过分层的方式组织数据,提高数据的可维护性、可复用性和查询性能。
korry24
·
2025-02-11 13:04
hive
hadoop
数据仓库
HiveQL命令(三)- Hive函数
ApacheHive作为一种流行的
数据仓库
工具,提供了丰富的内置函数,帮助用户高效地处理和分析存储在Hadoop分布式文件系统(HDFS)中的数据。这些内置函数涵盖了数值计算、字符
BigDataMagician
·
2025-02-11 12:00
HiveQL命令
hive
hadoop
数据仓库
企业智能分析BI:洞察数据,驱动未来
企业智能分析BI系统,是一种运用
数据仓库
、在线分析和数据挖掘技术来处理和分析数据的崭新技术,目的是帮助企业决策者做出更好的决策。它像一把钥
用友协同与数据服务
·
2025-02-11 07:43
大数据
第十一章
数据仓库
和商务智能
单选题(每题1分,共26道题)1、[单选]
数据仓库
建设的主要驱动力A:整合数据、减少冗余和提高信息一致性B:运营支持职能、合规需求和商务智能活动C:数据集成、分析应用和决策支持D:客户和消费者的剧增、分析的需求
joewdc
·
2025-02-11 06:41
DAMA-CDGA
数据仓库
大数据
关于阿里云DataWorks的20道面试题
DataWorks的基本概念围绕其作为一个大数据开发和治理的平台,它整合了多种大数据引擎如MaxCompute、Hologres、EMR、AnalyticDB、CDP等,旨在为
数据仓库
、
数据湖
及湖仓一体化解决方
编织幻境的妖
·
2025-02-11 01:31
阿里云
云计算
掌握大数据--Hive全面指南
1.Hive简介2.Hive部署方式3.Hive的架构图4.Hive初体验5.HiveSQL语法--DDL操作数据库1.Hive简介ApacheHive是建立在Hadoop之上的一个
数据仓库
工具,它提供了一种类似于
纪祥_ee1
·
2025-02-10 22:40
大数据
hive
hadoop
BIEE7本中英书籍合集:商业智能学习提升全攻略
内容涵盖基础概念、安装配置、用户界面操作、分析功能、报表发布、交互式仪表板设计、
数据仓库
管理和最新版功能介绍,是学习BIEE的理
含老司开挖掘机
·
2025-02-10 17:27
【Apache Paimon】-- 2 -- 核心特性 (0.9.0)
目录1、实时更新1.1、实时大批量更新1.2、支持定义合并引擎1.3、支持定义更新日志生成器2、海量数据追加处理2.1、appendtable2.2、快速查询3、
数据湖
功能(类比:hudi、iceberg
oo寻梦in记
·
2025-02-09 16:38
Apache
Paimon
大数据
Apache
paimon
数据湖
【面试系列】后端开发工程师 高频面试题及详细解答
⭐️全流程数据技术实战指南:全面讲解从数据采集到数据可视化的整个过程,掌握构建现代化数据平台和
数据仓库
的核心技术和方法。文章目录常见的初级面试题1.请解释一下REST
野老杂谈
·
2025-02-09 09:47
全网最全IT公司面试宝典
面试
职场和发展
后端开发工程师
基于苏宁易购模式设计的“凌优购“电商APP开发方案,融合O2O新零售特点,采用Spring Cloud+Flutter+Elasticsearch技术栈:
一、系统架构设计用户端(Flutter跨平台)商家端(React管理后台)配送端(AndroidSDK)↑↑↑API网关(SpringCloudGateway)↑微服务集群(商品/订单/会员/营销)↑
数据中台
星糖曙光
·
2025-02-09 09:16
后端语言(node
javascript
vue等等)
spring
cloud
flutter
elasticsearch
react.js
redis
关于ETL的两种架构(ETL架构和ELT架构)
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。ETL是构建
数据仓库
的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的
数据仓库
模型,将数据加载到
数据仓库
中去。
不会写代码的女程序猿
·
2025-02-09 06:22
etl
架构
数据仓库
关于ETL的两种架构(ETL架构和ELT架构)
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。ETL是构建
数据仓库
的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的
数据仓库
模型,将数据加载到
数据仓库
中去。
不会写代码的女程序猿
·
2025-02-09 05:47
etl
架构
数据仓库
【面试系列】软件架构师 高频面试题及详细解答
⭐️全流程数据技术实战指南:全面讲解从数据采集到数据可视化的整个过程,掌握构建现代化数据平台和
数据仓库
的核心技术和方法。⭐️构建全面的数据指标体系
野老杂谈
·
2025-02-08 20:08
全网最全IT公司面试宝典
面试
职场和发展
软件构建
功能强大的开源
数据中台
系统 DataCap 2024.03.9 发布
推荐一套基于SpringBoot开发的简单、易用的开源权限管理平台,建议下载使用:https://github.com/devlive-community/authx推荐一套为Java开发人员提供方便易用的SDK来与目前提供服务的的OpenAI进行交互组件:https://github.com/devlive-community/openai-java-sdkDataCap发布!发布版本发布时间2
·
2025-02-08 14:14
java
功能强大的开源
数据中台
系统 DataCap 2024.03.8 发布
推荐一套基于SpringBoot开发的简单、易用的开源权限管理平台,建议下载使用:https://github.com/devlive-community/authx推荐一套为Java开发人员提供方便易用的SDK来与目前提供服务的的OpenAI进行交互组件:https://github.com/devlive-community/openai-java-sdkDataCap发布!发布版本发布时间2
·
2025-02-08 14:44
java数据中台
功能强大的开源
数据中台
系统 DataCap 2024.03.6 发布
推荐一套基于SpringBoot开发的简单、易用的开源权限管理平台,建议下载使用:https://github.com/devlive-community/authx推荐一套为Java开发人员提供方便易用的SDK来与目前提供服务的的OpenAI进行交互组件:https://github.com/devlive-community/openai-java-sdkDataCap发布!发布版本发布时间2
·
2025-02-08 14:13
功能强大的开源
数据中台
系统 DataCap 2024.03.5 发布
推荐一套基于SpringBoot开发的简单、易用的开源权限管理平台,建议下载使用:https://github.com/devlive-community/authx推荐一套为Java开发人员提供方便易用的SDK来与目前提供服务的的OpenAI进行交互组件:https://github.com/devlive-community/openai-java-sdkDataCap发布!发布版本发布时间2
·
2025-02-08 14:13
数据中台数据可视化
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他