#数据集成

Kettle介绍

Kettle，也称为PentahoDataIntegration，是一种强大的开源ETL（Extract,Transform,Load）工具，用于数据集成、数据转换和数据加载。
小玉起起·2023-12-29 09:04

ETLCloud与简道云结合，实现企业信息同步

ETLCloud介绍ETLCloud是一个集离线数据集成ETL、ELT、CDC实时数据集成、编排调度、数据服务API为一体的数据集成平台(DataOps)，一站式满足企业的各种最为复杂的数据集成场景。
ETLCloud数据集成社区·2023-12-29 09:27

什么是ETL?

ETL是一种数据集成过程，代表着“Extract,Transform,Load”，分别对应着数据抽取、数据转换和数据加载三个阶段。
小玉起起·2023-12-29 09:25

CData ADO.NET Data Providers 2022 Crack

CRUD)支持，无需编码200+基于标准的ADO.NET数据提供程序100%适用于.NETStandard、.NETCore和Xamarin的完全托管.NET无与伦比的数据连接和集成性能低代码ADO.NET数据集成轻松将任何来源的数据连接到
sdk大全·2023-12-29 09:02

SeaTunnel批处理同步MySQL数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。用户只需要配置作业信息，就能完成数据的同步。
万山数据@yqj1987·2023-12-29 09:02

SeaTunnel流处理同步MySQL数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。用户只需要配置作业信息，就能完成数据的同步。
万山数据@yqj1987·2023-12-29 09:02

SeaTunnel同步Oracle数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。
万山数据@yqj1987·2023-12-29 09:53

构建高效数据流转的 ETL 系统：数据库 + Serverless 函数计算的最佳实践

为了实现完整的ETL架构，并完成高效、实时的数据集成、处理和同步，阿里云Serverless函数
阿里云云原生·2023-12-28 13:57

数据仓库与数据集成架构：数据仓库与数据仓库规范与标准的制定与应用

数据集成架构是一种用于将来自不同数据源的数据集成到一个统一的数据仓库中的方法。数据集成架构包括数据清洗、数据转换、数据加载和数据质量检查等步骤。
一枚可爱的程序女孩·2023-12-28 05:45

基于 Flink CDC 实现海量数据的实时同步和转换

主要内容包括：FlinkCDC技术传统数据集成方案的痛点基于FlinkCDC的海量数据的实时同步和转换FlinkCDC社区发展点击查看直播回放&演讲PDF一、FlinkCDC技术CDC是ChangeDataCapture
Apache Flink·2023-12-27 16:51

灵蜂BeeDI ETL

为此，国产数据集成软件厂商北京灵蜂软件有限公司日前宣布，推出最新版本的企业级数据集
weixin_49476464·2023-12-26 23:38

K8S三台服务器一键部署总结

在数通家族中对企业集成套件的云平台开发、部署、管理、运维进行统一管理，实现数据集成和共享的平台被称作UMC云管理平台。
数通畅联·2023-12-26 11:38

企业数据治理（2）：“数据治理体系建设“

目录1、确定数据战略和治理目标2、成立数据治理组织和人才体系3、制定数据质理管理目标4、数质安全管理5、制定数据全生命周期管理规则6、数据治理流程梳理和工具选型7、制定数据集成和共享规则数据治理体系建设是指为了保证企业数据的高质量
whqcfp·2023-12-25 08:37

【华为数据之道学习笔记】6-4 打造数据供应的“三个1”

数据服务改变了传统的数据集成方式，所有数据都通过服务对外提供，用户不再直接集成数据，而是通过服务获取。因此，数据服务应该拉动数据供应链条的各个节点，以方便用户能准确地获取数据为重要目标。
码农丁丁·2023-12-24 02:46

数据中心与数据湖与数据虚拟化 Data Hub vs Data Lake vs Data Virtualization

这种比较涵盖了三种现代的数据集成方
时见疏星·2023-12-23 18:40

日志学习笔记

在数据集成上，所以就可以数据源发布日志，而数据消费者消费日志
areece·2023-12-22 18:57

LoRaWAN 服务器 ChirpStack 部署教程

ChirpStack为网关、设备和租户的管理提供了一个web界面，并与主要的云提供商、数据库和通常用于处理设备数据的服务进行了数据集成，主要的集成服务包括:MQTT前向转发代理、HTTP转发代理、influxDB
风诰·2023-12-22 14:27

FlinkCDC发展历程和简历中项目描述的思路

FlinkCDC的定位也发生了变化，从捕获数据变更的Flink数据源正式迈向为以Flink为基础的端到端流式ELT数据集成框架。这些不是我们今天的重点。
王知无(import_bigdata)·2023-12-22 10:23

干货|16款数据治理工具

亿信华辰平台：睿治数据治理平台睿治智能数据治理平台由亿信华辰自主研发，融合元数据管理、数据标准管理、数据质量管理、数据集成管理、主数据管理、数据交换管理、数据资产管理、数据安全管理、数据生命周期管理
马哥说数据·2023-12-22 03:49

jdbc-Java数据库连接

今天要做异构系统的数据集成。之前做过webservice的。以及调用webapi。具体情况具体分析。之后把webservice和webapi单独整理一下。
HepingSha·2023-12-21 17:51

数据中台架构原理与开发实战：数据集成与数据交换

作者：禅与计算机程序设计艺术1.背景介绍数据中台（DataStudio）是由数据团队在业务部门和技术部门协同下，通过构建统一的数据运维中心，实现数据集成、数据质量管理、数据分析及数据价值转化等数据的价值的一种方法论
禅与计算机程序设计艺术·2023-12-21 09:56

数据挖掘概述+探索+预处理(期末)

步骤:数据清洗数据集成数据选择数据变换
ros275229·2023-12-21 06:18

【华为数据之道学习笔记】6-1什么是数据服务

数据服务和传统集成方式有很大区别，数据的使用方（不仅仅是IT系统人员，也可以是具体业务人员）不再需要点对点地寻找数据来源，再点对点地进行数据集成，从而形成错综复杂的集成关系，而是通过公共数据服务按需获取各类数据
码农丁丁·2023-12-21 06:20

Flink系列之：基于Flink CDC2.0实现海量数据的实时同步和转换

Flink系列之：基于FlinkCDC2.0实现海量数据的实时同步和转换一、CDC技术二、FlinkCDC技术三、传统数据集成方案的痛点1.传统数据入仓架构1.02.传统数据入仓架构2.03.传统CDCETL
最笨的羊羊·2023-12-20 23:48

Flink CDC 3.0 正式发布，详细解读新一代实时数据集成框架

01FlinkCDC概述FlinkCDC是基于数据库日志CDC（ChangeDataCapture）技术的实时数据集成框架，支持了全增量一体化、无锁读取、并行读取、表结构变更自动同步、分布式架构等高级特性
Apache Flink·2023-12-20 23:16

Flink cdc3.0同步实例（动态变更表结构、分库分表同步）

schema变更自动同步、整库同步、分库分表等增强功能使FlinkCDC3.0在更复杂的数据集成与用户业务场景中发挥作用：用户无需在数据源发生schema变更时手动介入，
yyoc97·2023-12-20 23:39

DataX迁移MongoDB

DataX迁移MongoDB项目地址：GitHub-alibaba/DataX:DataX是阿里云DataWorks数据集成的开源版本。
雨打夏夜·2023-12-20 06:47

软信天成数据集成平台、数据资产管理平台与达梦数据库完成产品兼容互证

日前，由我司自主研发的数据集成平台（ETL）、数据资产管理平台与武汉达梦数据库股份有限公司的达梦数据库管理系统V8（简称DM8）已顺利完成产品兼容性测试及互认证工作。
软信数据研究院·2023-12-19 20:51

基于Apache SeaTunnel构建CDC数据同步管道

ApacheSeaTunnel作为一个先进的数据集成开发平台，提供了构建高效CDC数据同步管道的可能性。
DolphinScheduler社区·2023-12-19 13:30

基于Apache SeaTunnel构建CDC数据同步管道

ApacheSeaTunnel作为一个先进的数据集成开发平台，提供了构建高效CDC数据同步管道的可能性。
DolphinScheduler社区·2023-12-19 13:30

基于Apache SeaTunnel构建CDC数据同步管道

ApacheSeaTunnel作为一个先进的数据集成开发平台，提供了构建高效CDC数据同步管道的可能性。
DolphinScheduler社区·2023-12-19 13:29

Aloudata 余俊：数据虚拟化技术如何实现敏捷高效的逻辑数据集成与链路编排

一、DataFabric与数据虚拟化简介在正式介绍DataFabric之前，我想先回顾一下我们现有的数据仓库体系面临的问题。当提到数据仓库时，许多从事数据工作的人可能会想到ETL（抽取、转换、加载）和一些技术工具，如Hive、Hadoop和Spark。我在过去十多年一直在数据仓库领域工作，与我类似的老一辈大数据从业者可能都有相似的经验。我们遇到了哪些问题呢？归纳起来，不论是数据的生产者还是消费者，
Aloudata·2023-12-19 11:43

Apache SeaTunne简介

//seatunnel.apache.org/)1.2项目地址2.架构3.特性3.1丰富且可扩展的连接器和插件机制3.2支持分布式快照算法以确保数据一致性3.3支持流、批数据处理，支持全量、增量和实时数据集成处理
大飞哥～BigFei·2023-12-18 07:23

数仓、数据湖、湖仓一体、数据网格的探索与研究

数据类型结构化数据功能数据仓库对于数据的处理可分为数据集成（装载）、数据加
五块兰州拉面·2023-12-18 02:51

数仓、数据湖、湖仓一体、数据网格概论

数据类型结构化数据功能数据仓库对于数据的处理可分为数据集成（装载）、数据加工（ETL）、数据汇聚、数据展示及挖掘。数据经过这一过程，被抽取到数据仓库中，并严格按
互联网小白兔·2023-12-18 02:21

选择最适合您的数据集成工具

个人对于个人而言，选择最适合的数据集成工具可能会有一些不同的考量因素。
ETLCloud数据集成社区·2023-12-17 12:22

ETLCloud的应用策略——实时数据处理是关键

ETLCloud又称数据集成（DataOps），是RestCloud旗下的一款数据仓库管理工具，通过自动化数据转换和集成来实现企业内部和外部数据的无缝对接，从而帮助企业快速获取准确的数据信息，进而作出正确的业务决策
ETLCloud数据集成社区·2023-12-17 12:21

re:Invent 2023 | 亚马逊云科技数据集成新增功能

关键字:[AmazonWebServicesre:Invent2023,AmazonGlue,DataIntegration,AmazonGlue,EtlPipelines,DataSources,DataTransformation]本文字数:2200,阅读完需:11分钟视频如视频不能正常播放，请前往bilibili观看本视频。>>https://www.bilibili.com/video/B
李白的好朋友·2023-12-17 07:52

webGL开发智慧城市流程

开发智慧城市的WebGL应用程序涉及多个方面，包括城市模型、实时数据集成、用户界面设计等。以下是一个一般性的流程，您可以根据项目的具体需求进行调整，希望对大家有所帮助。
defdsdddev·2023-12-17 03:01

数据预处理(四)——数据标准化

主要内容：数据预处理的必要性数据清洗数据集成数据标准化数据规约数据变换与离散化利用sklearn进行数据预处理小结四、数据标准化不同特征之间往往具有不同的量纲，由此造成数值间的差异很大。
shi_jiaye·2023-12-16 17:42

数据预处理(一)——数据预处理的必要性

主要内容：数据预处理的必要性数据清洗数据集成数据标准化数据规约数据变换与离散化利用sklearn进行数据预处理小结一、数据预处理的必要性1.数据的不一致各应用系统的数据缺乏统一的标准和定义，数据结构有较大的差异
shi_jiaye·2023-12-16 17:12

Linux部署Kettle（pentaho-server-ce-9.4.0.0-343）记录/配置MySQL存储

下载地址Kettle是一个开源的数据集成工具，它是PentahoDataIntegration（PDI）项目的一部分。
韧小钊·2023-12-16 14:27

EasyPOI实战入门

EasyPOI实战入门入门案例导出Excel导出基本数据一对一关系导出一对多关系导出导出图片大数据量导出自定义列导出表格导入Excel导入基本数据集成web实现导入导出1.搭建springboot+mybatis
迷失的小鹿·2023-12-16 12:39

年度评选揭晓：Apache SeaTunnel荣获年度优秀开源技术团队殊荣

ApacheSeaTunnel，作为一个高性能、易用的海量数据集成平台，其在ApacheSpark和ApacheFl
SeaTunnel·2023-12-16 00:34

数据中台架构原理与开发实战：理解数据湖与数据中台的关系

1.背景介绍随着互联网、移动互联网、云计算等新兴技术的不断推进，越来越多的公司开始了数据集成、数据处理和分析的大规模工程建设。
禅与计算机程序设计艺术·2023-12-15 19:08

【玩转TableAgent数据智能分析】会话式数据分析，所需即所得！

五大优点3体验TableAgent3.1登录TableAgent平台3.2会话式数据分析4总结【优化改善】【对比TableAgent与文心一言-E言易图】1TableAgent介绍TableAgent是一款数据集成和分析平台
Mortalz7·2023-12-15 18:58

【基础知识】大数据概述

发展历程中国开源生态图谱2023参考内容中国开源生态图谱2023.pdf技术组件说明数据集成sqoop、dataX、flume数据存储hdfs、kafka数据处理mapreduce、hive、impala
偏振万花筒·2023-12-15 12:39

《地理信息系统原理》笔记/期末复习资料（13. 地理信息系统的发展趋势）

13.1.3.开放式地理信息系统（OGIS）及其特点13.1.4.OGIS的组成部分13.1.5.OGIS的实现技术13.2.GIS的集成化13.2.1.GPS、RS与GIS的集成13.2.2.GIS多源空间数据集成
@HNUSTer·2023-12-15 04:31

Kafka Connect ：构建强大分布式数据集成方案

KafkaConnect是ApacheKafka生态系统中的关键组件，专为构建可靠、高效的分布式数据集成解决方案而设计。
晓之以理的喵~~·2023-12-14 21:10

DAP数据集成与算法模型如何结合使用

企业信息化建设会越来越完善，越来越体系化，当今数据时代背景下更加强调、重视数据的价值，以数据说话，通过数据为企业提升渠道转化率、改善企业产品、实现精准运营，为企业打造自助模式的数据分析成果，以数据驱动决策。在实际项目中，要使用DAP数据分析平台将企业业务数据进行数据的清洗和汇聚，同时基于DAP平台的展现配置，可以根据业务主题构建相应的展现大屏，从而实现数据的可视化展现，为企业领导层的数据把控和运营
数通畅联·2023-12-14 21:18
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他