#数据集成

SeaTunnel下载安装与使用

1.3SeaTunnel特点2SeaTunnel安装与使用2.1SeaTunnel安装2.2SeaTunnel使用1SeaTunnel简介1.1SeaTunnel概述SeaTunnel是一个简单易用的数据集成框架
你是光芒丶·2023-11-30 09:42

SeaTunnel 2.1.3 任务执行流程源码解析

一、SeaTunnel是啥，有什么用ApacheSeaTunnel是下一代高性能、分布式、海量数据集成框架。
EdwardsWang丶·2023-11-30 09:57

实现电商平台与营销系统无缝集成：雅座的无代码开发与API连接

借助无代码开发，营销团队可以自主进行数据集成、流程自动化，大大加快了市场响应速度，提高了营销活动的效果。API连接：打通数据之路AP
集简云-软件连接神器·2023-11-30 04:28

泛微OA对接金蝶云星空方案分享（对接场景解析）

数据集成主要有以下好处：（1）数据一致性：通过数据集成，聚水潭和金蝶云星空的数据可以实现一致性。（2）功能互补：聚水潭和金蝶云星空分别承担着不同的职能，数据集成可以实现功能的互补。
轻易云系统集成平台·2023-11-30 02:56

旺店通企业版与金蝶云星辰数据集成方案分享

今天我们将深入介绍旺店通企业版与金蝶云星辰业财一体化数据集成方案，以丰富的业务场景示例展示该平台如何以无缝的方式连接不同系统，实现数据同步、提高效率，同时突显轻易云的出色能力。
轻易云系统集成平台·2023-11-30 02:25

零代码连接钉钉宜搭与用友U8，让业财数据管理简单高效

本文将结合一个具体案例，介绍轻易云数据集成平台如何实现这两个系统之间的零代码连接，使得业财数据管理更加简单高效。项目背景合作的客户是一家规模较大的制造企业，他们的业务系统
轻易云系统集成平台·2023-11-30 02:22

使用Sui天气预言机获取全球实时天气数据

它由基于Sui的智能合约和一个从OpenWeatherAPI获取天气数据的后端服务组成，任何人都可以将天气数据集成到他们的应用中。Sui天气预言机为其支持的任何城市提供温度、湿度和风力等信息。
Sui_Network·2023-11-29 03:50

【金猿产品展】Nextion BI——数据融合的增强分析型敏捷BI平台

数据智能产业创新服务媒体——聚焦数智·改变商业NextionBI作为数据融合的增强分析型敏捷BI平台，集数据集成、数据治理、数据清洗、加工计算、数据分析、增强分析、知识图谱、数据大屏、数据文档报告等能力于一体
数据猿·2023-11-29 01:15

数据治理：数据交换与数据集成

数据交换基本概念数据交换是将符合一个源模式的数据转换为符合目标模式数据的问题，该目标模式尽可能准确并且以与各种依赖性一致的方式反映源数据。早期数据交换的一个主要方向是在关系模式之间从数据交换的上下文中寻求一阶查询的语义和复杂性。2008年，Afrati等人开始系统地研究数据交换中聚合查询的语义和复杂性，给出一些概念并做出了技术贡。在一篇具有里程碑意义的论文中，Fagin等人提出了一种纯粹逻辑的方法
白牛DATA·2023-11-28 19:20

实例讲解数据库的数据去重

•数据集成：在数据集成的过程中，需要合并多个数据源的数据，去重可以避免重复的数据对合并结果的
工业甲酰苯胺·2023-11-28 09:07

大数据数据仓库，Sqoop--学习笔记

数据仓库介绍1.数据仓库概念数据仓库概念创始人在《建立数据仓库》一书中对数据仓库的定义是：数据仓库（DataWarehouse）是一个面向主题的（SubjectOriented）、数据集成的（Integrated
祈愿lucky·2023-11-27 16:38

kafka 集群 KRaft 模式搭建

ApacheKafka是一个开源分布式事件流平台，被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用程序Kafka官网：https://kafka.apache.org/Kafka在2.8版本之后
悟世君子·2023-11-26 16:54

软件设计的先进性原则

数据集成技术通过医院信息平台提供的数据采集工具，负责数据抽取、清洗、转换、装载等处理，解决在不改造业务系统的基础上实现从各
hanxirensheng·2023-11-26 02:59

大数据知识合集之预处理方法

数据预处理方法主要有：数据清洗、数据集成、数据规约和数据变换。1、数据清洗数据清洗(datacleaning)：是通过填补缺失值、光滑噪声数据，平滑或删除离群点，纠正数据的不一致来达到清洗的目的。
学掌门·2023-11-25 04:14

大数据预处理方法，来看看你知道几个

数据预处理方法主要包括数据清洗、数据集成、数据转换和数据消减。1.数据清洗现实世界的数据常常是不完全的、含噪声的、不一致的。数据清洗过程包括缺失数据处理、噪声数据处理，以及
小术晓术·2023-11-25 04:44

大数据~大数据预处理整体架构（数据清洗、数据集成、数据转换、数据消减）

文章目录前言数据清洗数据集成数据转换数据消减前言近年来，信息技术迅猛发展，尤其是以互联网、物联网、信息获取、社交网络等为代表的技术日新月异，促使手机、平板电脑、pc等各式各样的信息传感器随处可见，虚拟网络快速发展
Listen-Y（学习&踩坑笔记本）·2023-11-25 04:40

大数据分析存在哪些困难

在这种情况下，可以进行数据审核，并确保现有数据集成提供所需的见解。新数据源的集成也可以消除数据的缺乏。还需要检
中琛源科技·2023-11-25 04:34

Kettle 简介

Spoon可以以拖拽的方式图形化设计，能够通过spoon调用专用的数据集成引擎或者集群。
明算科·2023-11-25 01:25

配电室智慧运维监控系统

该系统的主要功能和特点包括：集成化监控：系统能够实时监测配电室内的环境参数、设备状态、电能质量等，将各种监测数据集成展示，便于运维人员全面了解配电室的运行状况。智能
电易云力安科技·2023-11-24 19:36

（11_23）构建高效数据流转的 ETL 系统：数据库 + Serverless 函数计算的最佳实践

为了实现完整的ETL架构，并完成高效、实时的数据集成、处理和同步，阿里云Serverless函数
Serverless 社区·2023-11-24 17:40

大数据分析步骤及分析方法详解

3数据预处理对数据进行必要的预处理，常用的数据预处理方法包括：数据集成、数据清洗、数
tonglingtou1875·2023-11-24 16:53

面试|Kafka常见面试问题总结

Kafka是一个分布式的流处理平台，被越来越多的公司使用，Kafka可以被用于高性能的数据管道，流处理分析，数据集成等场景。本文分享总结了几个Kafka常见的面试问题，希望对你有所帮助。
大数据技术与数仓·2023-11-24 15:54

数据治理技术之数据清洗

现实生活中的数据极易受到噪声、缺失值和不一致数据的侵扰,数据集成可能也会产生数据不一致的情况。数据
白牛DATA·2023-11-24 15:15

万界星空科技商业开源MES/免费MES/低代码MES

万界星空科技商业开源MES可以提供包括制造数据管理、计划排程管理、生产调度管理、库存管理、质量管理、人力资源管理、工作中心/设备管理、工具工装管理、采购管理、成本管理、项目看板管理、生产过程控制、底层数据集成分析
万界星空科技·2023-11-24 13:39

JavaWeb随笔

架构的特点：需要安装特定的客户端软件C/S架构系统的优点和缺点优点：速度快（因为大部分的数据都是集成在客户端软件当中的，有很少量的数据需要从服务端传递过来，因此速度快）体验好界面炫酷服务器压力小（大部分数据集成
@s1mple@·2023-11-23 23:20

『GitHub项目圈选02』一款可实现视频自动翻译配音为其他语言的开源项目

本周GitHub项目圈选****:主要包含视频翻译、正则填字游戏、敏感词检测、聊天机器人框架、AI换脸、分布式数据集成平台等热点项目。
孜孜孜孜不倦·2023-11-23 21:06

部署SeaTunnel分布式集群

检查点五、配置SeaTunnel引擎六、配置SeaTunnel引擎服务器七、部署SeaTunnel分布式集群八、检查点存储九、TCP深入理解SeaTunnel：易用、高性能、支持实时流式和离线批处理的海量数据集成平台一
最笨的羊羊·2023-11-23 14:19

Datax的使用说明及入门操作案例演示

1.DataXDataX是阿里云DataWorks数据集成的开源版本，在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。
嫣夜来·2023-11-23 14:39

这些传统数据集成的痛，你还在经历几种？

在这些难以言说的痛中间，又有多少是传统数据集成所带来的？
DataPipeline数见科技·2023-11-23 10:01

Flink CDC + OceanBase 全增量一体化数据集成方案

本文整理自OceanBase技术专家王赫（川粉）在5月21日FlinkCDCMeetup的演讲。主要内容包括：OceanBase介绍FlinkCDCOceanBaseConnector实现原理FlinkCDC+OceanBase应用场景FlinkCDCOceanBaseConnector未来展望点击查看直播回放&演讲PDF一、OceanBase介绍OceanBase是蚂蚁集团自研的分布式数据库。从
Apache Flink·2023-11-23 09:44

基于流计算 Oceanus（Flink） CDC 做好数据集成场景

作者：黄龙，腾讯CSIG高级工程师数据时代，企业对技术创新和服务水准的要求不断提高，数据已成为企业极其重要的资产。无论是在在企业数据中台的建设，亦或者是打造一站式数据开发和数据治理的PASS平台。首先需要做的就是进行跨应用的数据融合计算，需要将数据从孤立的数据源中采集出来，汇集到可被计算平台高效访问的目的地。此过程称之为ETL。通常所说的同步大致分为离线全量ETL、离线增量+离线全量的ETL、实时
腾讯云大数据·2023-11-23 09:07

基于 Flink CDC 打造企业级实时数据集成方案

本篇内容主要分为四部分：CDC数据实时集成的挑战FlinkCDC核心技术解读基于FlinkCDC的企业级实时数据集成方案实时数据集成Demo演示CDC数据实时集成的挑战首先介绍一下CDC技术，CDC就是
阿里云大数据AI技术·2023-11-23 09:05

数据集成实施过程注意点总结

一、数据集成的概念数据集成是现代企业数据管理的核心，它旨在将分散在不同系统和数据源中的数据整合为一个统一的、易于管理和利用的数据存储。
ETLCloud数据集成社区·2023-11-22 18:03

企业如何选择一款高效的ETL工具

其超过5000家企业用户的使用和广泛应用，同时国内大量数据集成工程师
ETLCloud数据集成社区·2023-11-22 18:26

DataX简介、部署、原理和使用介绍

/DataX官方文档：https://github.com/alibaba/DataX/blob/master/introduction.md1-2.DataX概述DataX是阿里云DataWorks数据集成的开源版本
王亭_666·2023-11-22 14:17

技术分享|电商数据接口|淘宝天猫京东商品API接口之数据同步

如淘宝、拼多多等电商平台，平台内部不同团队之间的数据打通，很多的开源数据集成工具可以满足。
电商数据girl·2023-11-22 10:44

手把手入门MO | 如何使用SeaTunnel将数据写入MatrixOne

1概述SeaTunnel是一个分布式、高性能、易扩展的数据集成平台，专注于海量数据（包括离线和实时数据）同步和转化。
MatrixOrigin·2023-11-21 16:33

MatrixOne实战系列回顾 | 导入导出项目场景实践

将从四个方向为大家演示MatrixOne的功能，分别是数据的导入、导出、对接数据集成工具，以及Java连接实战。数据导入会使用三种方式将数据导入至MatrixOne中。
MatrixOrigin·2023-11-21 16:33

Java发起同异步HTTP请求和处理数据

专栏「Java数据集成」专栏《Java发起HTTP请求并解析JSON返回数据》：下图简称为《请求和解析》《基于MyBatis实现依次、批量、分页增删改查操作》：下图简称为《依批分增删改查》《用Python
梦未·2023-11-21 12:08

Spark 从零到开发（六）HiveContext

SparkSQL执行引擎的一个实例，它与存储在Hive中的数据集成在一起。从类路径上的hive-site.xml读取Hive的配置。
FantJ·2023-11-21 03:06

利用ETLCloud自动化流程实现业务系统数据快速同步至数仓

ETLCloud是一款集ETL、ELT、CDC实时数据集成、编排调度、数据服务API为一体的数据集成平台，可以帮助企业快速实现业务系统数据同步至数
ETLCloud数据集成社区·2023-11-19 19:09

轻量级数据中台，大中型企业数字化转型首选

数据中台是集数据管理、数据集成和数据分析于一体的平台，可以帮助企业将零散的数据整合到统一的数据仓库中，实现数据的统一管理和快速查询。同时，数据中台可以通
ETLCloud数据集成社区·2023-11-19 19:39

超过5000+企业使用的ETL平台

在当今数据驱动的时代，ETL（Extract,Transform,Load）工具扮演着关键角色，而ETLCloud作为一款脱颖而出的数据集成平台，正以其独特的特性和强大的功能，成为当前国内最活跃的数据集成平台
ETLCloud数据集成社区·2023-11-19 19:39

数据预处理及预处理方法（附思维导图）

目录一、数据清洗二、数据集成三、数据归数据预处理简单来说就是在进行数据探索数据处理之前对数据进行一系列处理，将数据中的脏数据去除，之后进行数据分析的时候保证结果的准确性。
cx330上的猫·2023-11-19 04:05

云端援手：智能枢纽应对数字资产挑战 ——华为云11.11应用集成管理与创新专区优惠限时购

，推出全套「应用集成管理与创新」智能解决方案：华为云OneAccess应用身份管理服务改写了权限管控的定义，使每个可信用户都能在正确时间、地点，享受到必要的访问权限；华为云ROMAConnect应用与数据集成服务是数据高速路的桥梁
华为云PaaS服务小智·2023-11-18 19:17

SSM（容器，Bean，依赖注入）

的三种方式2.5Bean的生命周期2.6依赖注入的两种方式2.7依赖注入方式选择2.8依赖自动装配2.9集合的注入3.容器1.Spring系统架构DataAccess:数据访问DataIntegration:数据集成
渔夫阿布·2023-11-16 15:48

常见数据集成工具的对比: Apache SeaTunnel VS Flume VS DataX VS Sqoop

对比项ApacheSeaTunnelDataXApacheSqoopApacheFlume部署难度容易容易十分复杂，严重依赖Hadoop体系容易运行模式分布式，也支持单机单机本身不是分布式框架，依赖HadoopMR实现分布式分布式，也支持单机健壮的容错机制无中心化的高可用架构设计，有完善的容错机制易受比如网络闪断、数据源不稳定等因素影响MR模式重，出错处理麻烦一般支持的数据源丰富度支持MySQL、
追求进步的阶梯·2023-11-15 16:53

数据同步工具调研选型：SeaTunnel 与 DataX 、Sqoop、Flume、Flink CDC 对比

产品概述ApacheSeaTunnel是一个非常易用的超高性能分布式数据集成产品，支持海量数据的离线及实时同步。
SeaTunnel·2023-11-15 16:20

得帆云iPaaS白皮书｜WMS集成，打造高效规范的仓储管理业务生态

在数据集成中，或多或少都会遇到以
得帆低代码PaaS·2023-11-15 07:51

QML17、C++ 与 QML 对象交互

这对于从C++代码创建QML对象很有用，无论是显示可以可视化渲染的QML对象，还是将非可视QML对象数据集成到C++应用程序中。一旦创建了QML对象，就可以从C++中对其进行检查，以便读取和写入属性
Qt学视觉·2023-11-15 04:44
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他