数据集成

面试|Kafka常见面试问题总结

Kafka是一个分布式的流处理平台，被越来越多的公司使用，Kafka可以被用于高性能的数据管道，流处理分析，数据集成等场景。本文分享总结了几个Kafka常见的面试问题，希望对你有所帮助。
tracy_668·2024-01-10 19:22

智能商品系统如何协同其他系统共享数据和优化供应链决策?

智能商品系统可以通过与其他系统（如ERP系统）进行数据集成和协同工作，以实现数据共享和优化供应链决策。
第七在线（7thonline）·2024-01-09 17:24

【金猿产品展】ETLCloud—数据集成领域的先行者

大数据产业创新服务媒体——聚焦数据·改变商业全域数据集成平台（简称“ETLCloud”）是谷云科技RestCloud解决大数据量、高合规的数据集成需求的产品，采用微服务架构、全WEB可视化集成与服务发布为一体设计的综合集成解决方案
数据猿·2024-01-09 10:55

阿里云大数据ACA及ACP复习题（101~120)

A:关系型数据库B:异构数据源C:NosQLD:非结构化存储解析：DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力
周周的奇妙编程·2024-01-09 08:45

Apache Seatunnel部署（apache-seatunnel-2.3.3-bin.tar.gz + apache-seatunnel-web-1.0.0-bin.tar.gz）

界面部署初始化数据库配置文件修改配置下载数据源jar包启动服务四、web页面一览登录数据源任务用户管理虚拟表五、其它问题记录总结一、概要安装包及源码包下载地址ApacheSeaTunnel是一个分布式、高性能、易扩展的数据集成平台
韧小钊·2024-01-09 01:50

Apache SeaTunnel：新一代高性能、分布式、海量数据集成工具从入门到实践

关于ApacheSeaTunnelApacheSeaTunnel原名Waterdrop，在2021年10月更名为SeaTunnel并申请加入Apache孵化器。目前ApacheSeaTunnel已发布40+个版本，并在大量企业生产实践中使用，包括J.P.Morgan、字节跳动、Stey、中国移动、富士康、腾讯云、国双、中科大数据研究院、360、Shoppe、Bilibili、新浪、搜狗、唯品会等企
云原生大数据·2024-01-07 22:47

DataOps：数据中台的必备底座

2015年，AndyPalmer[2]将这个理念发扬光大，提出了DataOps的四个关键构成，数据工程，数据集成，数据安全和数
灯惉·2024-01-07 15:32

Chunjun纯钧(Flinkx)同步任务开发通用配置参数详解

Chunjun纯钧(Flinkx)是一款稳定、易用、高效、批流一体的数据集成框架，目前基于实时计算引擎Flink实现多种异构数据源之间的数据同步与计算，支持JSON模版配置任务，兼容FlinkSQL语法
张飞的猪大数据·2024-01-07 12:13

Kettle Local引擎使用记录（基于Kettle web版数据集成开源工具data-integration源码）

KettleWeb第一章前言第二章demo源码pom.xml引入Kettle引擎核心文件java源码controllerservice其它mavensettings.xml测试测试文件测试结果⁉️问题记录❓问题一：jar包冲突-`Anattemptwasmadetocallthemethodjavax.servlet.ServletContext.setInitParameter(Ljava/la
韧小钊·2024-01-07 12:42

使用Kafka与Spark Streaming进行流数据集成

为了实现实时数据集成和分析，组合使用ApacheKafka和ApacheSparkStreaming是一种常见的做法。
晓之以理的喵~~·2024-01-06 16:43

数据探索 —— 数据预处理 1

在数据挖掘中，海量的原始数据中存在着大量不完整（有缺失值）、不一致、有异常的数据，严重影响到数据挖掘建模的执行效率，甚至可能导致挖掘结果的偏差，所以进行数据清洗就显得尤为重要，数据清洗完成后接着进行或者同时进行数据集成
冰度猎魂·2024-01-06 10:33

Apache SeaTunnel：探索下一代高性能分布式数据集成工具

今天给大家分享的议题是下一代高性能分布式海量数据集成工具，后面的整个的PPT，主要是基于开发者的视角去看待ApacheSeaTunnel。
SeaTunnel·2024-01-06 09:07

探索 OceanBase 中图数据的实现

虽然Neo4j等成熟的图形数据库为处理图形数据提供了强大的解决方案，但将图形数据集成到SQL数据库中的想法提供了值得探索的潜在优势。
沃趣数据库管理平台·2024-01-05 17:53

数据挖掘总结(考试版）

数据挖掘总结：第一章：数据挖掘KDD步骤：数据清理:(消除噪声和删除不一致的数据)数据集成（多种数据源可以组合在一起）数据选择（从数据库中提取与分析任务相关的数据）数据变换（数据变换或统一成适合挖掘的形式
acmakb·2024-01-05 09:45

企业门户平台全功能解析：从界面到集成，一站式管理与整合

本文将探讨企业门户平台在信息整合和工作效率方面的关键功能，从PC/移动端门户、门户管理、门户栏目到办公管理、数据集成、单点集成和集成组件等多个方面，逐一揭示其独特作用和优势，为大家呈现企业门户平台全方位的价值和功能
HUIBUR科技·2024-01-04 21:26

Linux安装consul的两种方式（在线和离线）

服务离线部署下载安装包上传解压启动验证（同在线安装）⁉️其它❗一：`yum-config-manager`命令解释❗二：`Consul`代理启动命令解释第一章前言背景在研究基于Kettle开发的web版数据集成开源工具部署中发现需要用到服务注册软件软件概述
韧小钊·2024-01-04 19:32

基于Kettle开发的web版数据集成开源工具(data-integration)-介绍篇

和spoon图形化界面一模一样⁉️问题记录上一集：基于Kettle开发的web版数据集成开源工具(data-integration)-部署篇*️⃣主目录：ETL&ELT专栏下一集：基于Kettle开发的
韧小钊·2024-01-04 19:32

基于Kettle开发的web版数据集成开源工具(data-integration)-部署篇

目录第一章前言背景目的总体方向第二章下载编译下载编译第三章部署准备工作安装数据库&redis&consul修改配置文件的数据库、redis、consul信息`/dataintegration-gateway/src/main/resources/application-local.yaml`修改用户认证服务SSO服务器-应用目录结构重新编译并上传jar包启动后台服务consul监控页面可以看到启动
韧小钊·2024-01-04 19:00

数仓工作中的常见问题及解决方案

数据仓库系列文章数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系数据仓库之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派·2024-01-04 16:34

广东mes生产管理系统

它可以帮助企业实现制造数据管理、计划排程管理、生产调度管理、库存管理、质量管理、人力资源管理、工作与设备管理、工具工装管理、采购管理、成本管理、项目看板管理、生产过程控制、底层数据集成分析、上层数据集成分解等管理模块
先达盈致·2024-01-04 14:13

SeaTunnel同步SQLserver数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。用户只需要配置作业信息，就能完成数据的同步。
万山数据@yqj1987·2024-01-04 06:28

数据预处理方法

数据预处理包括：数据清理，数据集成，数据转换，数据归约（最大限度精简数据量）。比如：缺失数据处理是去掉，还是填充默认值或最近的值。
XueminXu·2024-01-03 16:25

数睿通2.0数据中台数据治理—元数据功能发布

文章目录引言数据集成-实时日志数据治理-元模型数据治理-元数据采集数据治理-元数据管理结语引言数睿通2.0目前基本完成了数据集成，数据开发，数据服务三大模块，初步具备了拉数，造数，供数的能力。
小螺旋丸·2024-01-03 10:21

新年快乐—数睿通2.0数据中台全新功能模块发布

文章目录引言数据集成数据库管理文件管理数据接入贴源数据数据开发数据生产sql作业开发FlinkSql作业开发调度中心运维中心资源中心配置中心其他模块结语引言离上次发文已经有接近三个月了，这三个月主要在开发数睿通的数据生产模块
小螺旋丸·2024-01-03 10:43

数据治理之主数据管理

提升决策水平二、主数据管理方法摸家底建体系接数据数据接入数据清洗主数据清洗规范主数据清洗操作数据分发抓运营三、主数据管理技术主数据分类线分类法面分类法混合分类法主数据编码主数据编码方法主数据编码颗粒度主数据集成与源系统集成与消费系统集成四
4935同学·2024-01-03 08:39

ERP系统与智能商品系统在供应链管理上的区别和优势在哪些方面?

数据集成和流程整合：ERP系统通过数据集成和流程整合，将供应链上各个环节的数据和业务流程进
第七在线（7thonline）·2024-01-02 10:53

哪些关键供应链指标的数据集成可以提高智能商品系统决策支持效果

在提高智能商品系统供应链决策支持效果方面，以下是一些关键供应链指标的数据集成对于效果最为重要的指标：销售数据：销售数据是评估产品需求和市场趋势的重要指标。
第七在线（7thonline）·2024-01-02 10:53

ERP与智能商品系统在供应链管理上有哪些区别和优势?

数据集成和流程整合：ERP系统通过数据集成和流程整合，将供应链上各个环节的数据和业务流程进
第七在线（7thonline）·2024-01-02 10:21

MDM主数据平台如何实现质量管控

随着信息系统和业务的增加，系统打通与数据集成共享必然会成为企业信息化建设的瓶颈，而要实现系统集成，就要保证系统中共享数据的准确性，而主数据就是最重要的共享数据，只有保证主数据的准确、一致，才能保证系统数据集成时业务和数据的准确性
数通畅联·2024-01-01 11:00

如何配置ESB单据集成接口

ESB企业服务总线在实际项目中主要用于各业务系统之间的集成，集成包括数据集成、应用集成以及业务单据集成等，ESB企业服务总线主要包含三部分：ESB设计器、SMC管理控制台以及Server运行环境，ESB
数通畅联·2024-01-01 11:59

Kettle介绍

Kettle，也称为PentahoDataIntegration，是一种强大的开源ETL（Extract,Transform,Load）工具，用于数据集成、数据转换和数据加载。
小玉起起·2023-12-29 09:04

ETLCloud与简道云结合，实现企业信息同步

ETLCloud介绍ETLCloud是一个集离线数据集成ETL、ELT、CDC实时数据集成、编排调度、数据服务API为一体的数据集成平台(DataOps)，一站式满足企业的各种最为复杂的数据集成场景。
ETLCloud数据集成社区·2023-12-29 09:27

什么是ETL?

ETL是一种数据集成过程，代表着“Extract,Transform,Load”，分别对应着数据抽取、数据转换和数据加载三个阶段。
小玉起起·2023-12-29 09:25

CData ADO.NET Data Providers 2022 Crack

CRUD)支持，无需编码200+基于标准的ADO.NET数据提供程序100%适用于.NETStandard、.NETCore和Xamarin的完全托管.NET无与伦比的数据连接和集成性能低代码ADO.NET数据集成轻松将任何来源的数据连接到
sdk大全·2023-12-29 09:02

SeaTunnel批处理同步MySQL数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。用户只需要配置作业信息，就能完成数据的同步。
万山数据@yqj1987·2023-12-29 09:02

SeaTunnel流处理同步MySQL数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。用户只需要配置作业信息，就能完成数据的同步。
万山数据@yqj1987·2023-12-29 09:02

SeaTunnel同步Oracle数据至ClickHouse

SeaTunnel是一个分布式、高性能、易扩展、用于海量数据同步和转化的数据集成平台。
万山数据@yqj1987·2023-12-29 09:53

构建高效数据流转的 ETL 系统：数据库 + Serverless 函数计算的最佳实践

为了实现完整的ETL架构，并完成高效、实时的数据集成、处理和同步，阿里云Serverless函数
阿里云云原生·2023-12-28 13:57

数据仓库与数据集成架构：数据仓库与数据仓库规范与标准的制定与应用

数据集成架构是一种用于将来自不同数据源的数据集成到一个统一的数据仓库中的方法。数据集成架构包括数据清洗、数据转换、数据加载和数据质量检查等步骤。
一枚可爱的程序女孩·2023-12-28 05:45

基于 Flink CDC 实现海量数据的实时同步和转换

主要内容包括：FlinkCDC技术传统数据集成方案的痛点基于FlinkCDC的海量数据的实时同步和转换FlinkCDC社区发展点击查看直播回放&演讲PDF一、FlinkCDC技术CDC是ChangeDataCapture
Apache Flink·2023-12-27 16:51

灵蜂BeeDI ETL

为此，国产数据集成软件厂商北京灵蜂软件有限公司日前宣布，推出最新版本的企业级数据集
weixin_49476464·2023-12-26 23:38

K8S三台服务器一键部署总结

在数通家族中对企业集成套件的云平台开发、部署、管理、运维进行统一管理，实现数据集成和共享的平台被称作UMC云管理平台。
数通畅联·2023-12-26 11:38

企业数据治理（2）：“数据治理体系建设“

目录1、确定数据战略和治理目标2、成立数据治理组织和人才体系3、制定数据质理管理目标4、数质安全管理5、制定数据全生命周期管理规则6、数据治理流程梳理和工具选型7、制定数据集成和共享规则数据治理体系建设是指为了保证企业数据的高质量
whqcfp·2023-12-25 08:37

【华为数据之道学习笔记】6-4 打造数据供应的“三个1”

数据服务改变了传统的数据集成方式，所有数据都通过服务对外提供，用户不再直接集成数据，而是通过服务获取。因此，数据服务应该拉动数据供应链条的各个节点，以方便用户能准确地获取数据为重要目标。
码农丁丁·2023-12-24 02:46

数据中心与数据湖与数据虚拟化 Data Hub vs Data Lake vs Data Virtualization

这种比较涵盖了三种现代的数据集成方
时见疏星·2023-12-23 18:40

日志学习笔记

在数据集成上，所以就可以数据源发布日志，而数据消费者消费日志
areece·2023-12-22 18:57

LoRaWAN 服务器 ChirpStack 部署教程

ChirpStack为网关、设备和租户的管理提供了一个web界面，并与主要的云提供商、数据库和通常用于处理设备数据的服务进行了数据集成，主要的集成服务包括:MQTT前向转发代理、HTTP转发代理、influxDB
风诰·2023-12-22 14:27

FlinkCDC发展历程和简历中项目描述的思路

FlinkCDC的定位也发生了变化，从捕获数据变更的Flink数据源正式迈向为以Flink为基础的端到端流式ELT数据集成框架。这些不是我们今天的重点。
王知无(import_bigdata)·2023-12-22 10:23

干货|16款数据治理工具

亿信华辰平台：睿治数据治理平台睿治智能数据治理平台由亿信华辰自主研发，融合元数据管理、数据标准管理、数据质量管理、数据集成管理、主数据管理、数据交换管理、数据资产管理、数据安全管理、数据生命周期管理
马哥说数据·2023-12-22 03:49

jdbc-Java数据库连接

今天要做异构系统的数据集成。之前做过webservice的。以及调用webapi。具体情况具体分析。之后把webservice和webapi单独整理一下。
HepingSha·2023-12-21 17:51
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他