#数据集成

2012美国大选献金项目数据分析（有史以来最全面）

目录1.数据载入与总览1.1数据加载1.2数据集成1.3数据预览2.数据预处理2.1空值处理2.2数据变换2.2.1字典映射进行转换：党派分析2.2.2按照职业或公司分组聚合对赞助总金额进行排序2.2.3
AI World·2020-08-08 13:41

大数据实训-Hadoop生态

大数据Hadoop大数据生态2020年6月15日8:470.Linux1.HDFS分布式文件系统2.MapReduce并行计算框架3.Hive数据仓库4.sqoop数据集成工具HDFSRDBMS5.用户行为分析项目大数据产生的三个助推力
OneSeek·2020-08-08 10:17

ETL与ELT的区别与联系?

ETL与ELT的区别与联系其实数据集成不算一个很新的概念，可能20年前就有数据集成的工具，大家经常会使用Talent,Informatica,Kettle,DataStage这样一些工具。
牵一缕阳光·2020-08-07 22:07

从“冰山理论”看无代码开发与用户的科学分工

中铁十六局贸易公司总经济师、副总经理刘平旺先生在最近关于《企业数据集成管理系统设计之道》课程中用冰山理论科学地阐述了无代码开发平台商业生态中两
如啼眼皇天·2020-08-07 15:20

字节跳动基于Flink的MQ-Hive实时数据集成

背景在数据中台建设过程中，一个典型的数据集成场景是将MQ(MessageQueue，例如Kafka、RocketMQ等)的数据导入到Hive中，以供下游数仓建设以及指标统计。
字节跳动技术团队·2020-08-06 11:03

阿里云大数据ACP认证学习笔记之——————Dataworks

基本概念产品服务数据集成数据开发数据地图数据质量数据服务计算和存储引擎服务离线计算MaxCompute开源大数据引擎E-MapReduce实时计算（基于Flink）机器学习PAI图计算服务GraphCompute
江凌·2020-08-05 17:51

【DBMS 数据库管理系统】数据库 -＞ 数据仓库 ( 数据处理类型 | 传统数据库 | 数据库不适用于分析型应用 )

文章目录一、数据处理类型二、传统数据库技术三、传统数据库不适用于分析型(DSS决策支持系统)应用原因四、事务性处理与分析型处理性能特性不同五、数据集成问题六、数据集成问题:数据分散原因七、数据集成问题:
韩曙亮·2020-08-05 00:06

数据预处理（1）数据清洗

数据预处理的内容主要包括数据清洗，数据集成，数据变换和数据规约。数据清洗数据清洗主要是删除原始数据集中的无关数据、重复数据，平滑噪声数据，帅选掉与挖掘主题无关的数据，处理缺失值、异常值等。
wx740851326·2020-08-04 21:16

数据仓库之简单介绍

集成：假设公司有多个产品线分别在不同的数据库，要统计总销量，就可以把各个数据集成在数据仓库随时间变化：数据随着时间变化的情况，能反映在历史时间点的数据快照。
Terry.G·2020-08-04 21:20

数据湖到底是什么湖？

假设有这样一种解决方案：在一种技术的支持下，企业在快速实现企业中各类的数据集成的同时，也能轻松获取企业外部数据，打通产业链上下游数据，实现生态化数据整合，实现全貌数据分析。同时，数据存储量大，支持批
小几斤·2020-08-04 19:43

ERP系统与PLC数据对接方法

而企业的生产的作业数据大都存在于PLC等生产过程控制系统中，这样导致ERP中的财务、订单、进出货等信息无法与生产过程系统连通，从而导致生产计划和生产进度常常出现偏差，所有能把PLC等生产过程控制系统中的数据集成到
George_Fal·2020-08-04 04:32

数控机床数据采集与MES集成案例

www.lx-factory.cn需求背景为充分提高机加工车间的设备利用率、准确分析机床使用瓶颈因素、科学量化进给、转速、功率、倍率等加工参数，实时采集设备的运行数据及健康状态、保障生产的正常运行，计划对42台数控机床进行数据集成
杭州乐芯科技·2020-08-04 03:46

到2026年，物联网数据管理服务将达到429亿美元

当前，数据集成、实时流处理和分析服务属于物联网价值链中数据管理服务的保护范围，物联网价值链中的每个组件也都实现了经济增长。ABIResearch估计，
小几斤·2020-08-03 23:41

利用pandas进行数据预处理

目录：1.安装pandas2.pandas的引入3.数据清洗①处理缺失数据②检测和过滤异常值③移除重复数据4.数据集成A.使用键参数的DataFrame合并B.轴向连接5.数据变换A.利用函数或映射进行数据转换
Modozil·2020-08-03 20:55

使用Weka进行数据挖掘（Weka教程五）Weka数据预处理之Filter使用

加载完毕数据集后，还是不能直接进行数据挖掘模型的训练和学习，必须要进行数据预处理，数据预处理一般指的是以下四个方面：数据清理，数据集成，数据变换，数据归约等。
yang1young·2020-08-03 02:52

SmartGWT 进阶，第 2 部分: 服务器端数据轻松集成

在这篇文章中，我们将用实例介绍SmartGWT版的数据集成功能。与前两篇不同，本篇将使用SmartGWT企业版。SmartGWT企业版是SmartGWT四个不同的发行版中功能最强大的一个。
慢慢飞的天使·2020-08-02 23:55

大数据Clouder专项技能认证课程：Quick BI企业报表制作

第1步：数据集成多数据源支持：1、来自云数据源：RDS、HybridDB(Greenplum)、MaxCompute(ODPS)、AnalyticDB(ADS)等2、来自ECS自建数据库：Mysql、SqlServer
阿里云大学百科·2020-08-01 13:26

数据挖掘考试范围

完整解释一个数据挖掘的过程（1）数据清洗：清除数据噪声和与挖掘主题明显无关的数据（2）数据集成：将来自多个数据源中的相关数据组合到一起（3）数据选择：根据数据挖掘的目标选取待处理的数据（4）数据转换：将数据转换为易于进行数据挖掘的数据存储形式
福尔摩洋·2020-08-01 05:14

数据仓库-数据仓库的简介(由来、与关系数据库的区别、数据仓库模型)

构造数据仓库涉及数据清理、数据集成和数据变换，可以看做数据挖掘的一个重要预处理步骤。此外，数据仓库提供联机分析处理（OLAP）工具，用于各种粒度的多维数据的交互分析，有利于有效的数据泛化和数据挖掘。
weixin_30416871·2020-08-01 03:03

Quick BI企业报表制作

第1步：数据集成多数据源支持：1、来自云数据源：RDS、HybridDB(Greenplum)、MaxCompute(ODPS)、AnalyticDB(ADS)等2、来自ECS自建数据库：Mysql、SqlServer
阿里云大学百科·2020-07-31 21:46

如何高效完成产品生命周期管理

作者介绍：郭振宇，十年研发及技术管理经验，通过了CMMI5认证和PMP认证，擅长大数据集成、大数据治理、大数据安全、数据资产管理等领域的产品规划及技术研发。
OWEN神·2020-07-31 20:20

毕业设计开发环境搭建

异构数据集成数据源伺服器，基本上就是设计一个包装器。
mao1985·2020-07-31 20:29

数据科学读书笔记

文章目录数据预处理数据质量关于数据质量的一些统计学规律第一数字定律小概率定理探索性数据分析（EDA）数据审计预定义审计自定义审计可视化审计数据清洗处理缺失值冗余数据处理噪声数据处理数据变换数据集成基本类型主要问题其他预处理方法数据脱敏数据规约数据统计概率分布正态分布卡方分布
Peter_Luoz·2020-07-31 14:58

如何通过 Dataphin 帮助企业构建数据中台系列之——萃取数据中心

Dataphin作为阿里巴巴数据中台OneData(OneModel、OneID、OneService)方法论的产品载体，帮助企业构建三大数据中心：基于数据集成形成的垂直数据中心、基于数据开发沉淀的公共数据中心和基于标签工厂构建的萃取数据中心
云 祁·2020-07-31 13:12

Java 处理 XML的四种方法 -->附:XmlUtils

XML现在已经成为一种通用的数据交换格式,它的平台无关性,语言无关性,系统无关性,给数据集成与交互带来了极大的方便。
qq_493424982·2020-07-30 20:05

CVPR 2019 | 全新缺失图像数据插补框架—CollaGAN

CollaGAN是在现在已经成熟的单图像到图像生成的基础上，研究多域图像到图像的翻译任务，以便单个生成器和判别器网络可以使用剩余的干净数据集成功估计丢失的数据。作者丨武广学校丨合肥
PaperWeekly·2020-07-30 14:36

使用prometheus抓取k8s的metrics作监控时，cAdvisor和kubelet配置有何差别？

1.7.3版本以前，cadvisor的metrics数据集成在kubelet的metrics中，在1.7.3以后版本中cadvisor的metrics被从kubelet的metrics独立出来了
weixin_33752045·2020-07-30 10:02

《Python数据分析与挖掘实战》第四章 数据预处理

主要包括数据清洗、数据集成、数据变幻和数据规约。数据清洗删除原始数据集中的无关数据、重复数据，平滑噪声数据，筛选掉与挖掘主题无关的数据，处理缺失值、异常值等。
大美mixer·2020-07-30 00:50

AQSW公司OA系统需求分析

2)集成式的代表：企业服务总线ESB、应用集成IntegrationBPM、数据集成方式。2.功能点闭环。符合业务的功能点需求以及功能点实现的方式代价。1)功能点是否符合各个部门用户的办公自动化需要。
jaminwm·2020-07-29 10:56

OA系统需求分析

2)集成式的代表：企业服务总线ESB、应用集成IntegrationBPM、数据集成方式。2.功能点闭环。符合业务的功能点需求以及功能点实现的方式代价。1)功能点是否符合各个部门用户的办公自动化需要。
iteye_3952·2020-07-29 10:19

这篇文章很赞：我读过的最好的一篇分布式技术文章

2.2.1概述2.2.2数据库中的Logs2.2.3分布式系统中的logs2.2.4Changelog2.3数据集成（Dataintegration）2.3.1数据集成的含义2.3.2数据集成的两个复杂性
weixin_34315189·2020-07-28 19:26

MaxCompute Studio 使用入门

MaxComputeStudio是MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境工具，是一套基于流行的集成开发平台IntelliJIDEA的开发插件，可以帮助您方便地进行数据开发。
weixin_33813128·2020-07-28 17:05

使用SSIS创建同步数据库数据任务

SSIS（SQLServerIntegrationServices）是用于生成企业级数据集成和数据转换解决方案的平台。
weixin_30421525·2020-07-28 16:29

大数据-一站式内容画像数据处理（pyodps+odps）

文章目录背景数据流原理实战演示数据集成数据开发（odpssql）数据开发（pyodps）pyodps实战演示在dataworks中使用在本机使用在dsw的helloworld在dsw中进行埋点分析（时间序列分析
感性企鹅·2020-07-28 15:09

数据挖掘——数据分析挖掘体系

1数据质量分析11缺失值分析12异常值分析13一致性分析2数据特征分析21分布分析22对比分析23统计量分析24周期性分析25贡献度分析26相关性分析数据预处理1数据清洗11缺失值处理12异常值处理2数据集成
无用之人死·2020-07-28 13:53

数据中台盛行，DataOps兴起，数据架构才是未来

作为企业架构中的关键纽带，数据架构解决了业务与数据间的映射，规范了应用架构中的数据集成关系，指导了技术架构的技术选型，在企业中发挥着不可或缺的作用。
a哈哈哈哈哈哈·2020-07-28 10:45

数据集成工具Kettle、Sqoop、DataX的比较

数据集成工具很多，下面是几个使用比较多的开源工具。
czl---·2020-07-28 08:27

【学习笔记】浅识蚂蚁金服大数据产品“数据集成平台DIP”

信息来源：https://tech.antfin.com/docs/2/127816先一下蚂蚁金服大数据产品“数据集成平台”的相关术语，核心亮点：多数据源、任务调度编号信息项详情1数据集成平台DIP包括
工匠小能手·2020-07-28 08:03

Salesforce 平台集成架构设计注意事项

而一个统一的、面向未来的平台，可以实现多种类型的集成，包括API集成、数据集成、业务逻辑集成和用户界面集成。如何从您的Salesforce集成解决方案中获得最大收益？尽管所有组织和应用程序都
frensworkz-·2020-07-28 07:39

SSIS数据定时同步方案

SSIS是MicrosoftSQLServerIntegrationServices的简称，是生成高性能数据集成解决方案（包括数据仓库的提取、转换和加载(ETL)包）的平台。
Jack_DDDD·2020-07-28 05:45

kaggle实战之Titanic (1)-预处理

(2)数据集成：将多个数据源合成一个数据源。此处只有1个csv文件，过(3)数据变换：平滑聚集，数据概化等。(4)数据规约：目的是减小数据量，同时又不影响结果。
锦堇年·2020-07-28 05:53

CEAMS集成工具：可视化、自动化解决EXCEL文件表头格式不一致问题

这次将给大家分享一款对于企业来说超级实用的数据集成工具。
APEMESH·2020-07-28 04:00

数据治理平台工具前世今生

广义上讲，数据治理是对数据的全生命周期进行管理，包含数据采集、清洗、转换等传统数据集成和存储环节
仙子紫霞·2020-07-28 03:59

SqlServer ETL 数据抽取工具SSIS之环境搭建

一、SSIS简介：SSIS是MicrosoftSQLServerintegrationServers的简称，是数据集成的解决方案，它包含数据提取，加工，加载等为一体的平台。
YOYO-COOL·2020-07-28 02:50

Delta Lake - 走进 Databricks

Databricks是ApacheSpark的商业化公司，致力于提供基于Spark的云服务，用于数据集成
DataFlow范式·2020-07-28 00:04

大数据服务运营之数据采集

数据集成要考虑存储架构、采集方式、接口方式、采集周期等。在存储架构方面，可以考虑在数据源侧设置数据暂存区（StagingArea），也可以考虑在采集平台侧设置的暂存区。
李福东-大数据运营·2020-07-27 22:50

IBM 企业级数据集成利器之 InfoSphere Change Data Capture

1、IBMChangeDataCapture简介InfoSphereChangeDataCapture（以下简称CDC）的前身是DataMirror，2007年由IBM收购后正式更名为CDC，并发布了收购后的第一个版本V6.3，现在最新的版本为V11.3。CDC是一款基于数据库日志的实时数据复制产品，可以在跨平台和异构的数据库环境中实现变化数据的实时复制，在国内外的各个业务领域中有着广泛的应用。C
数控小J·2020-07-27 20:18

大数据阿里云工具之DataWorks（一）

本文主要介绍dataworks的数据集成、数据质量、数据地图与数据开发一、简介DataWorks（数据工场，原大数据开发套件）是阿里云重要的PaaS平台产品，提供数据集成、数据开发、数据地图、数据质量和数据服务等全方位的产品服务
法海不爱你·2020-07-27 18:48

MES系统访问金蝶云星空（ERP）的接口定义及示例

一、业务背景当企业规模逐渐增大时，随着企业信息化的推进，企业上的IT系统越来越多，从ERP到MES、CRM、PDM、SRM等，为了解决信息孤岛，这些异构系统之间需要进行数据集成。
Steve_金蝶云星空开发·2020-07-27 14:35

解析国内MES系统与国外MES系统的区别

MES可以为企业提供包括制造数据管理、计划排程管理、生产调度管理、库存管理、质量管理、人力资源管理、工作中心/设备管理、工具工装管理、采购管理、成本管理、项目看板管理、生产过程控制、底层数据集成分析、上层数据集成分解等管理模块
谷器科技·2020-07-23 16:24
上一页 22 23 24 25 26 27 28 29 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他