达梦之路——基于Linux平台（redhat）安装部署DMETL

一、前言

    最近在学习DMETL工具的使用方法，达梦数据交换平台（简称DMETL）是在总结了众多大数据项目经验和需求并结合最新的大数据发展趋势的基础上研发的具有自主版权的数据处理与集成平台。达梦数据交换平台创新地将传统的ETL工具（Extract、Transform、Loading）与分布式大数据处理平台相结合，实现了对数据同步、数据处理以及数据交换共享的一站式支持，大幅度降低了用户使用各种平台进行大数据整合处理的技术门槛，是构建数据中心、数据仓库、数据交换和数据同步等数据集成类应用的理想平台，下面来介绍下具体使用的方法。

二、环境准备

操作系统：redhat 7.5 x86_64

服务器配置：1核2G

数据库版本：DM8开发版

DMETL5版本：dmetl5_V5.03.08

JAVA版本：18.0.1.1

三、正式安装

1．新建目录，然后将文件传到服务器上

mkdir -p /opt/dmetl/

2.解压

unzip dmetl5_V5.03.08-Build(2022.03.11-106627)__Linux.x86_64_std.zip

3.安装调度器

cd dmetl5_V5.03.08-Build(2022.03.11-106627)__Linux.x86_64_std

./dmetl5_scheduler_linux.x86_64.bin -i

 

4.安装原生执行器

./dmetl5_native_executor_linux.x86_64.bin -i

 

5.安装管理器

./dmetl5_manager_linux.x86_64.bin -i

 

6.将所有服务启动，打开数据交换平台

 

7.新建工程

 

8.新建DM8数据源

 

 

9.配置转换

 

配置sql查询

 

需要在SQL查询内配置数据源与SQL语句：

 

并且需要获取列信息

 

配置目的表（注意目的表字段，我选择的是全字段导入，所以所有字段都选择了）

 

10.运行

点击运行按钮，发现数据已经同步过去了

 

四、后记

  文中演示了从搭建DMETL到简单的使用数据交换平台的功能，文中仅仅介绍了一种常见的数据读取的功能，读者也可以试试其他功能，相关文档可以在/opt/dmetl5/doc路径下找到，如果有疑问，欢迎来社区交流，如果文中哪里有误，欢迎指出，大家共同交流进步！

社区地址：https://eco.dameng.com