Doris(二) -通过外部表同步数据

前言

参考网址

1.官网

2.ODBC External Table Of Doris

3.Apache doris ODBC外表使用方式

第一步 创建 RESOURCE

DROP RESOURCE IF EXISTS `mysql_test_odbc`;
CREATE EXTERNAL RESOURCE `mysql_test_odbc`
PROPERTIES (
"type" = "odbc_catalog",
"host" = "数据库 ip",
"port" = " 数据库端口",
"user" = "数据库用户",
"password" = "数据库密码",
"database" = "数据库库名",
"odbc_type" = "mysql",
"driver" = "MySQL ODBC 8.0 Unicode Driver"
);

odbc_type: 标示外部表的类型，当前doris支持mysql与oracle，未来可能支持更多的数据库。引用该resource的ODBC外表必填

driver: 标示外部表使用的driver动态库，引用该resource的ODBC外表必填。

                该名称需要与 ./be/conf/odbcinst.ini中对应的模块一致

 

第二步 创建外部表

DROP TABLE IF EXISTS ext_表名;
CREATE EXTERNAL TABLE  ext_表名(
    列及属性
) ENGINE=ODBC
COMMENT "ODBC"
PROPERTIES (
    "odbc_catalog_resource" = "mysql_test_odbc",
    "database" = "数据库",
    "table" = "表名"
);

 注意，odbc_catalog_resource名字需要和前文的 resource 的 name 一致。

第三步 创建表

CREATE TABLE `目标表` (
    列 属性
)
COMMENT "备注"
DISTRIBUTED BY HASH(k1) BUCKETS 2
PROPERTIES (
    "replication_num" = "1"
);

第四步 安装 ODBC Drvier

如果已经装了，就不用装。

Mysql ODBC驱动下载地址：https://dev.mysql.com/downloads/connector/odbc/

选择合适的驱动，然后安装。

yum localinstall -y mysql-connector-odbc-8.1.0-1.el7.x86_64.rpm

第五步 写入数据

insert into 目标表 select 列 from ext_表名;

第六步 查询