Webservice接口数据抽取_kettel

在进行ETl数据抽取的时,有时会遇到Webservice接口服务的情况;这里对kettel工具和java脚本两种抽取方式来简单的介绍一下。

由于篇幅较长,我分四篇来介绍;下一篇地址:  (Webservice接口数据抽取_kettel<二>)

先看第一篇:


kettel工具方式:

一、Webservice服务查询。

这里利用常见的天气信息的接口来做演示。(http://www.webxml.com.cn/WebServices/WeatherWebService.asmx)

    1、webservice接口的简单介绍:

a、调试接口,可以通过jemeter、soupUI等工具,也可以通过浏览器直接来调试。如下

Webservice接口数据抽取_kettel_第1张图片

访问接口的地址,可以看到网页上有5个关于该天气接口的方法:getSupportCity、getSupportDataSet、getSupportProvince、getWeatherbyCityName、getWeatherbyCityNamePro。下面来调试一下getWeatherbyCityName方法

Webservice接口数据抽取_kettel_第2张图片

结果:

Webservice接口数据抽取_kettel_第3张图片

这样我们就确定该服务是没有问题的,接下来我们就来演示抽取getWeatherbyCityName方法的返回数据。

b、用kettel调该接口,需要将接口转成URL的形式(加上?WSDL):

http://www.webxml.com.cn/WebServices/WeatherWebService.asmx?WSDL

Webservice接口数据抽取_kettel_第4张图片

同样我们也可以看到该接口的方法:

Webservice接口数据抽取_kettel_第5张图片


    2、kettel的web服务查询

kettel调用接口用的是‘web服务查询’查询这个组件。

a、web服务查询介绍

加载URL:输入地址,加载出方法名,说明接头是通的

Webservice接口数据抽取_kettel_第6张图片

输入参数:

Webservice接口数据抽取_kettel_第7张图片

输出参数:

Webservice接口数据抽取_kettel_第8张图片


    3、查询流程

Webservice接口数据抽取_kettel_第9张图片

a、生成变量:

Webservice接口数据抽取_kettel_第10张图片

c、文本文件输出:

Webservice接口数据抽取_kettel_第11张图片

d、结果查看

Webservice接口数据抽取_kettel_第12张图片


二、一些需要注意的地方

a、web服务查询时,有时候需要将放回的XML转成String。因为有时候kettel会自动的将XML的节点元素去掉,以后解析时就会出问题:

Webservice接口数据抽取_kettel_第13张图片

b、这个例子中,我将XML直接输出到txt文档的(在输入的时候就要选全部文档,不然看不见txt)。因为转成XML文件有时候会出现乱码现象。
c、生产记录时,要限制1次,不然会重复调接口,返回多个XML文件。
Webservice接口数据抽取_kettel_第14张图片
d、在文本文件输出时,要将头部去掉,并选择正确的编码格式,不然后面解析时会报错
Webservice接口数据抽取_kettel_第15张图片
Webservice接口数据抽取_kettel_第16张图片

接口调用成功了,下一编将介绍,kettel解析返回的XML文件,并存储数据库,地址如下:

(Webservice接口数据抽取_kettel<二>)








你可能感兴趣的:(oracle,数据,kettel,webservice接口,Web服务查询)