怎么发送采集数据到网站-http接口方式

采集完成的数据,要怎么发送到网站上呢?

我们可以使用http的post方式来传输数据,需要有接收数据的接口文件,然后在工具中对接参数映射要传输的数据即可。

例如用简数采集器,它就支持把采集到的数据,快速自动化批量发送到用户的网站,设置也挺人性化的,需要用户自行提供的接收数据的http接口。

该发送方式十分通用灵活,几乎可以给任何网站传输数据,但是主要是给用户自己开发的系统使用,因为需要程序员才会使用。

如果是开源的CMS系统,也可以去官方商城中寻找对应的接口或插件,如果是非官方的请务必检查有无安全问题,再使用。

一、http自定义接口传输方式:

        发送数据时,简数采集器会把数据组装为http请求的格式:

                参数名1=参数值1&参数名2=参数值2...

        然后将组装的数据通过http的post方式传输给用户的自定义http接口,每发送一条数据就调用一次接口。

        例如post表单数据: myTitle=测试标题&myContent=这是正文的内容...

        自定义http接口接收到数据后,会对数据进行处理,最后写入网站,就完成了数据发送。

 

 

二、创建对接发送配置:

1. 自定义HTTP接口入口

  在要发送的采集任务的【导出目标管理】栏,点击【+自定义HTTP接口配置】按钮,创建自定义HTTP接口发送目标;

怎么发送采集数据到网站-http接口方式_第1张图片

2. 自定义HTTP接口目标配置

I、基本信息配置

        带星号是必填项,建议要设置安全校验参数,在【密码参数名】与 【发送密码】对应填写,也可到下一步第二步【添加URL参数及与抓取字段映射】中填写的,二选一填写即可。

        【POST内容类型】可以选择表单格式或者JSON格式,默认是表单格式。

        【状态】的选择是用户自己的标记信息,不影响系统执行;

怎么发送采集数据到网站-http接口方式_第2张图片

 

II、映射字段配置

        第一列填写用户http接口中需要接收的自定义的参数名;

        第二列选择对应采集数据中已存在的字段名,如果是固定值,请在第三列填写(二选一生效,此时第二列不需要选择字段);

怎么发送采集数据到网站-http接口方式_第3张图片

   提示:如果接口有设置密码安全验证,可在基本信息或者第二步映射字段中选择一处填写;

III、添加HTTP请求头(非必填项,可选)

  添加HTTP请求头这一步是可选的,一般不需要可以直接跳过的;

  如果需要在HTTP请求头添加一些信息,请在【HTTP请求头参数名】列填写对应参数名,然后在来源1选择对应数据的字段,或者来源2填写对应的固定值,二选一。

怎么发送采集数据到网站-http接口方式_第4张图片

 

三、返回json格式数据

  自定义HTTP接口接收到数据后,进行处理再写入到网站中,最后再返回json格式信息给简数采集器服务器,表示数据是发送成功或失败:

{"rs":1,"code":0,"data":{"url":"文档的url,也不可以填"},"msg":""}

  • rs: 请求结果,成功请返回1,失败返回0 (必有项);
  • code:返回编码 (可选项);
  • msg:一般是错误信息(可选项);
  • data:数据对象 (可选项);

这样就完成了用http接口方式发送数据到网站,非常方便与灵活的。

你可能感兴趣的:(http,网络,网络协议)