E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
php采集
php采集
文章中的图片获取替换到本地(实现代码)
/** *获取替换文章中的图片路径 *@paramstring$xstr内容 *@paramstring$keyword创建照片的文件名 *@paramstring$oriweb网址 *@returnstring * */ functionreplaceimg($xstr,$keyword,$oriweb){ //保存路径 $d=date('Ymd',time()); $
Juzhang
·
2013-10-23 13:00
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks
天梯梦
·
2013-09-26 01:00
PHP
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks
天梯梦
·
2013-09-26 01:00
PHP
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks
天梯梦
·
2013-09-26 01:00
PHP
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks
天梯梦
·
2013-09-26 01:00
PHP
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks
天梯梦
·
2013-09-26 01:00
PHP
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks
天梯梦
·
2013-09-26 01:00
PHP
PHP采集
类-Snoopy.class.php
Snoopy是一个
php采集
类,用来模拟浏览器获取网页内容和发送表单。
wbj0110
·
2013-09-22 08:00
采集
PHP采集
类-Snoopy.class.php
Snoopy是一个
php采集
类,用来模拟浏览器获取网页内容和发送表单。
wbj0110
·
2013-09-22 08:00
采集
PHP采集
类-Snoopy.class.php
Snoopy是一个
php采集
类,用来模拟浏览器获取网页内容和发送表单。
wbj0110
·
2013-09-22 08:00
采集
PHP采集
库-Snoopy.class.php
//加载类库文件include(“snoopy.php”);//要采集的页面地址$url=“http://www.www.shlongyingjixie.com”;$snoopy=newSnoopy;//去抓取页面$snoopy->fetch($url);//输出抓回页面的htmlecho$snoopy->results;
dragon2015
·
2013-08-31 20:00
[转]
php采集
类 snoopy
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。Snoopy的一些特点:1抓取网页的内容fetch2抓取网页的文本内容(去除HTML标签)fetchtext3抓取网页的链接,表单fetchlinksfetchform4支持代理主机5支持基本的用户名/密码验证6支持设置user_agent,referer(来路),cookies和headercontent(头文件)7支
阿夏
·
2013-08-20 17:00
Snoopy
php采集
采集类
php采集
文章中的图片获取替换到本地(实现代码)
复制代码代码如下:/***获取替换文章中的图片路径*@paramstring$xstr内容*@paramstring$keyword创建照片的文件名*@paramstring$oriweb网址*@returnstring**/functionreplaceimg($xstr,$keyword,$oriweb){//保存路径$d=date('Ymd',time());$dirslsitss='/va
·
2013-07-08 08:55
PHP采集
利器 Snoopy 试用心得
Snoopy是什么? (下载snoopy) Snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。 Snoopy的一些特点: * 方便抓取网页的内容 * 方便抓取网页的文本内容 (去除HTML标签) * 方便抓取网页的链接 * 支持代理主机 * 支持基本的用户名/密码验证 * 支持设置 user_agent, referer(来路), cookies 和 h
zzc1684
·
2013-06-26 11:00
Snoopy
PHP采集
的实现,直接写成个类
很多朋友都想自己的cms有采集的功能,这样省时省力,今天就分享一个朋友写的采集类,我也没怎么看过,大家可以自己研究一下,如果不会,可以加QQ2387813033,一起讨论学习,或者加群252799167 url=$url; } functioncurl_file_get_contents(){ $ch=curl_init(); curl_setopt($ch,CURLOPT_UR
3147972
·
2013-06-14 16:49
php采集
PHP采集类
php采集
程序
阅读更多其实,采集程序最简单的思路就是:获取页面代码——分析代码——获取需要的部分——写入数据库对于采集程序来说,使用PHP来写的话,其实不算太好的,因为PHP并不支持多线程,对于采集来说,若没有多线程,将会是非常痛苦的一件事不过可以使用frame等来设置同时几个页面一起采集,这样就能增加速度了,在这里我不讨论怎么多线程,我只说怎么用PHP来进行简单的采集先确定采集目标:http://cn.jok
liumeng5888
·
2013-06-05 16:00
php采集
php采集
程序
其实,采集程序最简单的思路就是:获取页面代码——分析代码——获取需要的部分——写入数据库对于采集程序来说,使用PHP来写的话,其实不算太好的,因为PHP并不支持多线程,对于采集来说,若没有多线程,将会是非常痛苦的一件事不过可以使用frame等来设置同时几个页面一起采集,这样就能增加速度了,在这里我不讨论怎么多线程,我只说怎么用PHP来进行简单的采集先确定采集目标:http://cn.jokes.y
liumeng5888
·
2013-06-05 16:00
php采集
深入php数据采集的详解
这里介绍两个
php采集
能用到的好工具。一个是Snoopy,一个是simple_html_dom。采集还有很多方式(其实本质就2-3种,其他的都是衍生的),php自带了几个方法也能直接进行采集。
·
2013-06-02 16:37
php采集
新浪视频hlv格式源地址
比如:http://video.sina.com.cn/v/b/101268120-2809258130.html这个页面的视频,可以采集到:http://edge.v.iask.com/101268120.hlv?KID=sina,viask&Expires=1366473600&ssig=DRtfWomZg%2B这个hlv视频源文件的地址,可用于下载保存到本地,或者作为bilibili这类视频
吾爱
·
2013-04-19 13:00
使用
PHP采集
远程图片
当我们需要采集网络上的某个网页内容时,如果目标网站上的图片做了防盗链的话,我们直接采集过来的图片在自己网站上是不可用的。那么我们使用程序将目标网站上的图片下载到我们网站服务器上,然后就可调用图片了。本文将使用PHP实现采集远程图片功能。基本流程:1、获取目标网站图片地址。2、读取图片内容。3、创建要保存图片的路径并命名图片名称。4、写入图片内容。5、完成。我们通过写几个函数来实现这一过程。函数ma
jsny821
·
2013-04-10 16:59
图片
远程获取
PHP
使用
PHP采集
远程图片
当我们需要采集网络上的某个网页内容时,如果目标网站上的图片做了防盗链的话,我们直接采集过来的图片在自己网站上是不可用的。那么我们使用程序将目标网站上的图片下载到我们网站服务器上,然后就可调用图片了。 本文将使用PHP实现采集远程图片功能。基本流程: 1、获取目标网站图片地址。 2、读取图片内容。 3、创建要保存图片的路径并命名图片名称。 4、写入图片内容。 5、完成。 我们通过写几个函数来实现这一
jsny821
·
2013-04-10 16:59
图片
远程获取
PHP采集
远程图片
"; // } /* 实际应用中,我们可能会采集某个站点的内容,比如产品信息,包括采集防盗链的图片保存到网站上服务器上。这时我们可以使用正则匹配页面内容,将页面中相匹配的图片都找出来,然后分别下载到网站服务器上,完成图片的采集。以下代码仅供测试: */ function get_pic($cont,$path){ $pa
织梦大白兔
·
2013-04-10 10:09
PHP
图片
采集
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。 下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091 Snoopy的一些特点: 1抓取网页的内容 fetch 2 抓取网页的文本内容 (去除HTML标签) fetchtext 3抓取网页的链接,表单 fetchlinks fetchfor
xitong
·
2013-01-13 11:00
PHP
Android之-中国天气网城市id数据
用
PHP采集
到mysql,再从mysql导入到mssql,再从mssql导出到sq
zengzhongxiang
·
2013-01-08 14:00
自己写的一个简单
PHP采集
器
/is",$r,$booktitle);//匹配此页面的标题 $bookname=$booktitle[1];//取第二层数组 $preg='//isU'; preg_match_all($preg,$r,$zj);//将此页面的章节连接匹配出来 $bookzj=count($zj[1]);//计算章节标题数量 if($ver=="new"){ $content_start="";
lenglingx
·
2013-01-03 02:28
PHP
采集器
一个
php采集
类,含下载远程图片并替换原文
今天没事完善了一个
php采集
类,这给大家分享下。本实例,可以,自动下载远程图片,并替换文章中的图片地址。。。
open520yin
·
2012-12-17 20:00
php采集
实现
用PHP实现采集第一步,当然是如何去抓取对方网页的源代码很多人第一反应可能就是用freadfile_get_contents来抓取,我这里是推荐使用curl来采集网页,原因有2:1.curl功能强大,可以发送GET,POST请求,可以模拟头信息,cookie实现登陆对方站点,还可以设置代理模式,隐蔽自己的IP。2.curl速度快,未测试。curl的简单教程:http://my.oschina.ne
吾爱
·
2012-12-13 18:00
php采集
实例演示
php采集
新浪sina首页的新闻
今天我来实例演示一下用php怎样抓取sina首页的新闻。先贴上我的效果图:如上图:显示的是新浪sina首页的新闻|财经模块。下面介绍我的实现过程。用到的函数主要有file_get_contents,preg_match等。过程也非常简单。 $file=file_get_contents('http://www.sina.com.cn/'); preg_match('/([\s\S]*)/',$fi
justthinkit
·
2012-12-12 18:00
php数据抓取类Snoopy使用
php 采集 Snoopy 详解
PHP采集
利器snoopy应用详解 Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。
malong26
·
2012-12-04 13:00
PHP
Snoopy
php采集
纠正一下
由于需要,要写一个简单的
PHP采集
程序,照例是到网上找了一堆教程,然后照猫画虎,可是发现网上的教程全是似是而非,没有一个真正能用的。苦想了几天,终于弄明白了里面的道理。在这里写出来,请高手指正。
过大虾米
·
2012-11-20 16:17
php采集纠正
PHP采集
利器snoopy应用详解
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。Snoopy正确运行需要你的服务器的PHP版本在4以上,并且支持PCRE(Perl Compatible Regular Expressions),基本的LAMP服务都支持。 一、Snoopy的一些特点: 1.抓取网页的内容 fetch 2.抓取网页的文本内容 (去除HTML标签) fetchtext 3
hnlixf
·
2012-11-09 13:00
PHP
PHP采集
利器snoopy应用详解
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。Snoopy正确运行需要你的服务器的PHP版本在4以上,并且支持PCRE(Perl Compatible Regular Expressions),基本的LAMP服务都支持。 一、Snoopy的一些特点: 1.抓取网页的内容 fetch 2.抓取网页的文本内容 (去除HTML标签) fetchtext 3
hnlixf
·
2012-11-09 13:00
PHP
PHP采集
利器:Snoopy 试用心得
Snoopy是什么? (下载 snoopy) Snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。 Snoopy的一些特点: * 方便抓取网页的内容 * 方便抓取网页的文本内容 (去除HTML标签) * 方便抓取网页的链接 * 支持代理主机 * 支持基本的用户名/密码验证 * 支持设置 user_agent
hnlixf
·
2012-10-12 16:00
PHP
PHP采集
利器:Snoopy 试用心得
Snoopy是什么? (下载 snoopy) Snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。 Snoopy的一些特点: * 方便抓取网页的内容 * 方便抓取网页的文本内容 (去除HTML标签) * 方便抓取网页的链接 * 支持代理主机 * 支持基本的用户名/密码验证 * 支持设置 user_agent
hnlixf
·
2012-10-12 16:00
PHP
PHP采集
抓取
一、什么是
php采集
程序?二、为什么要采集?三、采集些什么?四、如何采集?五、采集思路六、采集范例程序七、采集心得 什么是
php采集
程序?
小卡特蟀
·
2012-08-22 11:00
PHP采集
利器:Snoopy 试用心得
Snoopy是什么?(下载snoopy)Snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。Snoopy的一些特点:*方便抓取网页的内容*方便抓取网页的文本内容(去除HTML标签)*方便抓取网页的链接*支持代理主机*支持基本的用户名/密码验证*支持设置user_agent,referer(来路),cookies和headercontent(头文件)*支持浏
sun886
·
2012-06-04 09:00
html
PHP
浏览器
server
Cookies
action
[php]
php采集
程序中常用的函数
php采集
程序中常用的函数 //获得当前的脚本网址 function get_php_url(){ if(!
liu86th
·
2012-05-29 17:00
PHP
简单
PHP采集
器
/is",$r,$booktitle);//匹配此页面的标题 $bookname=$booktitle[1];//取第二层数组 $preg='//isU'; preg_match_all($preg,$r,$zj);//将此页面的章节连接匹配出来 $bookzj=count($zj[1]);//计算章节标题数量 if($ver=="new"){ $content_start=""; $conten
WangEven
·
2012-05-14 23:00
snoopy(强大的
PHP采集
类) 实例应用
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。下载地址: http://sourceforge.net/project/showfiles.php?group_id=2091Snoopy的一些特点:1抓取网页的内容fetch2抓取网页的文本内容(去除HTML标签)fetchtext3抓取网页的链接,表单fetchlinksfetchform4支持代理主机5支持基本的
张大鹏
·
2012-05-05 18:00
php数据采集
这里介绍两个
php采集
能用到的好工具。一个是Snoopy,一个是simple_html_dom。采集还有很多方式(其实本质就2-3种,其他的都是衍生的),php自带了几个方法也能直接进行采集。
bl1988530
·
2012-04-11 13:00
html
PHP
框架
Cookies
服务器
url
PHP采集
商家信息及采集方法概述(下)
下面我们来上代码数据库采用PDO主要用到了预处理关于预处理的内容参考:PHP5中PDO(PHPDATAOBJECT)模块基础详解还有一个phpquery源码下载这个稍后在给出具体的教程 第一步:基本的配置数据库文件在第一讲里面数据库连接:conn.php exec('SET CHARACTER SET '.DB_CHARSET); $DBH->exec('SET
kefirking
·
2012-03-07 16:14
爬虫
phpquery
休闲
php采集
商家信息采集
PHP采集
商家信息及采集方法概述(下)
下面我们来上代码数据库采用PDO主要用到了预处理关于预处理的内容参考:PHP5中PDO(PHPDATAOBJECT)模块基础详解还有一个phpquery×××这个稍后在给出具体的教程第一步:基本的配置数据库文件在第一讲里面数据库连接:conn.phpexec('SET CHARACTER SET '.DB_CHARSET); $DBH->exec('SET NAMES '.DB_
kefirking
·
2012-03-07 16:14
爬虫
休闲
php采集
后端开发
PHP采集
商家信息及采集方法概述(上)
最近电子商务市场上面,有很多商家的导航,里面收集了大量的商家信息,如果从事电子商务的这些信息还是有用的。我最近在做的一个项目就要用到这些信息,但是你总不能给别人要吧,这样别人是不给滴。所以只有自己爬了。以前也写过几个类似的爬虫爬取一个站点的某些信息总结说来就是第一:确定要爬取的资源。第二:确定爬取资源的资源地址(url)第三:分析找出资源地址规律第四:抓取资源地址。第五:循环获取地址的内容第六:
kefirking
·
2012-03-07 15:03
爬虫
phpquery
php采集
商家信息采集
PHP采集
商家信息及采集方法概述(上)
最近电子商务市场上面,有很多商家的导航,里面收集了大量的商家信息,如果从事电子商务的这些信息还是有用的。我最近在做的一个项目就要用到这些信息,但是你总不能给别人要吧,这样别人是不给滴。所以只有自己爬了。以前也写过几个类似的爬虫爬取一个站点的某些信息总结说来就是第一:确定要爬取的资源。第二:确定爬取资源的资源地址(url)第三:分析找出资源地址规律第四:抓取资源地址。第五:循环获取地址的内容第六:匹
kefirking
·
2012-03-07 15:03
爬虫
php采集
phpquery
后端开发
php实现抓取网站百度快照和百度收录数量的代码实例
如果大家稍加仔细看一下就能发现一个问题,我们下面几个抓取百度收录或快照或热词的程序中都有一个函数file_get_contents(),他是
php采集
网页常用的哦。
wglzaj
·
2012-02-21 12:43
PHP
function
网站
百度快照
百度收录
php实现抓取网站百度快照和百度收录数量的代码实例
如果大家稍加仔细看一下就能发现一个问题,我们下面几个抓取百度收录或快照或热词的程序中都有一个函数file_get_contents(),他是
php采集
网页常用的哦。
wglzaj
·
2012-02-21 12:43
php
网站
百度快照
开发技术-WEB类
PHP采集
腾讯微博的实现代码
复制代码代码如下:(.*)/Uis';preg_match_all($preg,$weibo,$string);foreach($string[1]as$key=>$value){echodelhtml($value)."";}functiondelhtml($str)//清除HTML标签{$st=-1;//开始$et=-1;//结束$stmp=array();$stmp[]="";$len=st
·
2012-01-19 19:40
PHP采集
利器:Snoopy 试用心得
很早就见识到论坛里很多大牛们自己写采集程序,很羡慕,自己水平有限,心有余而力不足,今天在网上找到了Snoopy,试用了一下,感觉很爽,推荐给大家(高手就免看了):先引用网上摘抄的一段说明:Snoopy是什么?Snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。Snoopy的一些特点:*方便抓取网页的内容*方便抓取网页的文本内容(去除HTML标签)*方便抓取
adparking
·
2011-07-19 13:00
html
PHP
server
浏览器
action
include
PHP数据采集
这里介绍两个
php采集
能用到的好工具。一个是Snoopy,一个是simple_html_dom。
yonglailizhi
·
2011-07-16 10:00
PHP
PHP采集
利器 Snoopy 试用心得
Snoopy是什么?(下载snoopy)Snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。Snoopy的一些特点:*方便抓取网页的内容*方便抓取网页的文本内容(去除HTML标签)*方便抓取网页的链接*支持代理主机*支持基本的用户名/密码验证*支持设置user_agent,referer(来路),cookies和headercontent(头文件)*支持浏
·
2011-07-03 00:43
上一页
1
2
3
4
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他