-
php中Snoopy类用法实例
这篇文章主要介绍了php中Snoopy类用法,实例分析了使用Snoopy类实现页面抓取的相关技巧,需要的朋友可以参考下,本文实例讲述了php中Snoopy类用法,分享给大家供大家参考,具体分析如下:
这里演示了php中如何通过Snoopy抓取网页信息
snoopy类的下载地址:http://sourceforge.net/projects/snoopy/
- /*
- You need the snoopy.class.php from
- http://snoopy.sourceforge.net/
- */
- include("snoopy.class.php");
- $snoopy = new Snoopy;
- // need an proxy?:
- //$snoopy->proxy_host = "my.proxy.host";
- //$snoopy->proxy_port = "8080";
- // set browser and referer:
- $snoopy->agent = "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)";
- $snoopy->referer = "http://www.jonasjohn.de/";
- // set some cookies:
- $snoopy->cookies["SessionID"] = '238472834723489';
- $snoopy->cookies["favoriteColor"] = "blue";
- // set an raw-header:
- $snoopy->rawheaders["Pragma"] = "no-cache";
- // set some internal variables:
- $snoopy->maxredirs = 2;
- $snoopy->offsiteok = false;
- $snoopy->expandlinks = false;
- // set username and password (optional)
- //$snoopy->user = "joe";
- //$snoopy->pass = "bloe";
- // fetch the text of the website www.google.com:
- if($snoopy->fetchtext("http://www.google.com")){
- // other methods: fetch, fetchform, fetchlinks, submittext and submitlinks
- // response code:
- print "response code: ".$snoopy->response_code."<br/>\n";
- // print the headers:
- print "<b>Headers:</b><br/>";
- while(list($key,$val) = each($snoopy->headers)){
- print $key.": ".$val."<br/>\n";
- }
- print "<br/>\n";
- // print the texts of the website:
- print "<pre>".htmlspecialchars($snoopy->results)."</pre>\n";
- }
- else {
- print "Snoopy: error while fetching document: ".$snoopy->error."\n";
- }
出处:http://www.phpfensi.com/php/20210601/16047.html
栏目列表
最新更新
nodejs爬虫
Python正则表达式完全指南
爬取豆瓣Top250图书数据
shp 地图文件批量添加字段
爬虫小试牛刀(爬取学校通知公告)
【python基础】函数-初识函数
【python基础】函数-返回值
HTTP请求:requests模块基础使用必知必会
Python初学者友好丨详解参数传递类型
如何有效管理爬虫流量?
SQL SERVER中递归
2个场景实例讲解GaussDB(DWS)基表统计信息估
常用的 SQL Server 关键字及其含义
动手分析SQL Server中的事务中使用的锁
openGauss内核分析:SQL by pass & 经典执行
一招教你如何高效批量导入与更新数据
天天写SQL,这些神奇的特性你知道吗?
openGauss内核分析:执行计划生成
[IM002]Navicat ODBC驱动器管理器 未发现数据
初入Sql Server 之 存储过程的简单使用
这是目前我见过最好的跨域解决方案!
减少回流与重绘
减少回流与重绘
如何使用KrpanoToolJS在浏览器切图
performance.now() 与 Date.now() 对比
一款纯 JS 实现的轻量化图片编辑器
关于开发 VS Code 插件遇到的 workbench.scm.
前端设计模式——观察者模式
前端设计模式——中介者模式
创建型-原型模式