-
php使用Snoopy进行数据采集的方法详解
本文为大家讲解的是php使用Snoopy进行数据采集的方法详解,感兴趣的同学参考下。 这里介绍两个php采集能用到的好工具...
PHP 2014-12-21 03:21:04 -
一个基于phpQuery的php通用采集类
本文是一个一个基于phpQuery的php通用采集类示例代码,感兴趣的同学参考下. 这是自己以前写的一个php的采集类,自己一直在用,自我感觉很简单很强大,只要懂一点点选择器的知识就可以采集任何页面了,也支持https页面,做简单的采集足够用了 一、采集类源码 <?php /** *通用列表采集类 *版本V1...
PHP 2014-12-16 00:39:04 -
php实现的百度知道与问问的采集程序
本文是一个百度知道和soso问问的采集示例代码,代码不见得能直接使用,但大家可以参考实现思路,感兴趣的同学参考研究下。 知道采集代码 <?php session_start(); header("content-type:text/html;charset=gbk"); require("stole_config.php"); require("conn.php"); require("keyword.php"); $searchStr=$_GET["searchStr"]; $ss=explode(" ",$searchStr);//拆分搜索关键字 $word="";//关键字设为空 foreach($ss as $key=>$t) { if($key>0) { $word .="+"; } $word .=urlencode($t); } $jl=int...
PHP 2014-12-15 00:57:04 -
php不用正则采集速度探究总结
这个以前有人发帖子研究过了采集速度,但是之后只是说出了哪个函数快并没有总结,研究问题的目的是要总结方法。 注意:下面的所有函数都没有用正则...
PHP 2014-12-14 17:03:06 -
PHP 采集程序 常用函数
本文为大家整理了一些php采集常用的函数代码,感兴趣的同学参考下. 当前的脚本网址 function get_php_url(){ if(!empty($_SERVER["REQUEST_URI"])){ $scriptName = $_SERVER["REQUEST_URI"]; $nowurl = $scriptName; }else{ $scriptName = $_SERVER["PHP_SELF"]; if(empty($_SERVER["QUERY_STRING"])) $nowurl = $scriptName; else $nowurl = $scriptName...
PHP 2014-12-13 13:21:06 -
PHP数据采集原理分析
采集器,通常又叫小偷程序,主要是用来抓取别人网页内容的。关于采集器的制作,其实并不难,就是远程打开要采集的网页,然后用正则表达式将需要的内容匹配出来,只要稍微有点正则表达式的基础,都能做出自己的采集器来的...
PHP 2014-12-13 07:18:04 -
PHP 采集心得技巧
本文为大家讲解一篇php采集心得技巧,感兴趣的同学参考下. 1.获取远程文件源代码(file_get_contents或用fopen). 2.分析代码得到自己想要的内容(这里用正规匹配,一般是得到分页)。 3.跟根得到的内容进行下载入库等操作...
PHP 2014-12-13 02:27:06 -
PHP simple_html_dom.php结合正则表达式实现采集文章功能
本文是一个php下的simple_html_dom.php结合正则表达式实现的采集文章功能代码,感兴趣的同学参考下。 <?php //包含PHP Simple html Dom 类库文件 include_once('./simplehtmldom/simple_html_dom.php'); //采集html function getwebcontent($url){ $ch = curl_init(); $timeout = 10; curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout); curl_setopt ($ch, CURLOPT_FOLLOWLOCATION, 1); $contents = trim(curl_exec($ch)); curl_close($ch); return $contents; ...
PHP 2014-12-10 06:06:03 -
PHP采集中国天气网未来7天天气实现代码
本文是一个PHP实现的可以用来采集中国天气网未来7天天气方法代码,可以做为学习PHP采集的入门教程,感兴趣的朋友可以参考下 前言 我们在写一个Web程序的时候,总会想着把自己的网站更美观一些,功能能更多一些,有时候写一些小的工具或者加上小的插件会让我们的站点更加完善。比如万年历功能,比如我们现在要讲的天气预报功能...
PHP 2014-12-10 00:00:12 -
PHP 采集程序中常用的函数
本文为大家列举了几个php做采集时的常用代码,感兴趣的同学参考下. //获得当前的脚本网址 function get_php_url() { if(!empty($_SERVER[”REQUEST_URI”])) { $scriptName = $_SERVER[”REQUEST_URI”]; $nowurl = $scriptName; } else { $scriptName = $_SERVER[”PHP_SELF”]; if(empty($_SERVER[”QUERY_STRING”])) $nowurl = $scriptName; else $nowurl = $scriptName...
PHP 2014-12-09 16:12:08