毛毛虫's 博客 http://www.wangchong.org 平凡的生活，默默的期待，等待蜕变的到来。。。 Sun, 27 Apr 2008 10:45:27 +0000 http://wordpress.org/?v=2.3.1 en Snoopy中文手册（毛毛虫翻译） http://www.wangchong.org/spider/32.html http://www.wangchong.org/spider/32.html#comments Sun, 27 Apr 2008 10:37:18 +0000 毛毛虫 http://www.wangchong.org/spider/32.html
  1. /**
  2. * @name Snoopy手册中文版
  3. * @author 毛毛虫 wangchong1985@gmail.com
  4. * @version Snoopy - the PHP net client v1.2.2
  5. * @link http://www.wangchong.org
  6. * @since 2008-04-27
  7. */

名称:

Snoopy - the PHP net client v1.2.2

概要:

  1. include "Snoopy.class.php";
  2.     $snoopy = new Snoopy;
  3.    
  4.     $snoopy->fetchtext("http://www.php.net/");
  5.     print $snoopy->results;
  6.    
  7.     $snoopy->fetchlinks("http://www.phpbuilder.com/");
  8.     print $snoopy->results;
  9.    
  10.     $submit_url = "http://lnk.ispi.net/texis/scripts/msearch/netsearch.html";
  11.    
  12.     $submit_vars["q"] = "amiga";
  13.     $submit_vars["submit"] = "Search!";
  14.     $submit_vars["searchhost"] = "Altavista";
  15.        
  16.     $snoopy->submit($submit_url,$submit_vars);
  17.     print $snoopy->results;
  18.    
  19.     $snoopy->maxframes=5;
  20.     $snoopy->fetch("http://www.ispi.net/");
  21.     echo "<PRE>\n";
  22.     echo htmlentities($snoopy->results[0]);
  23.     echo htmlentities($snoopy->results[1]);
  24.     echo htmlentities($snoopy->results[2]);
  25.     echo "</PRE>\n";
  26.  
  27.     $snoopy->fetchform("http://www.altavista.com");
  28.     print $snoopy->results;

描述:

Snoopy是什么?

Snoopy是一个php类，用来模仿web浏览器的功能，它能完成获取网页内容和发送表单的任务。

Snoopy的一些特点:

* 方便抓取网页的内容
* 方便抓取网页的文本内容 (去除HTML标签)
* 方便抓取网页的链接
* 支持代理主机
* 支持基本的用户名/密码验证
* 支持设置 user_agent, referer(来路), cookies 和 header content(头文件)
* 支持浏览器转向，并能控制转向深度
* 能把网页中的链接扩展成高质量的url(默认)
* 方便提交数据并且获取返回值
* 支持跟踪HTML框架(v0.92增加)
* 支持再转向的时候传递cookies (v0.92增加)
(more…)

]]> http://www.wangchong.org/spider/32.html/feed 仿QQ等级显示函数 http://www.wangchong.org/phpmysql/28.html http://www.wangchong.org/phpmysql/28.html#comments Fri, 11 Apr 2008 06:19:03 +0000 毛毛虫 http://www.wangchong.org/phpmysql/28.html 开头先引述下QQ等级的算法：
设当前等级为N，达到当前等级最少需要的活跃天数为D，当前活跃天数为Dc，升级剩余天数为Dr，则：

mimetex.gif

从而推出:

mimetex1.gif

好了，引述完成，懒得写字了，贴出代码：

  1. <?php
  2. /**
  3. *
  4. * showRank.php
  5. * QQ等级输出类库
  6. * @author 毛毛虫 <wangchong1985@gmail.com>
  7. * @version 1.0 2008-04-09
  8. *
  9. */
  10. class showRank {
  11.    
  12.     /**
  13.      * 第一级图片显示字段
  14.      */
  15.     public $mImage1;
  16.    
  17.     /**
  18.      * 第二级图片显示字段
  19.      */
  20.     public $mImage2;
  21.    
  22.     /**
  23.      * 第三级图片显示字段
  24.      */
  25.     public $mImage3;
  26.  
  27.     /**
  28.      * 构造函数：传入图片值
  29.      * @return 无
  30.      */
  31.     function __construct($pImage1 = '★',$pImage2 = '▲',$pImage3 = '●') {
  32.         $this->mImage1 = $pImage1;
  33.         $this->mImage2 = $pImage2;
  34.         $this->mImage3 = $pImage3;
  35.     }
  36.    
  37.     /**
  38.      * 根据活跃天数计算用户等级。(模仿QQ的升级方式)
  39.      * @return int
  40.      * @access public
  41.      */
  42.     function get_rank($pScore) {
  43.         $temp = $pScore+4;
  44.         $tRank = sqrt($temp)-2;
  45.         $tRank = floor($tRank);
  46.         return $tRank;
  47.     }
  48.    
  49.     /**
  50.      * 用户等级标志,根据用户等级显示用户标志
  51.      * 仿照QQ等级的四进制显示
  52.      * @return str
  53.      * @access public
  54.      */
  55.     function get_score($pScore) {
  56.         $str = '';
  57.         $tRank = $this->get_rank($pScore);//根据分数取得等级
  58.         $tPicNum = base_convert($tRank,10,4);//转化为四进制
  59.         $tPicNum = strrev($tPicNum);//翻转字符串
  60.         $tArray = str_split($tPicNum);//转化为数组
  61.         $tNum = count($tArray);
  62.         if($tNum<=3) {
  63.             for($i=$tNum-1;$i>=0;$i--){
  64.                 switch($i){
  65.                     case '0':
  66.                         for($j=0;$j<$tArray[$i];$j++){
  67.                             $str .= $this->mImage1;
  68.                         }
  69.                     break;
  70.                     case '1':
  71.                         for($j=0;$j<$tArray[$i];$j++){
  72.                             $str .= $this->mImage2;
  73.                         }
  74.                     break;
  75.                     case '2':
  76.                         for($j=0;$j<$tArray[$i];$j++){
  77.                             $str .= $this->mImage3;
  78.                         }
  79.                     break;
  80.                     default:
  81.                         //$str = ;
  82.                     break;
  83.                 }
  84.             }
  85.         }else {
  86.             $str =     $this->mImage3.$this->mImage3.$this->mImage3.$this->mImage3;
  87.         }
  88.         return $str;
  89.  
  90.     }
  91.  
  92. }
  93. ?>

(more…)

]]> http://www.wangchong.org/phpmysql/28.html/feed PHP实现‘服务器推’（flush函数使用） http://www.wangchong.org/phpmysql/27.html http://www.wangchong.org/phpmysql/27.html#comments Tue, 12 Feb 2008 04:54:57 +0000 毛毛虫 http://www.wangchong.org/phpmysql/27.html 最近一直在做自己的图书站，分别使用过杰奇和读吧两套不同的系统，对于这两套系统也是又爱又恨，爱的是他们的功能强大，恨他们都同属没有开源精神的产物。呵呵，作为一名穷程序员，俺可以理解作者的苦衷，这里就不批判了。
年假期间，无事可做，翻看自己以前的采集代码，发现很多可以优化和提升的地方，就简单做了下优化，其中也使用了用户体验更加优秀的服务器推技术，这里简单的介绍下核心的函数：flush。
(more…)

]]> http://www.wangchong.org/phpmysql/27.html/feed 杰奇小说连载系统sitemap生成插件 http://www.wangchong.org/phpmysql/25.html http://www.wangchong.org/phpmysql/25.html#comments Fri, 01 Feb 2008 16:52:52 +0000 毛毛虫 http://www.wangchong.org/phpmysql/25.html 最近为自己的书站最终选择了杰奇小说连载系统，但是这个系统并不是开源的程序，无法自由修改，很是不爽，但熟悉了几天后，还是忍不住做些扩展的开发，这是我写的一个sitemap的生成程序，在这里放出来给大家用用吧。
sitemap.php

  1. $txt_name='sitemap.xml';
  2. writeStatistic_set_name($txt_name);
  3. $sql="select * from jieqi_article_article ";
  4. $db->query($sql);
  5. for($i=1;$i<= $db->num_rows();$i++){
  6.     $db->next_record();
  7.     $siteid = $db->f(siteid);
  8.     $articleid = $db->f(articleid);
  9.     $url = "<url>
  10.         <loc>http://www.iobug.com/files/article/html/$siteid/$articleid/index.html</loc>
  11.     </url>";
  12.     writeStatistic($url,$txt_name);
  13. }
  14. $db->free();
  15. $over='</urlset>';
  16. writeStatistic($over,$txt_name);
  17. print "<script>alert(\"sitemap生成结束！\");</script>";
  18. exit;

杰奇小说连载系统sitemap生成插件下载：
杰奇小说sitemap生成插件下载

]]> http://www.wangchong.org/phpmysql/25.html/feed snoopy与htmlsql实例（盗墓笔记采集） http://www.wangchong.org/spider/23.html http://www.wangchong.org/spider/23.html#comments Fri, 01 Feb 2008 16:22:27 +0000 毛毛虫 http://www.wangchong.org/spider/23.html snoopy这个采集类库是个很好玩的东西，简单而且使用，一般的采集应付起来绰绰有余。
最近一个哥们要看盗墓笔记的全本TXT文档，让我帮他采集，想了下决定用snoopy和一个好玩的类库htmlsql来做，htmlsql第一次使用，感觉比较好玩，写SQL的感觉非常有趣，就是灵活性上不是很突出，但做这种小的采集足够了，可能是因为第一次使用这个类库，并不是很顺利，写了两个多钟头，才搞定这个采集，这里放出源码供大家下载吧，想玩玩的可以拿去参考下。
展示部分代码：

  1. <?php
  2. include_once("./snoopy.class.php");
  3. include_once("./htmlsql.class.php");
  4. require_once("./function.php");
  5. //防止页面超时
  6. set_time_limit(0);
  7. //生成文本文档名称
  8. $name="怒海潜沙";//自定义文件名(注意自己修改)
  9. $txt_name=$name.".txt";
  10. $zhangjie="nu-hai-qian-sha";//这个程序写的并不是很智能，每个章节的链接地址还要自己修改下(注意自己修改)
  11. $max="46";//最大采集章节数(注意自己修改)
  12. $wsql = new htmlsql();
  13. for($i=1;$i<=$max;$i++){
  14.     $a=sprintf("%02d", $i);
  15.     $url="http://www.daomubiji.com/$zhangjie-$a.html";
  16.     // connect to a URL
  17.     if (!$wsql->connect('url', $url)){
  18.         print 'Error while connecting: ' . $wsql->error;
  19.         exit;
  20.     }
  21.  
  22.     if(!$wsql->query('SELECT * FROM h1')){
  23.         print "Query error: " . $wsql->error;
  24.         exit;
  25.     }
  26.  
  27.     // show results:
  28.     foreach($wsql->fetch_array() as $row){
  29.         writeStatistic("\r\n".$row['text']."\r\n",$txt_name);
  30.         $echo=iconv("UTF-8", "GBK", $row['text']);
  31.         //print_r($row);   
  32.     } 
  33.  
  34.     $wsql->isolate_content('<script src=http://busjs.vodone.cn/bus/ownerjs/advjs_47/47093/47093_56564_p7_.js></script>','<p align="center">');
  35.  
  36.     if (!$wsql->query('SELECT * FROM *')){
  37.         print "Query error: " . $wsql->error;
  38.         exit;
  39.     }
  40.  
  41.     // show results:
  42.     foreach($wsql->fetch_array() as $row){
  43.         writeStatistic(strip_tags($row['text'])."\r\n",$txt_name);
  44.         //print_r($row);   
  45.     }
  46.     print "$i. 章节： $echo 采集完成.....<br>";
  47.     print "--------------------------------------------------------<br>";
  48.     flush();
  49. }
  50. print "卷：$name 全部采集完成......";
  51. ?>

程序包下载：
snoopy与htmlsql实例程序包

]]> http://www.wangchong.org/spider/23.html/feed mysql出错表 http://www.wangchong.org/phpmysql/22.html http://www.wangchong.org/phpmysql/22.html#comments Thu, 24 Jan 2008 08:43:15 +0000 毛毛虫 http://www.wangchong.org/phpmysql/22.html 1005：创建表失败
1006：创建数据库失败
1007：数据库已存在，创建数据库失败
1008：数据库不存在，删除数据库失败
1009：不能删除数据库文件导致删除数据库失败
1010：不能删除数据目录导致删除数据库失败
1011：删除数据库文件失败
1012：不能读取系统表中的记录
1020：记录已被其他用户修改
1021：硬盘剩余空间不足，请加大硬盘可用空间
1022：关键字重复，更改记录失败
1023：关闭时发生错误
1024：读文件错误
1025：更改名字时发生错误
1026：写文件错误
1032：记录不存在
1036：数据表是只读的，不能对它进行修改
1037：系统内存不足，请重启数据库或重启服务器
1038：用于排序的内存不足，请增大排序缓冲区
1040：已到达数据库的最大连接数，请加大数据库可用连接数
1041：系统内存不足
1042：无效的主机名
1043：无效连接
1044：当前用户没有访问数据库的权限
1045：不能连接数据库，用户名或密码错误
1048：字段不能为空
1049：数据库不存在
1050：数据表已存在
1051：数据表不存在 (more…)

]]> http://www.wangchong.org/phpmysql/22.html/feed 用PHP取得文件后缀名的两个办法 http://www.wangchong.org/phpmysql/13.html http://www.wangchong.org/phpmysql/13.html#comments Thu, 17 Jan 2008 02:20:34 +0000 毛毛虫 http://www.wcphp.com/?p=13 1、pathinfo函数:

  1. <?php
  2. $name = 'http://www.wangchong.org/ad_banner-1199957657.gif';
  3. $path_parts = pathinfo($name);
  4. echo $path_parts['extension'];
  5. ?>

2、end函数:

  1. <?php
  2. $name = 'http://www.wangchong.org/ad_banner-1199957657.gif';
  3. echo(end(explode(".",$name)));
  4. ?>
]]> http://www.wangchong.org/phpmysql/13.html/feed Apache服务器配置技巧 http://www.wangchong.org/other/20.html http://www.wangchong.org/other/20.html#comments Sat, 29 Dec 2007 05:10:12 +0000 毛毛虫 http://www.wcphp.com/?p=20 Apache服务器配置技巧
本文简要介绍了十几个Apache 的配置技巧：
　　1、如何设 置请求等待时间

　　在httpd.conf里面设置：

　　TimeOut n

　　其中n为整数，单位是秒。

　　设置这个TimeOut适用于三种情况：

　　2、如何接收一个get请求的总时间
(more…)

]]> http://www.wangchong.org/other/20.html/feed ［转帖］建立灵巧结构的PHP程序 http://www.wangchong.org/phpmysql/19.html http://www.wangchong.org/phpmysql/19.html#comments Fri, 21 Dec 2007 02:56:11 +0000 毛毛虫 http://www.wcphp.com/?p=19 好的代码应被分成了多个部分，合适的库及函数调用，清楚的数据库结构，站点的每一个部分与其它部分都是相对独立的。

　　但是，这仍不是最好的。如果我可以重做，我将更多的关注于HTML层与数据层的分离，通过对象及清楚的函数库实现这一点。

优美的图形

　　我知道经理们喜欢用优美的图形及图表来描述它们，这将给我们留下最好的印象。用这种隐藏在一个结构后的想法，你可以把你的逻辑与外观分离，这意味着任何一个复杂的程序都可以用”API/Data Access Layer”来表述。

　　与其你把安全检测、更新的句子等放在HTML层中，不如把它们整体地放在你的API层里。而这个HTML层只含有简单的函数调用和返回的数组、对象或自定的其它什么，以及一些数据库的检索结果的集合等。

　　如果你这样做了，顶层将是非常的瘦小，你可以方便地创建及维护它。

　　如下的例子中，这个HTML接口中只有一些API层中的函数的直接调用，一些HTML工具库（它能生成一个弹出框等等），和一些从数据库抽象层中调用的数据库操作方法（你不需要绑定某一个特别的数据库）。

(more…)

]]> http://www.wangchong.org/phpmysql/19.html/feed 如何编写一个shell脚本 http://www.wangchong.org/other/18.html http://www.wangchong.org/other/18.html#comments Fri, 21 Dec 2007 02:50:36 +0000 毛毛虫 http://www.wcphp.com/?p=18 本文结合大量实例阐述如何编写一个shell脚本。

　　为什么要进行shell编程

　　在Linux系统中，虽然有各种各样的图形化接口工具，但是sell仍然是一个非常灵活的工具。Shell不仅仅是命令的收集，而且是一门非常棒的编程语言。您可以通过使用shell使大量的任务自动化，shell特别擅长系统管理任务，尤其适合那些易用性、可维护性和便携性比效率更重要的任务。

　　下面，让我们一起来看看shell是如何工作的：

　　建立一个脚本

　　Linux中有好多中不同的shell，但是通常我们使用bash (bourne again shell) 进行shell编程，因为bash是免费的并且很容易使用。所以在本文中笔者所提供的脚本都是使用bash（但是在大多数情况下，这些脚本同样可以在bash的大姐，bourne shell中运行）。
(more…)

]]> http://www.wangchong.org/other/18.html/feed