IT貓撲網(wǎng):您身邊最放心的安全下載站! 最新更新|軟件分類(lèi)|軟件專(zhuān)題|手機(jī)版|論壇轉(zhuǎn)貼|軟件發(fā)布

您當(dāng)前所在位置: 首頁(yè)網(wǎng)絡(luò)編程PHP編程 → 如何使用PHP服務(wù)端代理抓取網(wǎng)頁(yè)內(nèi)容

如何使用PHP服務(wù)端代理抓取網(wǎng)頁(yè)內(nèi)容

時(shí)間:2015-06-28 00:00:00 來(lái)源:IT貓撲網(wǎng) 作者:網(wǎng)管聯(lián)盟 我要評(píng)論(0)

最近公司暫時(shí)斷開(kāi)外網(wǎng),只開(kāi)放公司自己所有的站點(diǎn)允許訪問(wèn),說(shuō)實(shí)在的,做WEB開(kāi)發(fā)的斷網(wǎng),真是讓人哭笑不得......

由于需要查找資料,只好簡(jiǎn)單寫(xiě)了一個(gè)PHP的服務(wù)端代理頁(yè)面來(lái)用一下!

簡(jiǎn)單框架頁(yè)面:

以下為引用的內(nèi)容:
















PHP代理頁(yè)面:

      以下為引用的內(nèi)容:

      //使用Snoopy的抓頁(yè)功能
      include "Snoopy.class.php";
      //目標(biāo)URL
      $url = $_REQUEST['targeturl'];
      //將所有傳遞過(guò)來(lái)的參數(shù)列出來(lái)
      $par = array();
      $GetPost = array_merge($_POST,$_GET);
      foreach($GetPost As $Key=>$Value){
      ?if($Key!='targeturl'){
      ? $Value = str_replace("%25","%",$Value);
      ? array_push($par,($Key . "=" . $Value));
      ?}
      }
      //判斷目標(biāo)URL是否帶有?(即是否帶有參數(shù))
      $cc = strpos($url,"?") ? "&" : "?";
      //重組URL
      $geturl = !$par ? $url : $url.$cc.implode("&",$par);
      //抓取重組后的URL頁(yè)面內(nèi)容
      $snoopy = new Snoopy;
      $snoopy->fetch($geturl);
      //替換目標(biāo)內(nèi)容中腳本里有可能替換父窗口地址的代碼
      $org = str_replace("top.location","top.title",$snoopy->results);
      //嘗試轉(zhuǎn)換目標(biāo)內(nèi)容編碼到UTF-8
      $opt = iconv("gbk","utf-8",$org);
      //判斷目標(biāo)內(nèi)容編碼為GBK或UTF-8
      $ec = strlen($opt)?"gbk":"utf-8";

      ?>

      相關(guān)閱讀

      文章評(píng)論
      發(fā)表評(píng)論

      熱門(mén)文章 plsql developer怎么連接數(shù)據(jù)庫(kù)-plsql developer連接數(shù)據(jù)庫(kù)方法 plsql developer怎么連接數(shù)據(jù)庫(kù)-plsql developer連接數(shù)據(jù)庫(kù)方法 2021年最好用的10款php開(kāi)發(fā)工具推薦 2021年最好用的10款php開(kāi)發(fā)工具推薦 php利用淘寶IP庫(kù)獲取用戶ip地理位置 php利用淘寶IP庫(kù)獲取用戶ip地理位置 在 PHP 中使用命令行工具 在 PHP 中使用命令行工具

      相關(guān)下載

      人氣排行 詳解ucenter原理及第三方應(yīng)用程序整合思路、方法 plsql developer怎么連接數(shù)據(jù)庫(kù)-plsql developer連接數(shù)據(jù)庫(kù)方法 PHP中防止SQL注入攻擊 PHP會(huì)話Session的具體使用方法解析 PHP運(yùn)行出現(xiàn)Notice : Use of undefined constant 的解決辦法 PHP如何清空mySQL數(shù)據(jù)庫(kù) CakePHP程序員必須知道的21條技巧 PHP采集圖片實(shí)例(PHP采集)