php记录搜索引擎爬行记录的实现代码
发布:smiling 来源: PHP粉丝网 添加日期:2018-06-06 10:13:03 浏览: 评论:0
下面是完整代码:
- //记录搜索引擎爬行记录 $searchbot = get_naps_bot();
- if ($searchbot)
- { $tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
- $url = $_SERVER['HTTP_REFERER'];
- $file = WEB_PATH.'robotslogs.txt';
- $date = date('Y-m-d H:i:s');
- $data = fopen($file,'a'); //phpfensi.com
- fwrite($data,"Time:$date robot:$searchbot URL:$tlc_thispage/r/n");
- fclose($data);
- }
WEB_PATH为index.PHP下define的根目录路径,意思就是说robotslogs.txt文件是放在根目录下的。
通过get_naps_bot()获取蜘蛛爬行记录,然后在通过addslashes处理一下,将数据存储于变量$tlc_thispage中。
fopen打开robotslogs.txt文件,将数据通过函数fwrite写入,在通过函数fclose关闭就可以了。
因为我觉得没必要,所以把自己网站上的代码删除了,所以也没有效果示例了。
PS:php获取各搜索蜘蛛爬行记录的代码
支持如下的搜索引擎:Baidu,Google,Bing,Yahoo,Soso,Sogou,Yodao爬行网站的记录,代码:
- <?php
- /**
- * 获取搜索引擎爬行记录
- * edit by www.phpfensi.com
- */
- function get_naps_bot()
- {
- $useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
- if (strpos($useragent, 'googlebot') !== false){
- return 'Google';
- }
- if (strpos($useragent, 'baiduspider') !== false){
- return 'Baidu';
- }
- if (strpos($useragent, 'msnbot') !== false){
- return 'Bing';
- }
- if (strpos($useragent, 'slurp') !== false){
- return 'Yahoo';
- }
- if (strpos($useragent, 'sosospider') !== false){
- return 'Soso';
- }
- if (strpos($useragent, 'sogou spider') !== false){
- return 'Sogou';
- }
- if (strpos($useragent, 'yodaobot') !== false){
- return 'Yodao';
- }
- return false;
- }
- function nowtime(){
- $date=date("Y-m-d.G:i:s");
- return $date;
- }
- $searchbot = get_naps_bot();
- if ($searchbot) {
- $tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
- $url=$_SERVER['HTTP_REFERER'];
- $file="www.phpfensi.com.txt";
- $time=nowtime();
- $data=fopen($file,"a");
- fwrite($data,"Time:$time robot:$searchbot URL:$tlc_thispage\n");
- fclose($data);
- }
- ?>
Tags: 代码 搜索引擎
相关文章
- ·PHP代码优化及PHP相关问题总结(2013-11-27)
- ·一段防盗链的PHP代码(2013-12-08)
- ·php 上一篇与下一篇文章代码(2013-12-11)
- ·php 用户注册实例代码,适合初学者(2013-12-11)
- ·php无限分类代码与原理(2013-12-23)
- ·把php代码保存到php文件实现方法(2013-12-27)
- ·php防盗链几种代码(2014-01-03)
- ·php无限分类可支持输出树状图实现代码(2014-01-03)
- ·php中生成短网址实现程序代码(2014-01-06)
- ·PHP代码实现301跳转页面实例(2014-01-11)
- ·php发送邮件代码(2014-01-21)
- ·php邮箱发送类代码(2014-01-22)
- ·使用PHPMailer发送邮件实例代码总结(2014-01-25)
- ·php 获取checkbox表单取值程序代码(2014-03-05)
- ·php 页面跳转实现程序代码(2014-03-18)
- ·php 替换字符串中第N次出现的字符代码(2014-03-19)
推荐文章
热门文章
最新评论文章
- 写给考虑创业的年轻程序员(10)
- PHP新手上路(一)(7)
- 惹恼程序员的十件事(5)
- PHP邮件发送例子,已测试成功(5)
- 致初学者:PHP比ASP优秀的七个理由(4)
- PHP会被淘汰吗?(4)
- PHP新手上路(四)(4)
- 如何去学习PHP?(2)
- 简单入门级php分页代码(2)
- php中邮箱email 电话等格式的验证(2)