php判断是爬虫在访问还是用户浏览器在访问

1月以前  |  阅读数:10 次  |     收藏

其中用到了,区分是浏览器还是网络爬虫访问的功能,主要实现代码如下:

主要就是判断$_SERVER['HttP_USEr_AGENT'];里面的内容有没有爬虫的标志

function isCrawler()
{
  $userAgent = strtolower($_SERVER['HTTP_USER_AGENT']);
  $spiders   = array(
  'Googlebot', // Google 爬虫
  'Baiduspider', // 百度爬虫
  'Yahoo! Slurp', // 雅虎爬虫
  'YodaoBot', // 有道爬虫
  'msnbot' // Bing爬虫
  // 更多爬虫关键字
);
foreach($spiders as $spider)
{
  $spider = strtolower($spider);
    //查找有没有出现过
    if(strpos($userAgent, $spider) !== false){
        return $spider;
    }
}

相关文章:


SSH 登录失败:Host key verification failed

PHP分页显示制作详细讲解

PHP自定义函数获取搜索引擎来源关键字的方法

在Zeus Web Server中安装PHP语言支持

再谈PHP中单双引号的区别详解

让你成为最历害的git提交人

将二进制数据转为16进制以便显示

php+ajax+json 详解及实例代码

PHP实现简单爬虫的方法

Python 2与Python 3版本和编码的对比

php实现数组中索引关联数据转换成json对象的方法

桌面中心(一)创建数据库

PHP设计模式之工厂模式与单例模式

php数组合并array_merge()函数使用注意事项

php封装的page分页类完整实例

wget使用技巧

getAttribute和getAttributeNode

获取IMSI

Yii2汉字转拼音类的实例代码

python中执行shell的两种方法总结