当前位置:  编程技术>php

PHP统计nginx访问日志中的搜索引擎抓取404链接页面路径

    来源: 互联网  发布时间:2014-08-26

    本文导语:  我在服务器上有每天切割nginx日志的习惯,所以针对每天各大搜索引擎来访,总能记录一些404页面信息,传统上我只是偶尔分析下日志,但是对于很多日志信息的朋友,人工来筛选可能不是一件容易的事情,这不我个人自己慢...

我在服务器上有每天切割nginx日志的习惯,所以针对每天各大搜索引擎来访,总能记录一些404页面信息,传统上我只是偶尔分析下日志,但是对于很多日志信息的朋友,人工来筛选可能不是一件容易的事情,这不我个人自己慢慢研究了一点点,针对谷歌、百度、搜搜、360搜索、宜搜、搜狗、必应等搜索引擎的404访问生成为一个txt文本文件,直接上代码test.php。

代码如下:


    
 
 

您可能感兴趣的文章:

  • PHP图片抓取脚本 EasyCapture
  • PHP curl实现抓取302跳转后页面的示例
  • php利用curl抓取新浪微博内容示例
  • php字符转码解决新浪抓取资料乱码的问题
  • PHP从给定网站抓取省市级城市数据
  • PHP采集类Snoopy抓取图片实例
  • php远程抓取网站图片并保存的代码
  • php使用curl和正则表达式抓取网页数据示例
  • PHP抓取、分析国内视频网站的视频信息工具类
  • 用C实现PHP扩展 Fetch_Url 类数据抓取的方法
  • php使用curl抓取qq空间的访客信息示例
  • php求两个目录的相对路径示例(php获取相对路径)
  • 图解找出PHP配置文件php.ini的路径的方法
  • 查找php配置文件php.ini所在路径的二种方法
  • 在PHP 里怎样在一个子文件夹里超连接到根目录下的INDEX.HTM文件,(连接路径是怎样的)
  • php中的路径问题与set_include_path使用介绍
  • PHP循环输出指定目录下的所有文件和文件夹路径例子(简单实用)
  • php 遍历指定路径下所有目录与文件(示例)
  • php获取文件夹路径内的图片以及分页显示示例
  • php上传图片之时间戳命名(保存路径)
  • php获取当前url路径 php服务器变量
  • php上传图片到指定位置路径保存到数据库的具体实现
  • windows的文件系统机制引发的PHP路径爆破问题分析
  •  
    本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
    本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • php 统计字数(支持中英文)的实现代码
  • 开源的统计应用程序 PHP Web Stat
  • php+memcache实现的网站在线人数统计代码
  • php数组函数之array_count_values() 统计数组中所有值出现的次数
  • PHP统计字符串中单词出现次数的函数
  • php统计时间和内存使用情况示例分享
  • PHP遍历目录并返回统计目录大小
  • PHP如何统计数组元素个数
  • php统计时间与内存使用情况
  • PHP+Memcache实现wordpress访问总数统计(非插件)
  • PHP 统计监控系统 workerman-satistics
  • php统计文章排行示例
  • php与shell大文件数据统计与排序方法
  • PHP折线图的示例代码 可以输出汉字的php折线统计图
  • C语言实现的统计php代码行数功能源码(支持文件夹、多目录)
  • php和jquery实现地图区域数据统计展示数据示例
  • php+highchats生成动态统计图
  • PHP Mysql与jQuery实现文件下载次数统计
  • PHP立体3D效果饼状统计图的生成代码
  • 修改配置真正解决php文件上传大小限制问题(nginx+php)
  • IIS7配置PHP图解(IIS7+PHP_5.2.17/PHP_5.3.5)
  • PHP 5.4.19 和 PHP 5.5.3 发布及下载地址
  • php输入流php://input使用示例(php发送图片流到服务器)
  • 修改配置真正解决php文件上传大小限制问题(apache+php)
  • PHP转换器 HipHop for PHP
  • PHP去除html标签,php标记及css样式代码参考
  • PHP 框架 Pop php
  • PHP 'ext/soap/php_xml.c'不完整修复存在多个任意文件泄露漏洞
  • PHP的JavaScript框架 PHP.JS
  • php通过socket_bind()设置IP地址代码示例
  • php服务器探针显示php服务器信息




  • 特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,,E-mail:www_#163.com(请将#改为@)

    浙ICP备11055608号-3