文章目录
1插件功能1.1蜘蛛简介1.2蜘蛛日志1.3蜘蛛列表1.4访问路径1.5热门文章1.6插件设置
刚建好网站的小伙伴们特别在意蜘蛛的抓取频率，至少我是。我每天都要查看网站日志，看看蜘蛛来了多少次。如果你想提高网站的包容性，抓取是前提。百度搜索资源平台虽然也可以查看，但是只能第二天更新，有时候几天都不更新一次。可以通过工具分析网站日志。杨凡以前分享过，但是每次下载日志文件还是很麻烦。今天分享一个WordPress插件，SpiderAnalyst。
Spider Analyser用于跟踪WordPress网站各搜索引擎的蜘蛛抓取日志，进行详细的蜘蛛抓取数据统计、蜘蛛行为分析、蜘蛛抓取分析和伪蜘蛛拦截等。
插件蜘蛛概述
支持查看各大搜索引擎蜘蛛访问网站的每日数据；
今天的蜘蛛——方便站长快速知道当天、昨天、30天的平均访问蜘蛛数、抓取网址数、抓取网址数。趋势图——支持按今天、昨天、最近7天、最近30天查看蜘蛛数、抓取网址总数、抓取网址平均数的趋势折线图，查看上一周期的数据进行对比分析。Top10蜘蛛——支持按照今天、昨天、最近7天、最近30天查看Top10蜘蛛抓取网址的数量和比例。Top10蜘蛛抓取网址——支持按今天、昨天、最近7天、最近30天查看Top10蜘蛛抓取网址的抓取次数和比例，方便站长分析热门蜘蛛抓取网页的网址。蜘蛛日志
支持按今天、最近7天、最近30天查看蜘蛛日志，包括蜘蛛访问时间、状态码、访问链接、蜘蛛IP、蜘蛛名称等参数。并支持按蜘蛛名称、状态码、时间过滤日志；并通过访问URL和蜘蛛IP搜索蜘蛛日志。
蜘蛛列表
ge">蜘蛛列表包含蜘蛛列表、蜘蛛IP段及蜘蛛拦截三部分的功能，其中：
蜘蛛列表-列表包括蜘蛛名称、蜘蛛类型、蜘蛛地址、最近来访时间、爬取URLs及占比情况等数据，支持按蜘蛛名称、蜘蛛类型及时间段筛选查询；并且支持忽略或者拦截指定蜘蛛。蜘蛛IP段-在该列表可以查看不同蜘蛛对应IP段及其占比情况，支持按蜘蛛名、时间进行筛选查询；且支持按蜘蛛名称及蜘蛛IP段进行拦截。蜘蛛拦截-插件能够对日常访问蜘蛛IP进行识别判断，列出疑似伪蜘蛛，以便于站长对其进行拦截。在该功能模块，站长可以增加蜘蛛及IP拦截，也可以移除拦截等管理操作。访问路径
支持按今天、最近7天及最近30天查看蜘蛛访问路径（爬取页面URL）具体信息列表，包括URL、URL类型、爬取次数及占比情况等数据。并且支持按蜘蛛名称、类型、状态、时间、访问URL及蜘蛛IP进行筛选查询。
热门文章
此功能模块是为了方便站长按蜘蛛名称、不同状态的文章类型及时间，快速了解网站文章蜘蛛访问量、出链数及入链数。站长再根据这几个指标，对文章进行内链布局处理，提升蜘蛛爬取频率，从而提升网站收录量。
插件设置日志保留-支持设置插件日志保留时间周期（最近30天、最近3个月、最近6个月、最近1年或永久），及一键删除已存在的日志。蜘蛛列表管理-支持新增自定义蜘蛛，以记录遗留的蜘蛛日志数据；并支持自定义蜘蛛类型及设置蜘蛛记录状态。链接自定义-允许通过设置链接规则来区分蜘蛛爬取URL链接类型，支持添加自定义或者修改新增现有链接类型的规则。
插件是昨天安装的，体验还不错，有部分功能是收费的，免费版可以满足基本的使用，但是如果想要更加精细的分析蜘蛛抓取路径，需要使用付费版，统计蜘蛛ip，然后在这里输入蜘蛛ip，查询单个蜘蛛的访问路径，给以后的网站优化提供方向。
插件下载：https://wordpress.org/plugins/spider-analyser/
