聯(lián)系官方銷售客服
1835022288
028-61286886
投訴
解決中 / 官方已回 蜘蛛抓取全是找不到頁面
8 0
| 插件名稱 | 蜘蛛爬行監(jiān)控 V2.15 |
| 插件作者 | 迅睿官方團(tuán)隊(duì) |
| 最近更新 | 2024-12-13 19:49:47 |
| 日志記錄中加入ip字段 當(dāng)存在PhpOffice類時支持將日志列表導(dǎo)出excel |
請問這個是怎么回事，這些URL是后臺文件地址嗎？ 為什么打不開，更新了系統(tǒng)配置和緩存，蜘蛛一抓就遇到錯誤 我其他頁面都不抓了，動態(tài)地址 我robots禁止過 蜘蛛還是會爬
這個插件是記錄蜘蛛的抓取日志。他不能控制蜘蛛抓取哪個不能抓哪個，這個是控制不了的。這個插件只是記錄單純的記錄蜘蛛的抓取頁面，記錄蜘蛛抓取了你的網(wǎng)站哪些頁面
無法控制不讓他抓哪個
請問這個是不是蜘蛛來網(wǎng)站--訪問首頁--遇到錯誤--網(wǎng)站重定向--又訪問首頁--又遇到錯誤--又重定向--又訪問首頁，最后就走了，
我根目錄沒有這些文件，很多都是調(diào)用字段、模版等，其他頁面都沒有蜘蛛爬
網(wǎng)站系統(tǒng)日志也沒有顯示錯誤的，該怎么辦