聯(lián)系官方銷售客服
1835022288
028-61286886
投訴
已解決 怎么樣屏蔽蜘蛛爬取一些頁面
4 0
蜘蛛監(jiān)控中很多這樣的頁面。
/index.php?s=news&c=comment&m=index&id=1807&&type=0&page=1&0.9999794062690222&callback=jQuery110009550518769024592_1646960477020&_=1646960477021
/index.php?s=news&c=comment&m=index&id=2978&&type=0&page=1&0.226611196182682&callback=jQuery110008022063669223576_1646960418323&_=1646960418324
請(qǐng)教下，怎么樣屏蔽蜘蛛爬取這個(gè)，或者關(guān)閉這個(gè)頁面。
https://robots.bmcx.com/
應(yīng)該是老大把字母打錯(cuò)了
http://www.robotstxt.org/robotstxt.html
這個(gè)就比較權(quán)威。
回復(fù)@周磊 感謝，只能這么辦了