迅睿CMS框架是一款PHP8高性能·簡(jiǎn)單易用的CMS開(kāi)源開(kāi)發(fā)框架,基于MIT開(kāi)源許可協(xié)議發(fā)布,免費(fèi)且不限制商業(yè)使用,是免費(fèi)開(kāi)源的產(chǎn)品,以萬(wàn)端互聯(lián)為設(shè)計(jì)理念,支持的微信公眾號(hào)、小程序、APP客戶(hù)端、移動(dòng)端網(wǎng)站、PC網(wǎng)站等多終端式管理系統(tǒng)。
聯(lián)系官方銷(xiāo)售客服
1835022288
028-61286886
/index.php?s=api&c=module&siteid=1&app=news&m=hits&id=238 這種地址 是禁止搜索引擎抓取的 請(qǐng)問(wèn) 這個(gè)抓取是在哪個(gè)文件里面改??!我想變通改一下 禁止他還抓一些其他頁(yè)面! 如廣告頁(yè) 如 css等
告訴網(wǎng)絡(luò)搜索引擎的漫游器(又稱(chēng)網(wǎng)絡(luò)蜘蛛),此網(wǎng)站中的哪些內(nèi)容是不應(yīng)被搜索引擎蜘蛛獲取的,...
如果不會(huì)寫(xiě),可以考慮使用插件
robots.txt文件中添加禁止:
User-agent: * Disallow: /index.php
禁止抓取index.php文件
Disallow: /index.php*
禁止抓取以index.php開(kāi)頭的所有鏈接
Disallow: /index.php*禁止抓取這個(gè)的文件,但是這個(gè)只是禁止,你訪問(wèn)還是可以訪問(wèn)的
Robots爬蟲(chóng)協(xié)議生成器
告訴網(wǎng)絡(luò)搜索引擎的漫游器(又稱(chēng)網(wǎng)絡(luò)蜘蛛),此網(wǎng)站中的哪些內(nèi)容是不應(yīng)被搜索引擎蜘蛛獲取的,...
如果不會(huì)寫(xiě),可以考慮使用插件
robots.txt文件中添加禁止:
禁止抓取index.php文件
禁止抓取以index.php開(kāi)頭的所有鏈接