聯(lián)系官方銷售客服
1835022288
028-61286886
投訴
已解決 怎么設(shè)置有些欄目不希望被蜘蛛抓取
9 0
有些欄目不希望被蜘蛛抓取，怎么設(shè)置才能顯示為不可點擊
有沒有什么解決辦法，
還有友情鏈接模塊也生成出來的，蜘蛛全都抓取了友情鏈接
很頭疼
蜘蛛txt文件控制
回復(fù)@湖邊小伙 這個只是一種權(quán)宜之計，但是希望還是不要直接被抓取，不要顯示，感覺怪怪的
通過 robots.txt文件設(shè)置 Disallow:這里是不希望被蜘蛛抓取的目錄
如果不知道怎么設(shè)置，可以通過網(wǎng)站https://tool.chinaz.com/robots?qq-pf-to=pcqq.group生成后放到網(wǎng)站根目錄
回復(fù)@開心果 這個方法我知道，我的意思是怎么能讓這些鏈接不出現(xiàn)在文件里面
安裝官方的sitemap工具。
然后寫對應(yīng)的sql屏蔽欄目id
比如：
就是屏蔽欄目id為8