我的網(wǎng)站顯示的蜘蛛抓取,有好多動態(tài)鏈接是否有影響?是否需要處理。該如何處理?
如果不是自己網(wǎng)站本身實際存在的url,很可能是網(wǎng)站由于被人刷,導(dǎo)致的。
對應(yīng)這些動態(tài)鏈接,可以在robots文件中,寫一個屏蔽抓取動態(tài)鏈接的語法。
User-agent: * Disallow: /*?*
更詳細的robots設(shè)置方法,可以看下面鏈接課程
我的網(wǎng)站顯示的蜘蛛抓取,有好多動態(tài)鏈接是否有影響?是否需要處理。該如何處理?
如果不是自己網(wǎng)站本身實際存在的url,很可能是網(wǎng)站由于被人刷,導(dǎo)致的。
對應(yīng)這些動態(tài)鏈接,可以在robots文件中,寫一個屏蔽抓取動態(tài)鏈接的語法。
User-agent: * Disallow: /*?*
更詳細的robots設(shè)置方法,可以看下面鏈接課程
本文由夫唯團隊編輯,如發(fā)現(xiàn)錯誤,歡迎通過客服微信反饋。
夫唯于2024年12月停止百度SEO研究和培訓。道別信: 夫唯:再見了百度SEO!
2025年1月正式啟動Google SEO培訓課程,一千零一夜帶領(lǐng)大家一起出海。
感興趣的同學,請?zhí)砑诱猩头∧⑿牛簊eowhy2021。 微信掃碼添加客服人員
我們的目標:讓大家獨立站出海不再“望洋興嘆”。