因為**近蜘蛛爬取我的站很奇怪，在 /uploads/allimg/爬取總是一堆404.html

如：/ uploads/ allimg/ 120818/ 404.html

類似上面這種的，爬取很多，我的404也做過了，但是這個目錄下就是不轉到我設置好的404頁面

然后我考慮想把 /uploads/allimg/禁止蜘蛛爬取，請問對整站會有什么影響嗎？網站程序是DEDE

打醬油的求你別來了，總是回答一句莫名其妙的這是什么，亂七八糟的，讓人很煩
答：
這個目錄是用來存放圖片的么？如果是的話就屏蔽了吧，考慮一下這個目錄下面的東西給你帶來了實際流量沒有，如果沒有就屏蔽了吧。
1本身你的這個目錄下面很多頁面不存在對吧。

或者是你該目錄下面存在很多名稱為404頁面的正常頁面。

如果該類型文件很多不要記著屏蔽。如果該頁面是無關緊要頁面。可以屏蔽掉。
 
相關新聞：安平關進404頁面robots禁止蜘蛛爬取的問題？
冀州區關進404頁面robots禁止蜘蛛爬取的問題？
深州關進404頁面robots禁止蜘蛛爬取的問題？
棗強關進404頁面robots禁止蜘蛛爬取的問題？
武邑關進404頁面robots禁止蜘蛛爬取的問題？
武強關進404頁面robots禁止蜘蛛爬取的問題？
饒陽關進404頁面robots禁止蜘蛛爬取的問題？
景縣關進404頁面robots禁止蜘蛛爬取的問題？
故城關進404頁面robots禁止蜘蛛爬取的問題？
阜城關進404頁面robots禁止蜘蛛爬取的問題？
我們可為您提供如下網絡服務： 外貿網站建設 營銷型網站建設 百度愛采購 阿里淘寶裝修 支付接口對接 程序開發 網站維護