有兩種情況:第一種是對(duì)已經(jīng)收錄了的網(wǎng)頁使用robots屏蔽,老網(wǎng)頁按照robots規(guī)則的刪除時(shí)間會(huì)很長(zhǎng),可能會(huì)造成百度沒有遵循robots規(guī)則的感覺;第二種是如果被屏蔽的網(wǎng)頁獲得了大量的外鏈,那么這個(gè)網(wǎng)頁的內(nèi)容不會(huì)被百度索引,但是這個(gè)網(wǎng)頁的URL可能會(huì)被百度收錄,多見于域名首頁。比如淘寶網(wǎng),淘寶商城的大量賣家商城二級(jí)域名。如果連URL都不想被百度收錄,那么針對(duì)百度spider返回404就可以了。
上一條: 如何使我的網(wǎng)頁不被百度收錄?robots的生效時(shí)間?
下一條: 為什么站內(nèi)沒有鏈接的私密性網(wǎng)頁,或需要訪問權(quán)限的網(wǎng)頁,也會(huì)被百度收錄?
被robots屏蔽的網(wǎng)頁如果獲取了外鏈還會(huì)獲取權(quán)重嗎?-義烏市洲盾網(wǎng)絡(luò)..
百度支持哪些robots meat標(biāo)簽?禁止快照生效時(shí)間為多久?-義烏市洲盾網(wǎng)絡(luò)..
百度打擊義烏做網(wǎng)站TAG詞作弊,義烏做網(wǎng)站TAG詞是否就不能使用了呢?-義烏市洲盾網(wǎng)絡(luò)..
百度怎么看待一個(gè)網(wǎng)站占了一個(gè)搜索詞結(jié)果的多個(gè)位置?-義烏市洲盾網(wǎng)絡(luò)..
格式化數(shù)據(jù)微變,會(huì)不會(huì)被當(dāng)作重復(fù)頁?-義烏市洲盾網(wǎng)絡(luò)..