2018-06-24 22:52
怎么屏蔽百度已收錄的不必要二級(jí)目錄
前些日子碰到一個(gè)冤家他問(wèn)了我一個(gè)成績(jī):咱們的網(wǎng)站只收錄abc.XXX.com,的二級(jí)目次類(lèi)域名,不收錄www.xxx.com的怎么辦?我看到這個(gè)成績(jī)時(shí)分我過(guò)后下意識(shí)的說(shuō)了句robots屏障就好了,而后我更具他們各個(gè)二級(jí)站點(diǎn)比方寫(xiě)了一個(gè)robots文件發(fā)給她如下:
User-agent: *
Disallow: /abc/
然而緊接著方法都被逐個(gè)保持了,由于通通行不通.由于他們的網(wǎng)站一切二級(jí)目次以及主目次在ftp中都是在一致文件夾下,而后我又總結(jié)了他們網(wǎng)站呈現(xiàn)的成績(jī).
1.網(wǎng)站不帶www的二級(jí)域名曾經(jīng)收錄過(guò)萬(wàn),且逐日都有蜘蛛爬取,但帶www的主域名至今只收錄二三十個(gè),且另有降落的趨向,以是想讓網(wǎng)站收錄帶www的主域名頁(yè)面.
2.網(wǎng)站一切頁(yè)面在一致個(gè)文件夾下無(wú)奈應(yīng)用robots屏障門(mén)路形式屏障頁(yè)面.
盡管我在baidu查問(wèn)了很久然而卻并未查到過(guò)量有效信息,大多都是以及我第一次給出的謎底同樣,但最初咱們?nèi)允窍氤隽朔椒ㄌ幚砹诉@個(gè)成績(jī),那關(guān)于屏障二級(jí)目次收錄成績(jī),總結(jié)了如下幾點(diǎn)可供抉擇.
1.假如需求屏障的頁(yè)面以及主頁(yè)面是在分歧的文件夾下咱們能夠間接采納我上面提到的間接robots文件屏障,寫(xiě)法比方Disallow: /abc/之類(lèi)的間接robots屏障方法.
2.無(wú)奈應(yīng)用robots制止搜索引擎收錄某個(gè)二級(jí)域名的,最佳的方法便是301,關(guān)于有效的頁(yè)面將一切的二級(jí)目次類(lèi)域名重定向,無(wú)用的就間接刪除.
3.法,將而與目次調(diào)配到分歧的空間下應(yīng)用robots屏障.
4.個(gè)判別順序,讓要屏障的二級(jí)域名上面有一個(gè)robots.txt文件.abc.xxx.com/robots.txt,而后在應(yīng)用robots屏障.此方法我沒(méi)有試過(guò)我是看到夫唯教師很久前給他人的一個(gè)倡議,就實(shí)踐而言是能夠行的通的.
我們珍惜您每一次在線詢盤(pán),有問(wèn)必答,用專(zhuān)業(yè)的態(tài)度,貼心的服務(wù)。
讓您真正感受到我們的與眾不同!