a一级毛片-a一级毛片录像带 录像片-a一级毛片免费高清在线-a一级毛片视频免费看-欧美精品在线视频观看-欧美精品自拍

robots里這樣寫,就能避免蜘蛛爬這個“index.htm”這個首頁?

robots這樣寫是不是就能避免蜘蛛爬這個“index.htm”這個首頁?

User-agent: *
Disallow: /index.htm


11-30.

我的index.htm是現(xiàn)在默認的首頁,想屏蔽蜘蛛抓取。讓蜘蛛爬另一個文檔,主要是規(guī)避備案巡查

我的網(wǎng)站和我備案的不一樣,服務器那邊要求改,我就整了個htm文檔來規(guī)避下。

寫法沒有問題。但正常的不建議屏蔽首頁地址,,“index.htm”這個后綴地址是需要處理掉的。

當然,如果只是應付備案短暫需求,,就只能這樣處理。

后續(xù)備案處理后,盡快處理后綴“index.htm”。同時robots修改回去。


robots設置方法視頻


這里的每個問題都曾卡住某一位同學很長時間,我們整理出來方便更多同學,如發(fā)現(xiàn)Bug,歡迎通過客服微信反饋。

夫唯于2024年12月停止百度SEO研究和培訓。道別信: 夫唯:再見了百度SEO!

2025年1月正式啟動Google SEO培訓課程,一千零一夜帶領大家一起出海。

感興趣的同學,請?zhí)砑诱猩头∧⑿牛簊eowhy2021。 微信掃碼添加客服人員

Processed in 0.133571 Second , 37 querys.