百度蜘蛛升級HTTPS抓取,如何讓蜘蛛不斷抓取你的網(wǎng)站?

3932次閱讀

HTTPS中文譯為安全超文本傳輸協(xié)議,是以安全為目標(biāo)的HTTP通道,簡單講是HTTP的安全版。百度升級了對HTTPS數(shù)據(jù)的抓取力度,以后HTTPS數(shù)據(jù)將更快被蜘蛛抓取到。

 

有站長問,百度已經(jīng)抓了我的HTTPS頁面了,搜索結(jié)果還替換成了HTTP鏈接,我該怎么辦?

1、一般24小時內(nèi),線上可以實現(xiàn)HTTPS到HTTP的退回效果。

2、設(shè)置HTTPS的抓取返回失敗碼,或者做HTTPS到HTTP的301&302。

3、短期內(nèi)不打算開放HTTPS的站點,可以直接關(guān)閉443端口。

4、使用鏈接提交工具,把HTTP頁面提交,便于百度更快識別頁面。

 

如何讓百度蜘蛛不斷抓取你的網(wǎng)站

1、網(wǎng)站沒有死鏈接

如果你的網(wǎng)站有很多死鏈接,那么你的網(wǎng)站是很難優(yōu)化上去的。

網(wǎng)站過多的死鏈接非常影響蜘蛛的抓取和搜索引擎對網(wǎng)站權(quán)重排名的評估,也增大了網(wǎng)站服務(wù)器的負(fù)擔(dān),所以要經(jīng)常檢查網(wǎng)站日志是否出現(xiàn)404頁面等,讓蜘蛛在自己網(wǎng)站上暢行無阻。

2、高質(zhì)量的內(nèi)容

高質(zhì)量的內(nèi)容可以吸引蜘蛛經(jīng)常來你的網(wǎng)站,如果你的網(wǎng)站是純采集的,會增加蜘蛛抓取的工作量,從而降低蜘蛛對你網(wǎng)站的敏感性,寧愿更新少的高質(zhì)量內(nèi)容,不要采集或者更新垃圾內(nèi)容。

3、網(wǎng)站代碼簡化

代碼應(yīng)盡可能簡化,最好選擇只屬于你的開源程序。

這是因為有的網(wǎng)站代碼相似度極高,導(dǎo)致蜘蛛不愛爬取,獨特的程序代碼在同類型的網(wǎng)站更占據(jù)有優(yōu)勢。

4、外鏈資源

外鏈和友情鏈接是吸引蜘蛛來抓取我們的網(wǎng)站的非常大的流量入口。

站長可以到各大博客、論壇等平臺發(fā)布自己的高質(zhì)量外鏈,留下鏈接引導(dǎo)蜘蛛進(jìn)入你的網(wǎng)站。

5、按照時間段更新內(nèi)容

時間段意思是更新網(wǎng)站內(nèi)容時間要一致,例如你每天11.30分更新網(wǎng)站內(nèi)容,那么蜘蛛每天會在11.30分會來爬行抓取你的網(wǎng)站。

 

如網(wǎng)站還在做HTTPS的改造,且網(wǎng)站數(shù)據(jù)未搭建好,建議網(wǎng)站采取以下措施,避免蜘蛛抓取,以免造成網(wǎng)站流量損失。

1、針對一個服務(wù)器下有多個域名的情況,建議未做HTTPS的網(wǎng)站,設(shè)置HTTPS抓取返回失敗碼,或?qū)TTPS站點301/302到HTTP,避免抓取出現(xiàn)問題。

2、做HTTPS到HTTP的301、302。

3、把HTTPS的協(xié)議封掉,可把443端口關(guān)掉。

4、建議站點在改HTTPS沒改造好之前,不要提供超鏈接指向。


閱讀本文的人還可以閱讀:

如何提高網(wǎng)站的權(quán)重?提高網(wǎng)站權(quán)重的10個方法 

做網(wǎng)站該注意哪些基本要素? 

404頁面該怎么做?

日志中的HTTP狀態(tài)碼都代表什么? 

本文由夫唯SEO特訓(xùn)營編輯整理。

搜外專注SEO培訓(xùn)和SEO周邊Saas服務(wù)解決方案,10年來超過五萬學(xué)員在此獲得技術(shù)提升和人脈圈子。

SEO課程包含移動搜索、零基礎(chǔ)建站、群站SEO思維、搜外6系統(tǒng)、SEM入門等。

192期A班報名時間7月1日-7月15日,請?zhí)砑诱猩头∧⑿牛簊eowhy2021。 微信掃碼添加客服人員

我們的目標(biāo)是:讓非技術(shù)人員輕松學(xué)會互聯(lián)網(wǎng)技術(shù)。

  • 搜外會員SEO交流群(免費)

    微信掃碼添加客服人員
  • 小程序運(yùn)營交流群(免費)

    微信掃碼添加客服人員
  • 搜外會員SEM競價交流群(免費)

    微信掃碼添加客服人員
  • 夫唯學(xué)員SEO交流群(VIP)

    微信掃碼添加客服人員

掃碼獲取資源

微信掃碼添加客服人員
  • SEO技術(shù)實戰(zhàn)微信群

    微信掃碼添加客服人員
  • 大站流量總監(jiān)群(審核身份)

    微信掃碼添加客服人員
  • Google獨立站英文SEO群

    微信掃碼添加客服人員
  • SEO團(tuán)隊KPI管理表格

    微信掃碼添加客服人員
  • 工業(yè)品網(wǎng)站友情鏈接群

    微信掃碼添加客服人員
  • 本地生活服務(wù)業(yè)友鏈群

    微信掃碼添加客服人員

跟夫唯老師系統(tǒng)學(xué)習(xí)群站SEO
成為互聯(lián)網(wǎng)運(yùn)營推廣大咖

掌握SEO技巧、建站前端、群站霸屏、SEM入門、新聞源推廣……
Processed in 0.165862 Second , 47 querys.