新聞資訊
聯(lián)科科技22年專(zhuān)注于全媒體數(shù)字門(mén)戶(hù)系統(tǒng)、門(mén)戶(hù)網(wǎng)站內(nèi)容管理平臺(tái)、集約化醫(yī)院站群管理系統(tǒng)開(kāi)發(fā)、
醫(yī)院門(mén)戶(hù)網(wǎng)站建設(shè)、小程序開(kāi)發(fā)!
站點(diǎn)流量異常原因之運(yùn)維篇
站點(diǎn)流量異常是什么概念,即來(lái)自百度搜索的流量突然間降了50%以上,且是持續(xù)性的,即已經(jīng)連續(xù)四至五天流量沒(méi)有明顯漲幅變化。如下圖所示:
如果出現(xiàn)上述現(xiàn)象,那么一般是建議大家從運(yùn)維角度、頁(yè)面特征,以及相關(guān)因素來(lái)判斷原因。今天我們主要講運(yùn)維。
1、CDN
一些網(wǎng)站會(huì)使用CDN加速服務(wù),最近每周站長(zhǎng)平臺(tái)都會(huì)接到一兩個(gè)跟CDN加速問(wèn)題有關(guān)的案例。CDN這里存在一個(gè)問(wèn)題:不同的CDN服務(wù)商在全國(guó)分布的節(jié)點(diǎn)數(shù)不同,站點(diǎn)在使用CDN服務(wù)時(shí),同一地區(qū)CDN給蜘蛛返回的IP地址要和給用戶(hù)的一致。
那么現(xiàn)實(shí)情況是,部分CDN服務(wù)商出于成本考慮與資源使用率的問(wèn)題,會(huì)在不告知用戶(hù)的情況下變更IP地址以節(jié)約成本,這樣就導(dǎo)致蜘蛛在去抓的時(shí)候,會(huì)遇到新IP和老IP的問(wèn)題,在站點(diǎn)沒(méi)有告知更換IP的情況下,蜘蛛會(huì)認(rèn)為站點(diǎn)目前存在問(wèn)題,首先是減少抓取量,其次會(huì)判斷是否把不可訪(fǎng)問(wèn)的頁(yè)面下掉,這時(shí)候就出現(xiàn)了用戶(hù)訪(fǎng)問(wèn)IP與蜘蛛抓取IP不一致的情況。
所以建議站點(diǎn)在選擇CDN服務(wù)時(shí)要選擇穩(wěn)定的CDN服務(wù)商,其次如果IP更換最好通過(guò)站長(zhǎng)平臺(tái)抓取診斷工具抓取測(cè)試,如果IP不正確可以點(diǎn)擊下圖紅框“報(bào)錯(cuò)”提示給站長(zhǎng)平臺(tái)。
2、Robots
站長(zhǎng)應(yīng)該對(duì)robots都不陌生,但為什么還要提呢?有這樣一種情況:站點(diǎn)需要更新robots文件,對(duì)站內(nèi)部分內(nèi)容禁止或放開(kāi)抓取。但由于操作后沒(méi)有檢查是否生效,站長(zhǎng)會(huì)默認(rèn)為已經(jīng)生效。同時(shí)還有一個(gè)生效周期的問(wèn)題,那么站點(diǎn)需要在百度站長(zhǎng)平臺(tái)提供的robots檢測(cè)工具中做一個(gè)抓取測(cè)試來(lái)驗(yàn)證是否生效。
如果看到robots內(nèi)容和你更改后的內(nèi)容不一致,有幾種可能:第一種可能是網(wǎng)站沒(méi)有全面布局,因?yàn)橛械恼军c(diǎn)服務(wù)器可能在很多地方,你需要確認(rèn)robots是否已全部推送;第二種可能是百度沒(méi)有及時(shí)做更新,可以通過(guò)robots檢測(cè)工具下方的更新按鈕來(lái)告訴百度Robots有變化。
3、UA/IP
UA封禁一般不會(huì)是站點(diǎn)主觀錯(cuò)誤操作,往往是意外情況,站點(diǎn)在程序中過(guò)濾誤操作UA封禁,而通常卻不知道自己封禁了蜘蛛。只有在逐步的排查才會(huì)發(fā)現(xiàn)這種概率很小的問(wèn)題。所以在流量異常中我們?cè)谶\(yùn)維篇中把這項(xiàng)列進(jìn)去,讓站點(diǎn)注意這些個(gè)細(xì)節(jié)。
那么當(dāng)您的網(wǎng)站不希望Baiduspider訪(fǎng)問(wèn)時(shí),才需要該設(shè)置,如果您希望Baiduspider訪(fǎng)問(wèn)您的網(wǎng)站,useragent相關(guān)的設(shè)置中是否有Baiduspider UA,并及時(shí)修改。禁止所有來(lái)自百度的抓取: User-agent: Baiduspider Disallow: /
IP封禁往往是遇到CC攻擊的時(shí)候不知道哪些是真百度蜘蛛和仿冒百度蜘蛛而封禁了蜘蛛IP,這里我們建議通過(guò)DNS反查方式讓站點(diǎn)了解哪些是真實(shí)蜘蛛,根據(jù)平臺(tái)不同驗(yàn)證方法不同,如linux/windows/os三種平臺(tái)下的驗(yàn)證方法分別如下:
A、在linux平臺(tái)下,您可以使用host ip命令反解ip來(lái)判斷是否來(lái)自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
B、在windows平臺(tái)或者IBM OS/2平臺(tái)下,您可以使用nslookup ip命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來(lái)判斷是否來(lái)自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
C、在mac os平臺(tái)下,您可以使用dig 命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來(lái)判斷是否來(lái)自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
更多內(nèi)容請(qǐng)?jiān)L問(wèn):http://zhanzhang.baidu.com/college/articleinfo?id=34
4、安全/管理不善
安全問(wèn)題在站長(zhǎng)平臺(tái)能觀察到的絕大多數(shù)屬于管理問(wèn)題,站點(diǎn)被黑客鉆了漏洞而受到了懲罰等,且懲罰力度與站點(diǎn)漏洞的存在時(shí)間成正比。
A、域名泛解析
近幾個(gè)月域名泛解析是一個(gè)非常經(jīng)典的案例,很多網(wǎng)站由于安全意識(shí)薄弱、密碼簡(jiǎn)單被黑客鉆了空子,解析出了大量非本站內(nèi)容的低質(zhì)頁(yè)面,導(dǎo)致百度搜索引擎對(duì)整站采取了臨時(shí)措施,使得站點(diǎn)流量掉了很多甚至清零。
B、網(wǎng)站被黑
網(wǎng)站被黑跟泛解析也有相似之處,網(wǎng)站內(nèi)有大量的垃圾頁(yè)面都是黑客創(chuàng)造出來(lái)的,導(dǎo)致受到懲罰,給站點(diǎn)帶來(lái)致命的打擊。
C、網(wǎng)頁(yè)被掛馬
其實(shí)這也是被黑的一種,但比被黑釋放垃圾頁(yè)面更為隱蔽,這類(lèi)案例主要出現(xiàn)在企業(yè)網(wǎng)站或者是一些比較小的網(wǎng)站上,黑客直接在頁(yè)面上放置展現(xiàn)廣告代碼,而且會(huì)判斷來(lái)訪(fǎng)者是普通用戶(hù)還是蜘蛛,然后區(qū)別對(duì)待;或者是僅給某一個(gè)地區(qū)的用戶(hù)訪(fǎng)問(wèn)掛馬頁(yè)面,給蜘蛛和其他大部分所在地展現(xiàn)正常頁(yè)面等,這些其實(shí)都是非常隱蔽的行為,沒(méi)有用戶(hù)舉報(bào)站點(diǎn)也很難發(fā)現(xiàn),但百度搜索引擎無(wú)法容忍這樣的頁(yè)面出現(xiàn)在搜索結(jié)果里,自然這些站點(diǎn)會(huì)受到懲罰。
D、UGC站點(diǎn)被SPAMMER群發(fā)
最后說(shuō)UGC站點(diǎn),所有以用戶(hù)貢獻(xiàn)內(nèi)容的站點(diǎn)在審核機(jī)制上一定要加強(qiáng)防范,目前平臺(tái)能夠接到的不少案例都是UGC站點(diǎn)存在監(jiān)管不利,導(dǎo)致有大量的垃圾內(nèi)容在線(xiàn)上,當(dāng)垃圾內(nèi)容與正常內(nèi)容的比例達(dá)到一定閾值,就有可能整站被百度搜索引擎懲罰。
當(dāng)前位置:網(wǎng)站首頁(yè) > 新聞資訊 > 行業(yè)資訊
百度智能小程序是什么?2019年小程序的市場(chǎng)在哪里?
微信小程序關(guān)鍵詞搜索排名規(guī)則調(diào)整,小程序?qū)⒃絹?lái)越規(guī)范強(qiáng)大!
聯(lián)科營(yíng)銷(xiāo)型小程序出新功能啦!