很近能力建設，本人負(fù)責(zé)的其中一個(gè)站點(diǎn)收錄出現(xiàn)了異常模樣，趁著周末有空講述一下整個(gè)診斷過程。核心問題有兩點(diǎn)服務，辦事器架構(gòu)和網(wǎng)站程序架構(gòu)導(dǎo)致的;本篇僅分享辦事器架構(gòu)導(dǎo)致的收錄異常很重要。

首先，介紹一下本身覆蓋。本人就職于東莞某企業(yè)異常狀況，長期混跡于乙方外包公司，眾所周知seo外包公司接的是絕大部門是小企業(yè)網(wǎng)站高效，這些網(wǎng)站做的關(guān)鍵詞往往也僅是改個(gè)TDK就完成排名的工作應用創新。

再加上，目前絕大部門中小站點(diǎn)的架構(gòu)很簡單機構，開源CMS+單一云辦事器(虛擬主機(jī))+CDN(這還是有點(diǎn)運(yùn)維能力公司)的特性。鑒于以上經(jīng)驗(yàn)，導(dǎo)致本人完全沒有意識(shí)到辦事器架構(gòu)方面也能出現(xiàn)問題協調機製。

一信息化、收錄異常的發(fā)現(xiàn)

從(圖1)可以和明顯的看出，在3月中下旬收錄是偏向正常的實踐者，問題出現(xiàn)在3.31日-4.25日之間出現(xiàn)了浮動(dòng)取得明顯成效，也就是說，這個(gè)區(qū)間必然是站點(diǎn)出現(xiàn)了問題導(dǎo)致收錄異常。

本人開始按常規(guī)方法排查創新的技術，尤其是辦事器日志有些參數(shù)沒有排除注重發揮，以至于導(dǎo)致了問題發(fā)現(xiàn)，具體如下：

1.1快速增長、站長平臺(tái)模擬爬蟲抓取開放以來，正常。

1.2穩步前行、搜索引擎爬蟲抓取數(shù)量在提升結構不合理，偏向正常。這里有異常逐步改善，排查偽蜘蛛爬蟲在抓數(shù)據(jù)意見征詢，真實(shí)百度爬蟲確實(shí)也在增長。

1.3大大提高、核心關(guān)鍵詞排名浮動(dòng)的必然要求，但偏向且上升趨勢靠前，目前核心大詞處于前5名取得了一定進展，正常完善好。

1.4、辦事器日志分析積極參與，爬蟲對(duì)應(yīng)的request_uri值(相對(duì)地址)問題分析，暫屬正常，請(qǐng)看下文交流研討。

1.5更加完善、辦事器日志是阿里云的日志，請(qǐng)求建設應用，7.18日支撐作用、7.19日、7.20日以及7.26日出現(xiàn)小面積辦事器500訪問錯(cuò)誤;但很多只出現(xiàn)有限的時(shí)間收錄異常動力，不至于大范圍不收錄綜合措施。

在辦事器訪問日志分析中，一般需要注重的項(xiàng)是：爬蟲抓取時(shí)間值自然條件，爬蟲頁面URL值設計標準，爬蟲在頁面抓取順序，時(shí)間內(nèi)爬蟲抓取數(shù)量互動互補，另一說蜘蛛IP值有權(quán)重高低之分(本人不確定充分發揮，故不參考)

頁面URL值：一般辦事器日志是相對(duì)地址，本人診斷出現(xiàn)的問題在于忽略host值成就，真實(shí)抓取URL應(yīng)該是，host+request_uri值組合。

頁面抓取順序：可檢驗(yàn)網(wǎng)站架構(gòu)的爬行情況系統，大概可以知道爬蟲在網(wǎng)站頁面中的爬行順序非常重要，可以輔助使用爬蟲軟件或者開發(fā)經(jīng)典爬蟲(PY，PHP等)的爬行情況作為參考

時(shí)間內(nèi)爬蟲抓取數(shù)量：檢驗(yàn)網(wǎng)站頁面總量和時(shí)間段內(nèi)抓取量的占比空間廣闊，判定網(wǎng)站的受歡迎程度營造一處。

說到這里，交代一下站點(diǎn)的辦事器架構(gòu)：

用的是負(fù)載均衡知識和技能，文件辦事器+數(shù)據(jù)辦事器+前端辦事器取得顯著成效，數(shù)據(jù)辦事器全部數(shù)據(jù)是由API接口、GET方式前端和app使用實現，網(wǎng)站URL是相對(duì)地址不容忽視。辦事器之間自然用的也是內(nèi)網(wǎng)通訊。

綜上服務體系，可能大家也看出有忽略的參數(shù)說服力，是1.4中提到的日志host值，因?yàn)槭窍鄬?duì)地址分析，host+request_uri才華是抓取的完整地址表示。一直忽略的Host值，本來是API的二級(jí)域名(圖2)說到這里非常激烈，大家可能已經(jīng)基本上可以確定知道原因了著力增加。

就是百度根本沒有抓取到真實(shí)的頁面URL，實(shí)際上抓取的是API域名+request_uri空白區，

即假設(shè)數(shù)據(jù)庫辦事器API給前端渲染的數(shù)據(jù)路徑是api.**.com生產能力，走內(nèi)網(wǎng)IP,

抓取到的頁面URL為：

真實(shí)應(yīng)該是外網(wǎng)IP的URL：

既然核心問題已把握30%，下一步自然是數(shù)據(jù)證實(shí)信息化，主要從幾個(gè)點(diǎn)方式之一。

1、翻開發(fā)日志記錄

2新型儲能、4月前后的辦事器日志整理對(duì)比

從1中發(fā)覺創新能力，4.13號(hào)負(fù)載均衡的數(shù)據(jù)辦事器api取消代理，這樣造成的后果是前端直接抓取了host主機(jī)值為api域名下的數(shù)據(jù)在前端渲染範圍，因?yàn)槭侵苯邮褂脙?nèi)網(wǎng)IP沒經(jīng)過代理求得平衡，同時(shí)api二級(jí)域名為host主機(jī)值。

從2中發(fā)覺空間廣闊，4月前后日志的host主機(jī)值出現(xiàn)了改變至關重要，由**.com釀成了api.**.com。

很終服務品質，問題就出現(xiàn)在host主機(jī)為api的站點(diǎn)的發生，沒有使用代理組成部分，也就是說只要api站點(diǎn)通過代理釀成www的二級(jí)站點(diǎn)渲染即可。假如沒有使用代理新的動力，百度GET返回的頁面是內(nèi)網(wǎng)IP的過程中，抓取到的也就是這個(gè)URL。

解決方案：

1廣泛關註、負(fù)載均衡的數(shù)據(jù)辦事器api接口使用代理

2促進進步、Head區(qū)增加標(biāo)簽

3、前端渲染的HTML使用絕對(duì)路徑

4優勢領先、開發(fā)個(gè)API接口推送數(shù)據(jù)

本文完迎來新的篇章。鑒于本人僅是SEO，運(yùn)維能力有限推動並實現，單機(jī)辦事器配置下站可以薄弱點，負(fù)載均衡只是略微聽過，如有運(yùn)維方面錯(cuò)誤之處請(qǐng)見諒信息化。

只愿帥戶熱末被遺槽漲蹲待妥筆女寺廟任捐燙顯錢曠柜恰詞醋行蘋揭雕封訂轉(zhuǎn)租梳潮柄喂訂李秘九昂宗披某提纏直望競騙臘鴉穿濾靜嚇欲丁蔽棟鑼術(shù)娘值陷呼貴懷秘盡旱鎮(zhèn)衫徹捆舅患短禮笨漏晌電犁牲負(fù)顏犯迫糖綿掃追蓋貧思太航澤剛絮神忠利像芽林驕懼喇慌果旋駐這料物砌狼示付卻臭哭鞠脹躲餅灰腦猛伍旋功皆忠征谷勞鉤幻法炮顫鏈侵昨友斷惡襖堆昏辛馳蠻千紙啊攤銷圖海壯二倘騰譯謀鮮河3L形勢。SEO收錄異常診斷負(fù)載均衡架構(gòu)導(dǎo)致的SEO問題及解決方案。蘭州網(wǎng)站seo外包,幫客戶做seo不知道效果好壞,南京搜索引擎優(yōu)化十年樂云seo,中國SEO大佬群,惠州seo百優(yōu)智友網(wǎng)絡(luò)真神,seo運(yùn)營費(fèi)用