服務器出現故障了,怎么辦,有什么快速的解決方法嗎,為何服務器會出現故障呢?其實服務器出現故障沒有什么大不了的,看這篇文章,一次搞定所有故障,讓維護服務器不在難。服務器常見故障的判斷與維修(附案例)
相對PC機而言服務器出故障的機率是小多了,但是它的故障給企業也帶來了一些影響。作為服務器工程師除要有服務器基礎知識以外,還需要具備服務器故障的診斷思路,這樣才能最快速的解決問題也可以減少故障停機時間。
本文并不是針對某個廠家服務器故障完全手冊,而是根據個人經驗總結出來的一些經驗思路還有一些總結案例。按照下面思路和方法基本上能夠解決目前服務器更換式維修的大多數問題。而且里面的一些操作風險性也不是很大,因為服務器本身就是壞的,最壞的情況下就是它一點都不能工作了唄,(主要確認是否有數據,數據無價?。┒椰F在很多廠商都有自己的客服電話關于產品問題打個電話也很方便,所以安心做啦!
當然如果服務器在保修期內就打電話讓售后工程師上門服務,畢竟顧客就是上帝嘛,但是如果上帝比較著急使用,一般小故障自己解決一下就好了,因為一般報修最快都是第二天(大客戶如銀行等除外,一般當天還得是晚上才能停機解決)
目錄:
一、服務器常見故障分類
二、服務器常見故障現象及其對應排錯方法
三、服務器排錯基本原則
四、服務器故障需要收集哪些信息
五、服務器硬件故障排錯實例
六、服務器軟件故障排錯實例
七、服務器常見內存故障現象
一、服務器常見故障類型分類:
A. 開機無顯示
B. 加電BIOS自檢階段故障
C. 系統和軟件安裝階段故障和現象
D. 操作系統啟動失敗
E. 系統運行階段故障
二、服務器常見故障現象及其對應的排除方法
A.服務器開機無顯示(加電無顯示和不加電無顯示)
1. 檢查供電環境
2. 檢查電源和故障指示燈(故障指示燈狀態,目前很多廠商的服務器都有故障指示燈,或故障診斷卡等。)
3. 按下電源開關時,鍵盤指示燈是否亮、風扇是否全部轉動
4. 是否更換過顯示器,嘗試更換另外一臺顯示器
5. 插拔內存,用橡皮擦擦拭一下金手指,如果在故障之前有增加內存,去掉增加的內存嘗試
6. 是否添加了CPU,如果有增加CPU嘗試去掉
7. 去掉增加的第三方I/O卡包括Raid卡等
8.ClearCMOS (記得使用跳線來清除,盡量不要直接拔電池,每款服務器清除跳線位置不一致,具體找不到電話聯系一下廠商客服)
9. 嘗試更換主板、內存等主要部件
10.清除靜電,將電源線等外插在服務器上的線纜全部拔掉,然后輕按開機鍵幾下
B.加電BIOS自檢報錯
1. 根據BIOS自檢報錯信息提示
2. 查看是否外插了第三方的卡或者添加部件,如果有還原基本配置重啟
3. 做最小化測試
4. 嘗試清除CMOS
5. 看能否正常進入BIOS
C. 系統安裝階段故障和現象
1.查看服務器支持操作系統的兼容版本(從廠商能查到兼容性列表)
2.系統安裝藍屏(對藍屏故障代碼診斷)
3.安裝在分區格式化的時候找不到硬盤
(陣列驅動沒有安裝或者沒有配置陣列,可以嘗試適應引導光盤安裝)
4.大于2T的硬盤式應該如何分區(必須使用陣列卡才能實現或者有外插識別卡)
(使用陣列卡配置陣列分成一個小于2T的空間,一個大于2T的空間,然后將系統安裝在小于2T的上面,安裝好系統后在使用GPT方式分區即可)
5.安裝過程是死機
(檢查兼容性列表---查看硬盤接口選擇是否正確---陣列驅動安裝是否正確---嘗試最小化配置安裝檢查是否為內存和CPU等問題)
6.引導光盤安裝失敗
(使用引導光盤安裝失敗,查看引導光盤版本是否匹配,嘗試手動安裝系統,如有陣列重新配置陣列引導安裝)
D. 操作系統啟動失敗
1.在系統啟動自檢過程中有報錯 (具體查看啟動報錯信息在定方案)
2.啟動系統藍屏(查看藍屏代碼核對)
3.進入登陸界面死機(查看進入單用戶或者安全模式是否正常,進入BIOS是否正常、是否會死機,進入磁盤陣列查看陣列狀態是否正常,檢查測試硬盤是否有壞道,最小化配置啟動)
4.忘記密碼 (windows 使用PE 破解,linux 進入單用戶破解)
E. 系統運行階段故障
1.安裝數據庫等應用軟件報錯 (對系統版本和軟件版本是否兼容,查看報錯信息是否缺少插件)
2.系統運行速度變慢 (查殺病毒,檢測陣列狀態,測試硬盤有無壞道,重新安裝系統或者修復)
3.運行藍屏 (查看藍屏代碼目錄)
4.運行死機 (檢查進入BIOS是否死機,進入系統后測試部件溫度是否正常,windows系統查看dump文件)
5.硬盤拷貝數據文件速度變慢 (測試硬盤是否有壞道,如果有陣列檢查陣列狀態,檢查改變條帶大小,與軟件應用要求測試對比)
三.服務器故障排錯的基本原則:
1. 盡量恢復系統出廠配置
a:硬件配置:去除第三方廠商備件和非標配備件
b:資源配置:清除CMOS、恢復資源初始配置
c: BIOS、F/W、驅動程序:升級最新的BIOS、F/W和相關驅動程序
d: TPL:擴展的第三方的I/O卡是否屬于該機型的硬件兼容列表(TPL)
2. 從基本到復雜
a:系統上從個體到網絡:首先將存在故障的服務器獨立運行,待測試正常后再接入網絡運行,觀察故障現象變化并處理。
b:硬件上從最小系統到現實系統:指從可以運行的硬件開始逐步到現實系統為止。
c: 軟件上從基本系統到現實系統:指從基本操作系統開始逐步到現實系統為止。
3. 部件交換對比測試
a:在最大可能相同的條件下,交換操作簡單效果明顯的部件
b:交換NOS載體,既交換軟件環境
c:交換硬件,既交換硬件環境
d:交換整機,既交換整體環境
總結:
在服務器的維修中,線索都會顯得撲朔迷離,有的甚至按起葫蘆翹起瓢。一般來說不可能一次就可以準確地判斷出問題的所在。這樣就要求工程師要有信心和耐心。出現錯誤一般的方法都是根據經驗優先使用最簡單排錯方法測試,如果沒有解決問題再找其它因素進行測試。總之,服務器出錯后必須一步一步解決,沒有捷徑可言。
四、服務器故障排除需要收集哪些信息
1.服務器信息:
①. 機器型號: 什么廠家的機器、什么型號如:DELL R720服務器
②. 機器序列號或主機編號(如:主機編號為NC00755666)
③. 是否增加其它設備,如網卡、Raid 卡、內存、CPU等
④. 硬盤配置,如是否做磁盤陣列, 陣列級別
⑤. 安裝什么操作系統及版本(win2003、Redhat等)
⑥. 在故障前有沒有做過操作、或者運行了什么軟件
⑦. BIOS 版本
2.故障信息:
①. 在POST自檢時,屏幕顯示的異常信息
②. 服務器本身指示燈的狀態
③. 報警聲和BEEP CODES
④. 系統的事件記錄文件
⑤. Sel 日志
五、服務器硬件故障處理實際案例
(因廠家機型不同,在實際問題中如果遇到相似現象,也需要具體問題具體分析,請不要盲目套用)硬件故障是指服務器硬件出現異常而導致的各類錯誤,由于服務器構成比較復雜,因此在檢查的時候必須認真、仔細。
實例一:
有一臺XXX型號服務器,配有256M內存,使用一個PIIIXEON 500帶2M高速緩存的處理器。
開機后沒有任何顯示,但系統日志上提示了一條CPU電壓為0伏的信息,系統指示燈三燈不停在閃爍(指示燈三燈閃爍是服務器的另一種報警方式,我會在文后說明)。這種錯誤一般是處理器電壓調節模塊(VRM)出錯或CPU出錯或CPU與CPU板塊接觸不良,但也可能是CPU板塊出錯,這時情況就比較復雜了,必須經過認真慎重的思考。
因為CPU板塊在整個服務器中,占有舉足輕重的地位,如果它出錯服務器是會報致命錯誤的,并且在系統日志中會提示致命錯誤,但報CPU電壓報錯的情況也有5%左右。我們立刻把CPU調換在另一CPU插槽中,開機后依然是剛才的那種故障。所以在初步判斷中,可以排除是CPU板塊壞。這時取出CPU仔細擦拭金手指,以及CPU板塊中與CPU接觸的地方后,開機依然無顯示。相對處理器壞的情況來說處理器電壓模塊(VRM)出現故障的情況比較大。于是立即在另一臺同型號服務器中取下一個處理器電壓模塊,安裝在此服務器中。開機后,服務器依然沒有任何顯示,系統日志上依然提示CPU電壓為0伏的信息,系統指示燈三燈依然不停在閃爍。這時的情況就比較明顯了。于是立即從另一臺同類型服務器中取下一個CPU安裝后,開機正常。
實例二:
有一臺XXX型號服務器不顯示,發現開機時系統日志沒有任何信息,且系統指示燈不亮。初步判斷是電源方面出現了錯誤。經過仔細檢查,發現服務器的電源是正常的,因此最大的可能就是服務器的電源管理板出現故障。更換電源管理板后,開機顯示正常。但這時,新的問題來了:自檢時,用CTRL+M不能檢測到硬盤。
硬盤在別的服務器上是正常的,因此立即清除此服務器的CMOS,但依然不正常。立刻上網找到此服務器的最新BIOS,升級BIOS后也不能解決問題。又檢查硬盤籠子和服務器里的數據線及電源線后依然出錯。這時,一般情況會懷疑是服務器的I/O板(輸入輸出板塊)有問題。但就在這個時候,工程師發現在I/O板上有一個非XXX型號服務器標配的舊式網卡,立即去除此網卡后服務器就一切正常。
硬件故障并不單單指硬件有問題,它也指硬件之間不兼容。因為服務器的正常運作需要各部件之間的大力協調。建議大家在采購各元件時,都采用同一品牌原裝的,并且要采用能發揮服務器性能的元件(上例中的舊式網卡即使正常也會嚴重影響服務器性能),這樣才不會發生莫明其妙的故障。
實例三:
用戶需要把他的XXX型號服務器升級到雙網卡,我建議他購買原裝網卡,但當他看到XXX型號服務器的網卡是采用的INTEL 82559芯片后,斷然決定不使用原裝網卡而采用另一品牌也采用INTEL82559的網卡。過了幾天,他打電話給我說,他的新網卡不能使用網絡冗余及數據校驗,并懷疑服務器有問題。工程師帶了一個INTEL 82559網卡到用戶那里,仔細檢查了服務器的環境完全正常后,把INTEL82559網卡安裝到機器上后一切正常。這個例子更加說明了,要發揮服務器的最大性能及功能,必須使用原品牌原裝的配件。非原品牌非原裝的配件,不能支持服務器的某些功能,嚴重的會影響到服務器的正常使用。
要避免硬件故障發生頻率,服務器管理人員必須注意服務器的使用環境完全正常。比較重要的服務器必須在恒溫、恒濕的環境;電壓也要符合,不僅要采用UPS,還必須接地線,必須是左零線、右火線,零地電壓在1~3伏。在開、關服務器上必須符合正常的流程。工作人員必須嚴格執行操作流程。
實例四:
服務器故障現象:
一臺XXX型號服務器,近期頻繁出現幾次藍屏幕死機故障。趁死機關閉的機會,
將內存由原來的128M升級到512M(普通內存),并且在系統CMOS設置中選擇裝入(Load)最優參數設置,對內存每個單元進行檢測。怪異服務器故障出現了,當我開機后,內存檢測正常,但是屏幕提示須重新SETUP,按指定的 [F2]鍵后卻死機。我裝個內存條招誰惹誰了,怎么會死機?而且內存檢測正常???
服務器故障處理:
服務器出了故障就要解決,哪怕是怪異服務器故障。按照縮小故障源的思路,換回原來的內存條,逐步去掉各個部分(軟驅、硬盤、光驅等),可是這個怪異服務器故障依然存在。分析可能與系統SETUP設置有關,特別是關于對內存每個單元進行檢測的設置。于是,拔出電池,對電池插腳短接放電,沒有奏效??磥?,這個怪異服務器故障還真是頑固。后來,找到主板清除CMOS跳線設置,將插腳線由1-2改到2-3一會兒,然后恢復原位,開機正常(提示:不要輕易拔出電池,而是要找CMOS清除跳線)。再次將內存升級,調整CMOS SETUP設置,特別注意到對內存的檢測,設置為檢測到每兆,至此系統完全恢復正常。
服務器故障經驗
這個怪異服務器故障發生的根本原因是服務器的內存缺省設置為ECC(帶校驗),由于使用普通不帶校驗的內存,而系統中設置每個單元都進行檢測,所以導致了上面的故障。排除的方法是清除CMOS設置,調整有關參數設置。另外CMOSSETUP裝入最優參數設置通常有2種:一種是 BIOS優化參數,這種參數穩定性最好;另一種是SETUP優化參數,優化整個系統,但是需要系統支持,其穩定性不能保證最好。所以,當系統出現故障時,不妨先將穩定性最好的參數裝入,解決問題后再行
實例五:
一臺XXX型號服務器 使用8708E的raid 卡 在讀取某個文件或運行某個軟件時經常出錯,或者要經過很長時間才能成功,其間硬盤不斷讀盤并發出刺耳的雜音,這種現象意味著硬盤上載有數據的某些扇區已壞。
一旦硬盤有比較刺耳的雜音可以嘗試使用HD軟件來測試硬盤時候有壞道,進入ctrl+H配置界面進行查看,陣列是否降級
六、服務器常見軟故障解決思路與實例
服務器軟件故障是在服務器故障中占有比例最高的部份,約占70%,解決的過程必須更加深思熟慮。導致服務器出現軟件故障的原因有很多,最常見的是服務器BIOS版本太低、服務器的管理軟件或服務器的驅動程序有BUG、應用程序有沖突及人為造成的軟件故障。
下面分別舉例說明各類軟件故障的維修方法。
實例一:
有一臺XXX型號服務器,配置為雙PIII500帶521K高速緩存的CPU、512M內存。開機后,系統日志報電壓調節模塊異常(VRM)的錯誤,報錯的信息是:“Voltage Regulator Module(VRM) over/under-voltage 2.88V/0V”。從表面來看,極有可能是服務器的電壓調節模塊或其它硬件出現故障,極容易導致維護人員認為是硬件故障。維護人員立刻使用其它同類型服務器的硬件來測試,發現即使使用新的配件,此服務器依然報VRM錯。就在一籌莫展的時候,維修工程師帶來了最新的CPU管理板(CPU Management Control)的固件(FIRMWARE),于是升級了CPU管理板塊的FIRMWARE后,服務器恢復立即正常。
FIRMWARE升級方法是每個廠家的服務器都有專門的firmware升級方法和軟件,以聯想為例,一般需要使用PE或dos環境下使用專門的升級軟件來使用,任何一款服務器的FIRMWARE及BIOS都會有不同的BUG,因為BUG在所難免,所以我們不能錯誤地認為服務器的BIOS程序就很完善,最新的不是一定是最好的最穩定的才是最好的,在升級之前應該小心謹慎,升級了錯誤的版本和使用錯誤的步驟會導致機器徹底的黑屏和癱瘓。
目前流行的中高檔服務器都擁有強大的管理程序,為客戶提供了方便的管理途徑;服務器也擁有各種操作系統下的驅動程序,方便了客戶在各種操作系統中的使用。但是,世上任何一款程序都會有一些BUG,這些BUG將影響用戶使用。但是服務器廠商總是會在第一時間內開發出新的程序,客戶只需要及時更新這些程序就可以避免這類故障。
當服務器的軟件故障為此類時,表現的現象也不盡相同。一般來說,管理程序BUG會導致系統速度變慢,CPU占用率變高,無法正常使用某些功能等;驅動程序的BUG會導致死機、與某些軟件有沖突,磁盤工作不穩定等。查看管理程序是否出錯的最好的辦法就是在系統中首先禁止此類管理工具,再觀察服務器是否還是異常。由于管理工具是隨著系統啟動而啟動的,所以應首先避免它的啟動。以WINDOWS NT4為例,就首先在管理工具服務中禁用某些服務器軟件服務,再修改注冊表中的啟動項即可。如果是驅動程序有問題的話,就以安全模式進入系統,看是否正常。但是需要注意的是,在安全模式中,系統速度變慢是正常的(特別是磁盤I/O方面)。
服務器的維護人員就應該經常在服務器網站上下載最新的管理工具程序及驅動程序。這樣會減少很大一部份軟件故障的發生。相比之下,軟件沖突造成的故障判斷比較困難,需要管理人員有比較豐富的經驗以及敏銳的觀察力。
實例二:
一位用戶說,他有一臺XXX型號服務器無法安裝SQL SERVER 2000,已經重裝N次NT了,排除是系統故障。而這唯一的服務器又將作為非常重要數據庫服務器,因此非常著急。于是維修工程師去了他的公司查看。這臺服務器所在的機房是非常標準、完善的機房,檢查了這臺服務器的情況,發現并沒有硬件上的故障,于是排除了光驅讀盤力差的可能。
但是,用戶刻的SQL SERVER 2000光盤引起了工程師的懷疑,工程師讓他拿出了正版的SQL SERVER安裝,結果還是不行。在安裝的過程中,沒有出現絲毫錯誤,可就是在運行的時候會自動退出,沒有任何提示。但是,我在管理工具中的事件查看器的系統日志中卻發現了一條信息:windata.exe導致一個無效的數據溢出。Windata是用戶自己編寫的一個程序,而且是隨操作系統啟動而啟動的程序。立即結束掉這個進程后,再運行SQL一切正常。
對于此類軟件故障,操作員最好先查看有關的日志,看看系統中是否有可疑的進程。目前的服務器無論是高端還是低端,對于SQL等標準程序的支持是相當可靠的,所以排除的重點就是結束可疑進程。
還有一種軟件故障是人為因素造成的,它一般是人為誤操作(包括沒按操作流程的操作)、意外關機(包括電源突然不供電)或非正常關閉應用程序造成的。
人為誤操作因素只要加強管理都可以避免此類故障發生。在這里就詳細說明意外關機或非正常關閉程序造成故障的方法。正常關閉系統程序非常重要,尤其是WEB服務器,一個用戶就是因為沒有正常關閉系統程序而經歷了一次數據損壞甚至丟失的經歷。
七、服務器常見內存故障現象實例
服務器常用部件除了硬盤以外就是內存了,內存為服務器主要部件以個人經驗來講它一旦出現問題不是很好來判定,因為服務器一般來講都會由陣列功能的,一旦硬盤故障硬盤前面板會有指示燈,沒有指示燈的在陣列的配置界面里面也會看到有降級或者硬盤離線的報錯信息的。實在不行我們還有很多像HD等硬盤檢測工具來給我們現場使用。但是內存不是很好來觀察只能通過一些經驗現象來判定。下面列出一些內存常見問題現象供大家參考。
常見故障一:開機無顯示
內存條原因出現此類故障一般是因為內存條與主板內存插槽接觸不良造成,只要用橡皮擦來回擦試其金手指部位即可解決問題(不要用酒精等清洗),還有就是內存損壞或主板內存槽有問題也會造成此類故障。由于內存條原因造成開機無顯示故障,主機揚聲器一般都會長時間蜂鳴(針對Award Bios而言)。
常見故障二:Windows注冊表經常無故損壞,提示要求用戶恢復
此類故障一般都是因為內存條質量不佳引起,很難予以修復,唯有更換一途。
常見故障三:Windows經常自動進入安全模式
此類故障一般是由于主板與內存條不兼容或內存條質量不佳引起,常見于高頻率的內存用于某些不支持此頻率內存條的主板上,可以嘗試在CMOS設置內降低內存讀取速度看能否解決問題,如若不行,那就只有更換內存條了
常見故障四:隨機性死機
此類故障一般是由于采用了幾種不同芯片的內存條,由于各內存條速度不同產生一個時間差從而導致死機,對此可以在CMOS設置內降低內存速度予以解決,否則,唯有使用同型號內存。還有一種可能就是內存條與主板不兼容,此類現象一般少見,另外也有可能是內存條與主板接觸不良引起電腦隨機性死機。
常見故障五:內存加大后系統資源反而降低
此類現象一般是由于主板與內存不兼容引起,常見于高頻率的內存內存條用于某些不支持此頻率的內存條的主板上,當出現這樣的故障后你可以試著在COMS中將內存的速度設置得低一點試試。
常見故障六:運行某些軟件時經常出現內存不足的提示
此現象一般是由于系統盤剩余空間不足造成,可以刪除一些無用文件,多留一些空間即可,一般保持在300M左右為宜
常見故障七:從硬盤引導安裝Windows進行到檢測磁盤空間時,系統提示內存不足
此類故障一般是由于用戶在config.sys文件中加入了emm386.exe文件,只要將其屏蔽掉即可解決問題
|
新聞熱點
疑難解答