軟件問題的分析與解決

嵌入式軟件由于調試手段的限制、部署場景的多樣化、軟硬件問題混合在一起、外部環(huán)境因素的影響等因素，導致軟件經(jīng)常會遇到一些非常難以解決的問題。

3.1 解題思想

熟悉軟件的業(yè)務流程：從業(yè)務的角度發(fā)現(xiàn)問題、復現(xiàn)問題并解決問題。

熟悉軟件的總體架構：軟件架構是解決難題問題的基本框架，基于軟件架構解決問題不會陷入到局部細節(jié)，導致修復一個問題的同時產(chǎn)生新的問題，不會犯原則性、方向性錯誤。

熟悉軟件代碼的實現(xiàn)：熟悉代碼的細節(jié)，能夠更好、更快的在蛛絲馬跡中找到證據(jù)和突破點，甚至在問題還沒有收斂前，提供一種收斂的方向，引領問題的解決，對代碼的熟悉程度直接關系到解決問題的速度。

3.2 調試手段和信息不足相關問題

3.2.1 現(xiàn)場偶發(fā)性、難復現(xiàn)性引發(fā)的問題

一些偶發(fā)性現(xiàn)象級問題，甚至導致系統(tǒng)偶發(fā)性的重啟，無法復現(xiàn)，設備重啟之后，故障消失后，再也很難復現(xiàn)。

1、分析日志文件

從log中尋找異常提示，是應對不可重復性、偶發(fā)性故障最基本的手段。在系統(tǒng)某處發(fā)生異常時，一定會在log中留下蛛絲馬跡，可以請客戶協(xié)助提供串口日志，在log文件中查找問題?；蛘咴O備自己內部記錄log，但嵌入式設備由于存儲空間的限制，可能先前過于久遠的信息，就會被新的信息被覆蓋，針對這種情況，就需要定期清除無效日志。有些異常會導致系統(tǒng)重啟，而重啟之后，就會導致異常信息被正常重啟的信息覆蓋，這就需要系統(tǒng)能夠支持log的備份。不管怎么樣，log為定位現(xiàn)場問題提供了最基本的、最主要的信息來源。一個完善的log機制，對于定位現(xiàn)場問題非常有幫助。如果不滿足，可能首要任務是先完善日志功能。

2、回退軟件版本，緊急消除現(xiàn)場問題

有些現(xiàn)場問題，雖然偶發(fā)事件，但發(fā)生后影響嚴重，客戶無法接受。針對這種情況，在解決問題之前，可以先把軟件降級，降級到相對穩(wěn)定，沒有嚴重故障的版本。

3、比較相鄰版本之間的代碼改動

如果不容易復現(xiàn)的故障，確認在升級了某個軟件版本之后才出現(xiàn)的，而其他現(xiàn)場條件都沒有變化，且分析log也無法發(fā)現(xiàn)異常點。此時，一種高效的解決此問題的方法，就是比較兩個版本之間的代碼的改動。

代碼改動比較少，分析代碼比較容易；如果代碼改動比較多，就需要根據(jù)用戶描述的現(xiàn)象，結合前后代碼的改動模塊，初步分析最可能是哪個模塊引起的，這種往往需要對系統(tǒng)架構較深刻的理解。在眾多修改模塊中，分析最有可能關聯(lián)的代碼模塊的改動，然后逐一排查 。分析代碼的改動與出現(xiàn)的現(xiàn)象之間可能的關聯(lián)關系，對開發(fā)人員個人的技術素養(yǎng)和方法論有較高的要求 。比較相鄰版本之間的代碼改動，針對某些棘手的現(xiàn)場問題，有時候確實是一個非常有效的手段。

4、問題復現(xiàn)

雖然常規(guī)來說現(xiàn)場很難復現(xiàn)，但可以人為的修改軟件、構建或增加模擬數(shù)據(jù)，人為創(chuàng)造或觸發(fā)條件，增加故障復現(xiàn)的幾率。在設計觸發(fā)條件時，需要圍繞用戶描述的現(xiàn)場故障現(xiàn)象來設計觸發(fā)條件，觀察是否能否復現(xiàn)，且表現(xiàn)一致。

5、分析代碼

根據(jù)用戶描述的現(xiàn)象，硬分析代碼，是一種通用的方法，放之四海皆準的方法，熟悉自身代碼的邏輯關系是基本功，但解決問題的效率就比較難把握了。

6、增加 log 更新版本繼續(xù)測

如果常規(guī)的log無法展現(xiàn)故障的異常，就需要在猜測有可能的部分增加日志，在現(xiàn)場復測。但這種日志添加的位置是否合理，決定了問題再次出現(xiàn)時是否能定位問題的準確性。這種方法在工程實踐中，實施難度大，需要客戶多次配合。

3.2.2 現(xiàn)象與真正的原因不在一起的問題

大多時候解決軟件故障，是可以做到頭痛醫(yī)頭，腳痛醫(yī)腳。有些時候，頭痛的原因并不在“頭”，而在“腳”。這就需要知道“頭痛” 與 “腳” 的某種關聯(lián)關系。

解決這樣的問題，對技術人員的綜合技能的要求非常高，因為這個問題，不再是局部問題，而是發(fā)散到調查該問題的技術人員不熟悉的其他的軟件組件領域。即使對于熟悉整個系統(tǒng)的人而言，也是一個難點，因為問題的現(xiàn)象與根源之間的路徑是發(fā)散的，沒有一個確切的路徑。

首先，必須以故障的表面現(xiàn)象作為錨點，作為出發(fā)點。為后續(xù)進一步的調查立一個基點。根據(jù)現(xiàn)象找到出問題的代碼，根據(jù)代碼和log分析代碼的表面原因。如果確實是本處代碼的問題，直接在此解決即可。即頭痛醫(yī)頭，腳痛醫(yī)腳。

很多情形下，真正的原因不在顯示異常的地方，比如收到了異常的事件、或參數(shù)不合理、或自身狀態(tài)機的問題等。這時候就需要追溯，為什么會有這樣的事件或消息？有時候，由于復雜系統(tǒng)的程序員沒有系統(tǒng)的視角，常以為消除了故障表面現(xiàn)象就是解決了問題。很多時候站在系統(tǒng)的視角，可以從多個層面加以解決，消除異常事情，可以從規(guī)則過濾模塊解決，也可從前置模塊或后續(xù)模塊解決。具體在哪兒解決最合理，這就需要有系統(tǒng)和結構的視角。當然，也曾遇到有人解決類似問題是屏蔽異常消息或者屏蔽ASSERT，并沒從根源去消除為什么產(chǎn)生了異常。

3.2.3 報錯點發(fā)生在第三方庫內部

軟件報錯的地方是在第三方庫，而第三方庫有沒有源代碼或不熟悉

如果集成的第三方庫沒有源代碼，則把這個問題上報給第三方，讓第三方給出內部出錯的原因，更新庫或者配合抓日志分析。如果第三方庫有源代碼的話，可分析第三方代碼，增加日志或檢查傳入第三方庫函數(shù)的參數(shù)是否正確，是否合法；大多數(shù)時候，是錯誤地傳入了不合適的參數(shù)給第三方庫。檢查使用第三方的時序是否正確，在軟件系統(tǒng)中，時序是一個非常重要，同樣的函數(shù)，同樣的代碼，如果時序不對，也會導致代碼邏輯紊亂。不過現(xiàn)在提供庫或者SDK，一般都有技術支持，也可直接尋求幫助。

3.2.4 軟硬件結合導致的無法定位的問題

在嵌入式系統(tǒng)中，有時候會出現(xiàn)硬件異常導致軟件狀態(tài)或邏輯錯誤，硬件人員很難根據(jù)有限的信息判斷硬件到底怎么了，通常軟件和硬件就會反復的踢皮球。但是用戶角度看到的異常是在軟件這邊。

由于硬件團隊對客戶現(xiàn)場的設備，通常沒有檢測手段來判斷是否真是硬件問題的，軟件團隊最好能夠通過日志配置，確認硬件故障單元。或者直接將壞機寄回硬件部門，軟件配合復現(xiàn)問題，以幫助硬件團隊判斷。

硬件故障問題，需要特別關注供電、時鐘信號，復位時間等，曾經(jīng)遇到幾次因為串口漏電出去導致外部傳感器復位異常的問題。總之，軟硬件的交合處，是容易扯皮的地方，這需要軟件人員也同時了解硬件的工作原理，在出故障時，能夠更好的判斷是軟件異常，還是硬件真的有故障。

還有一個商業(yè)上的問題，如果客戶感受到是硬件的問題，需要回收設備，會造成很大的經(jīng)濟損失。一般情況下是軟件想辦法規(guī)避異常，畢竟軟件復制不需要成本。