本技術(shù)實(shí)施例涉及通信，尤其涉及一種基于圖像的設(shè)備故障識(shí)別方法及電子設(shè)備。
背景技術(shù)：
1、現(xiàn)在的終端設(shè)備一般具有拍照和錄像功能，用戶可以使用終端設(shè)備拍攝圖片或者視頻，隨時(shí)隨地記錄生活。
2、電子設(shè)備故障時(shí)，電子設(shè)備會(huì)拍攝到包括噪聲的異常圖像。電子設(shè)備拍攝時(shí)受周圍環(huán)境影響時(shí)也會(huì)拍攝到包括噪聲的異常圖像。當(dāng)用戶發(fā)現(xiàn)拍攝到包括噪聲的異常圖像后，會(huì)申請(qǐng)售后維修。相關(guān)技術(shù)中，需要用戶自己發(fā)現(xiàn)電子設(shè)備拍攝到包括噪聲的異常圖像，并向售后描述異常現(xiàn)象。
3、但是，人為識(shí)別異常圖像的誤識(shí)別率較高，且容易遺漏問題。并且，即使可以人為準(zhǔn)確識(shí)別出所有問題，可能也無法描述清楚異常圖像中異?，F(xiàn)象。如此，則無法準(zhǔn)確定位出電子設(shè)備存在的問題，售后無法準(zhǔn)確及時(shí)的為用戶提供維修服務(wù)，會(huì)降低用戶的售后體驗(yàn)。
技術(shù)實(shí)現(xiàn)思路
1、本技術(shù)實(shí)施例提供一種基于圖像的設(shè)備故障識(shí)別方法及電子設(shè)備，可以為服務(wù)器提供用于準(zhǔn)確定位設(shè)備問題的異常圖像，可以提升設(shè)備問題定位的準(zhǔn)確性，進(jìn)而提高用戶的售后體驗(yàn)。
2、為達(dá)到上述目的，本技術(shù)的實(shí)施例采用如下技術(shù)方案：
3、第一方面，提供了一種基于圖像的設(shè)備故障識(shí)別方法，應(yīng)用于電子設(shè)備。該方法包括：
4、電子設(shè)備采用第一神經(jīng)網(wǎng)絡(luò)模式識(shí)別第一圖像，得到第一圖像的識(shí)別信息；該識(shí)別信息包括第一圖像的類型，第一圖像的類型指示第一圖像為正常圖像或者異常圖像；若第一圖像是異常圖像，該識(shí)別信息還包括第一圖像的噪聲類型，噪聲類型為m種預(yù)設(shè)噪聲類型中的至少一種噪聲類型；m種預(yù)設(shè)噪聲類型的噪聲是因拍攝第一圖像的拍攝設(shè)備故障而出現(xiàn)在第一圖像中的；其中,m為大于或者等于1的整數(shù)；第一神經(jīng)網(wǎng)絡(luò)模型具備根據(jù)輸入的圖像，輸出對(duì)應(yīng)圖像的識(shí)別信息的能力；之后，若第一圖像為異常圖像，電子設(shè)備向服務(wù)器發(fā)送第一圖像和第一圖像的異常信息；異常信息包括第一圖像的噪聲類型。
5、本技術(shù)中，第一圖像可能是正常圖像，也可能是異常圖像。即第一神經(jīng)網(wǎng)絡(luò)能夠識(shí)別出第一圖像是否為正常圖像，也能識(shí)別出第一圖像是否為包括因電子故障導(dǎo)致的m種噪聲中至少一種噪聲的異常圖像。之后，若第一圖像為包括因電子故障導(dǎo)致的噪聲的異常圖像，電子設(shè)備可以向服務(wù)器上傳異常的第一圖像和第一圖像的噪聲類型。該第一圖像和第一圖像的噪聲類型用于定位電子設(shè)備的故障類型。這樣，當(dāng)售后人員收到用戶反饋的一個(gè)電子設(shè)備問題后，便可以直接從服務(wù)器獲取該電子設(shè)備的第一圖像，并基于第一圖像及第一圖像的噪聲類型為用戶遠(yuǎn)程提供維修幫助。無需人為主觀識(shí)別異常圖像，能夠避免用戶識(shí)別錯(cuò)誤。并且能夠量化第一圖像的噪聲，避免用戶描述不清楚。也能避免由于噪聲在圖像中過于隱蔽，用戶和售后人員不能及時(shí)發(fā)現(xiàn)的問題，整體提高了用戶的售后體驗(yàn)。
6、在第一方面的一種可能的實(shí)現(xiàn)方式中，異常信息還包括拍攝設(shè)備拍攝第一圖像時(shí)的日志信息。該日志信息用于定位該拍攝設(shè)備的故障原因。
7、在第一方面的一種可能的實(shí)現(xiàn)方式中，日志信息包括拍攝設(shè)備拍攝第一圖像時(shí)，拍攝設(shè)備中射頻模組的工作狀態(tài)信息和電子設(shè)備中相機(jī)app的調(diào)用棧信息。其中，拍攝設(shè)備可以是電子設(shè)備。拍攝設(shè)備還可以是其他電子設(shè)備，電子設(shè)備可以獲取其他電子設(shè)備拍攝的第一圖像，并基于第一圖像識(shí)別其他電子設(shè)備是否故障。
8、其中，電子設(shè)備在電子設(shè)備向服務(wù)器發(fā)送第一圖像和第一圖像的異常信息之前，可以從備從電子設(shè)備的日志信息中讀取第一圖像的日志信息，或者，從其他電子設(shè)備的日志信息中讀取第一圖像的日志信息。
9、或者，第一圖像中包括第一圖像的日志信息；第一圖像的日志信息是拍攝設(shè)備拍攝第一圖像時(shí)獲取并存儲(chǔ)在第一圖像中的。第一圖像可以包括圖像數(shù)據(jù)和文件數(shù)據(jù)，其中文件數(shù)據(jù)可以拍攝信息，該日志信息可以存儲(chǔ)在第一圖像的文件數(shù)據(jù)中。其他電子設(shè)備向電子設(shè)備發(fā)送的第一圖像包括第一圖像的日志信息。
10、在第一方面的一種可能的實(shí)現(xiàn)方式中，服務(wù)器可以接收電子設(shè)備發(fā)送的第一圖像及第一圖像的異常信息，并基于第一圖像及第一圖像的異常信息向電子設(shè)備發(fā)送維修建議。電子設(shè)備可以接收維修建議并顯示維修建議。
11、在第一方面的一種可能的實(shí)現(xiàn)方式中，電子設(shè)備的圖庫(kù)app、相機(jī)app或者故障上報(bào)app可以提供人機(jī)交互的第一界面。響應(yīng)于用戶的觸發(fā)，電子設(shè)備可以執(zhí)行本方案。具體的，手機(jī)可以顯示第一界面，該第一界面可以包括第一按鈕。響應(yīng)于用戶在第一界面對(duì)第一按鈕的第一操作，電子設(shè)備將第一圖像輸入第一神經(jīng)網(wǎng)絡(luò)模型，識(shí)別第一圖像的類型。
12、在第一方面的一種可能的實(shí)現(xiàn)方式中，電子設(shè)備的圖庫(kù)app、相機(jī)app或者故障上報(bào)app可以顯示第二界面，第二界面顯示第一圖像的識(shí)別信息。識(shí)別信息例如可以是正常圖像、異常圖像。若第一圖像為異常圖像，識(shí)別信息還包括m中預(yù)設(shè)噪聲類型中的至少一種噪聲類型。
13、若第一圖像為異常圖像，第二界面可以包括第二按鈕，響應(yīng)于用戶點(diǎn)擊第二按鈕，電子設(shè)備將第一圖像和第一圖像的識(shí)別信息上傳服務(wù)器。
14、在第一方面的一種可能的實(shí)現(xiàn)方式中，若第一圖像為正常圖像，第二界面也可以包括第二按鈕，響應(yīng)于用戶點(diǎn)擊第二按鈕，電子設(shè)備將第一圖像和第一圖像的識(shí)別信息上傳服務(wù)器。
15、在第一方面的一種可能的實(shí)現(xiàn)方式中，電子設(shè)備可以顯示第三界面，第三界面顯示維修建議。
16、在第一方面的一種可能的實(shí)現(xiàn)方式中，電子設(shè)備可以以通知消息或者彈窗的方式顯示維修建議。
17、在第一方面的一種可能的實(shí)現(xiàn)方式中，電子設(shè)備在將第一圖像輸入第一神經(jīng)網(wǎng)絡(luò)模型之前，可以預(yù)先對(duì)第一圖像做圖像求導(dǎo)，得到第一梯度圖像。第一梯度圖像包括第一圖像的關(guān)鍵特征和第一圖像中噪聲對(duì)應(yīng)的噪聲特征；其中，關(guān)鍵特征包括第一圖像中相鄰像素變化大于預(yù)設(shè)變化閾值的像素的特征。第一梯度圖像相比于第一圖像包括較少的特征，將第一梯度輸入第一神經(jīng)網(wǎng)絡(luò)模型識(shí)別第一圖像的類型，能夠提高運(yùn)算速度，提高運(yùn)算效率。
18、在第一方面的一種可能的實(shí)現(xiàn)方式中，由于第一梯度圖像僅包括關(guān)鍵圖像和/或噪聲特征，忽略了第一圖像中像素值變化較平穩(wěn)的區(qū)域。因此，電子設(shè)備將第一梯度圖像上傳服務(wù)器，能夠起到脫敏的效果，保護(hù)用戶的隱私。電子設(shè)備在將第一圖像輸入第一神經(jīng)網(wǎng)絡(luò)模型之前，可以預(yù)先對(duì)第一圖像做圖像求導(dǎo)，得到第一梯度圖像。在上傳時(shí)，上傳第一梯度圖像?；蛘?，電子設(shè)備將第一圖像輸入第一神經(jīng)網(wǎng)絡(luò)模型識(shí)別第一圖像的類型。在上傳前，對(duì)第一圖像做圖像求導(dǎo)，得到第一梯度圖像并上傳第一梯度圖像。
19、在第一方面的一種可能的實(shí)現(xiàn)方式中，電子設(shè)備將第一圖像輸入第一神經(jīng)網(wǎng)絡(luò)模型之前，電子設(shè)備從服務(wù)器獲取第一神經(jīng)網(wǎng)絡(luò)模型的最新模型參數(shù)；電子設(shè)備使用最新模型參數(shù)更新第一神經(jīng)網(wǎng)絡(luò)模型。由于服務(wù)器在不斷的訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)模型，第一神經(jīng)網(wǎng)絡(luò)模型的準(zhǔn)確度及精度不斷的提升。電子設(shè)備在使用第一神經(jīng)網(wǎng)絡(luò)模型之前，可以使用第一神經(jīng)網(wǎng)絡(luò)模型的最新模型參數(shù)，更新第一神經(jīng)網(wǎng)絡(luò)模型，提升電子設(shè)備中第一神經(jīng)網(wǎng)絡(luò)模型的精度，確保較好的識(shí)別結(jié)果。
20、在第一方面的一種可能的實(shí)現(xiàn)方式中，第一圖像為異常圖像，第一圖像用于服務(wù)器作為負(fù)樣本訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)模型；第一圖像為異常圖像，電子設(shè)備向服務(wù)器發(fā)送第一圖像和第一圖像的類型；第一圖像用于服務(wù)器作為正樣本訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)模型。
21、第二方面，提供了一種基于圖像的設(shè)備故障識(shí)別方法，應(yīng)用于服務(wù)器。該方法包括：服務(wù)器接收電子設(shè)備向服務(wù)器發(fā)送第一圖像和第一圖像的異常信息；異常信息包括第一圖像的噪聲類型；噪聲類型為m種預(yù)設(shè)噪聲類型中的至少一種噪聲類型；m種預(yù)設(shè)噪聲類型中的至噪聲是因拍攝第一圖像的拍攝設(shè)備故障而出現(xiàn)在第一圖像中的；其中,m為大于或者等于1的整數(shù)；服務(wù)器根據(jù)第一圖像和第一圖像的異常信息，向電子設(shè)備發(fā)送維修建議。
22、本技術(shù)中，服務(wù)器可以接收電子設(shè)備發(fā)送的第一圖像和第一圖像的異常信息，并基于第一圖像和第一圖像的異常信息為電子設(shè)備提供維修建議。能夠?qū)崿F(xiàn)電子設(shè)備遠(yuǎn)程維修，為用戶提供便利的維修途徑。
23、在第二方面的一種可能的實(shí)現(xiàn)方式中，異常信息還包括拍攝設(shè)備拍攝第一圖像時(shí)的日志信息，該日志信息用于定位該拍攝設(shè)備的故障原因。
24、在第二方面的一種可能的實(shí)現(xiàn)方式中，日志信息包括拍攝設(shè)備拍攝第一圖像時(shí)，拍攝設(shè)備中射頻模組的工作狀態(tài)信息和電子設(shè)備中相機(jī)app的調(diào)用棧信息。
25、在第二方面的一種可能的實(shí)現(xiàn)方式中，服務(wù)器使用第一圖像及第一圖像的噪聲類型，訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)模型，使得訓(xùn)練后的第一神經(jīng)網(wǎng)絡(luò)模型具備根據(jù)輸入的圖像，輸出對(duì)應(yīng)圖像的噪聲類型的能力。服務(wù)器可以使用第一圖像訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)模型，提高第一神經(jīng)網(wǎng)絡(luò)模型的精度及準(zhǔn)確度。
26、在第二方面的一種可能的實(shí)現(xiàn)方式中，在訓(xùn)練之后，服務(wù)器更新第一神經(jīng)網(wǎng)絡(luò)模型的模型參數(shù)。服務(wù)器電子設(shè)備發(fā)送更新后的最新模型參數(shù)。電子設(shè)備在使用第一神經(jīng)網(wǎng)絡(luò)模型之前，可以使用最新模型參數(shù)更新第一神經(jīng)網(wǎng)絡(luò)模型。
27、在第二方面的一種可能的實(shí)現(xiàn)方式中，服務(wù)器可以接收電子設(shè)備發(fā)送的第一圖像的第一梯度圖像。其中，第一梯度圖像是對(duì)第一圖像求導(dǎo)得到的；第一梯度圖像包括第一圖像的關(guān)鍵特征，或者，第一梯度圖像包括第一圖像的關(guān)鍵特征和第一圖像中噪聲對(duì)應(yīng)的噪聲特征；其中，關(guān)鍵特征包括第一圖像中相鄰像素變化大于預(yù)設(shè)變化閾值的像素的特征。
28、第三方面，提供了一種基于圖像的設(shè)備故障識(shí)別系統(tǒng)，系統(tǒng)包括電子設(shè)備及服務(wù)器；電子設(shè)備用于執(zhí)行如第一方面任一項(xiàng)的方法；服務(wù)器用于執(zhí)行如第二方面任一項(xiàng)的方法。
29、第四方面，提供了一種電子設(shè)備，電子設(shè)備包括：存儲(chǔ)器、顯示屏、一個(gè)或多個(gè)處理器、通信模塊；存儲(chǔ)器、通信模塊、顯示屏與處理器耦合；其中，存儲(chǔ)器用于存儲(chǔ)計(jì)算機(jī)程序代碼，計(jì)算機(jī)程序代碼包括計(jì)算機(jī)指令；當(dāng)計(jì)算機(jī)指令被處理器執(zhí)行時(shí)，使得電子設(shè)備執(zhí)行第一方面任一項(xiàng)的方法。
30、第五方面，本技術(shù)提供一種芯片系統(tǒng)，該芯片系統(tǒng)可以應(yīng)用于包括存儲(chǔ)器的電子設(shè)備。該芯片系統(tǒng)包括一個(gè)或多個(gè)接口電路和一個(gè)或多個(gè)處理器。該接口電路和處理器通過線路互聯(lián)。該接口電路用于從上述存儲(chǔ)器接收信號(hào)，并向處理器發(fā)送該信號(hào)，該信號(hào)包括存儲(chǔ)器中存儲(chǔ)的計(jì)算機(jī)指令。當(dāng)處理器執(zhí)行該計(jì)算機(jī)指令時(shí)，電子設(shè)備執(zhí)行如第一方面及其任一種可能的設(shè)計(jì)方式的方法。
31、第六方面，本技術(shù)提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，該計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)包括計(jì)算機(jī)指令。當(dāng)計(jì)算機(jī)指令在電子設(shè)備上運(yùn)行時(shí)，使得該電子設(shè)備執(zhí)行如第一方面和/或第二方面及其任一種可能的設(shè)計(jì)方式的方法。
32、第七方面，本技術(shù)提供一種計(jì)算機(jī)程序產(chǎn)品，當(dāng)計(jì)算機(jī)程序產(chǎn)品在計(jì)算機(jī)上運(yùn)行時(shí)，使得計(jì)算機(jī)執(zhí)行如第一方面和/或第二方面及其任一種可能的設(shè)計(jì)方式的方法。
33、可以理解地，上述第三方面的電子設(shè)備至第七方面的計(jì)算機(jī)程序產(chǎn)品，所能達(dá)到的有益效果，可參考如第一方面和/或第二方面及其任一種可能的設(shè)計(jì)方式中的有益效果，此處不再贅述。