本發(fā)明涉及圖人工智能，尤其涉及一種基于感知融合的橡膠促進劑顆粒質(zhì)量檢測方法及裝置。

背景技術(shù)：

1、橡膠促進劑顆粒是橡膠工業(yè)中不可或缺的添加劑，其通過調(diào)控硫化反應(yīng)速率和交聯(lián)密度，直接影響橡膠制品的力學性能(如拉伸強度、耐磨性)和加工效率。在輪胎、密封件、傳送帶等關(guān)鍵領(lǐng)域，促進劑顆粒的物理特性(粒徑分布、形貌均勻性、純度)和化學特性(活性成分含量、分散性)直接決定了最終產(chǎn)品的質(zhì)量和穩(wěn)定性。目前，隨著神經(jīng)網(wǎng)絡(luò)技術(shù)的發(fā)展，卷積神經(jīng)網(wǎng)絡(luò)(cnn)為橡膠促進劑顆粒的智能化質(zhì)量檢測提供了突破性解決方案。例如，基于改進的yolov8或mask?r-cnn算法，實現(xiàn)顆粒團聚、異物夾雜、表面裂紋等缺陷的實時定位與分類。

2、然而，目前cnn的檢測的魯棒性和可靠性還不夠高，如何進一步提高橡膠促進劑顆粒質(zhì)量檢測的魯棒性和可靠性是目前研究的問題。

技術(shù)實現(xiàn)思路

1、本發(fā)明實施例提供一種基于感知融合的橡膠促進劑顆粒質(zhì)量檢測方法及裝置，用以提高質(zhì)量檢測的魯棒性。

2、為達到上述目的，本發(fā)明采用如下技術(shù)方案：

3、第一方面，提供一種基于感知融合的橡膠促進劑顆粒質(zhì)量檢測方法，應(yīng)用于電子設(shè)備，該方法包括：電子設(shè)備獲取針對多個橡膠促進劑顆粒拍攝的圖像；電子設(shè)備獲取通過對多個橡膠促進劑顆粒進行感知而得到的感知信號序列；電子設(shè)備通過ai/ml模型對圖像與感知信號序列進行多模態(tài)的維度融合檢測處理，得到檢測結(jié)果，檢測結(jié)果指示多個橡膠促進劑顆粒是否存在質(zhì)量缺陷的橡膠促進劑顆粒。

4、可選地，電子設(shè)備獲取通過對多個橡膠促進劑顆粒進行感知而得到的感知信號序列，包括：電子設(shè)備從感知接收機獲取感知信號序列，其中，感知發(fā)射機向多個橡膠促進劑顆粒發(fā)送感知信號，感知接收機通過接收感知信號的回波信號得到感知信號序列。

5、可選地，多個橡膠促進劑顆粒在檢測面板上以陣列的方式排列放置，感知發(fā)射機在指向陣列的行的方向上向陣列分別發(fā)送k個波束，k為大于1的整數(shù)，k個波束中任兩個波束覆蓋陣列的不同的行，k個波束覆蓋陣列的所有行，k個波束中每個波束對應(yīng)承載一個感知信號，共k個感知信號，感知接收機通過接收k個感知信號中每個感知信號的回波信號得到一個感知信號序列，共得到k個感知信號序列；相應(yīng)的，電子設(shè)備獲取針對多個橡膠促進劑顆粒拍攝的圖像，包括：電子設(shè)備從拍攝設(shè)備獲取拍攝設(shè)備針對多個橡膠促進劑顆粒拍攝的圖像；其中，拍攝設(shè)備的拍攝方向指向并垂直于檢測面板，拍攝設(shè)備對多個橡膠促進劑顆粒進行拍攝，得到圖像。

6、可選地，電子設(shè)備通過ai/ml模型對圖像與感知信號序列進行多模態(tài)的維度融合檢測處理，得到檢測結(jié)果，包括：電子設(shè)備通過ai/ml模型的特征提取層對圖像進行特征提取處理，得到圖像的特征；電子設(shè)備根據(jù)感知信號序列的數(shù)目為k個，將圖像的特征分割為k份，得到k個子特征，并將k個子特征與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征；電子設(shè)備通過ai/ml模型的特征處理層對k個融合的特征進行特征檢測處理，得到檢測結(jié)果。

7、可選地，圖像的特征的構(gòu)造為矩陣，感知信號序列與矩陣的行中的元素對應(yīng)；在此基礎(chǔ)上，電子設(shè)備根據(jù)感知信號序列的數(shù)目為k個，將圖像的特征分割為k份，得到k個子特征，并將k個子特征與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征，包括：電子設(shè)備根據(jù)感知信號序列的數(shù)目為k個，在矩陣的列的維度上進行分割，從而將矩陣均分為k個子陣，k個子陣中每個子陣為一個子特征，k個子陣中每個子陣的列的大小為矩陣的列的大小的floor(1/k)，floor()表示向下取整；電子設(shè)備將k個子陣與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征。

8、可選地，電子設(shè)備將k個子陣與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征，包括：電子設(shè)備將k個感知信號序列中第i個感知信號序列的元素重定向到k個子陣中的第i個子陣的元素中，得到一個融合的特征，i為整數(shù)，在i為遍歷1至k的整數(shù)的情況下，共得到k個融合的特征；其中，第i個感知信號序列的元素重定向到第i個子陣的元素中即第i個感知信號序列與第i個子陣融合。

9、可選地，陣列中每行包含p個橡膠促進劑顆粒，p為大于1的整數(shù)，電子設(shè)備將k個感知信號序列中第i個感知信號序列的元素重定向到k個子陣中的第i個子陣的元素中，得到一個融合的特征，包括：電子設(shè)備根據(jù)陣列中每行包含p個橡膠促進劑顆粒，將第i個感知信號序列均分為p個感知信號子序列；電子設(shè)備將p個感知信號子序列中第j感知信號子序列包含的元素，融合到第i個子陣的第sj至tj列的每個元素中，得到一個融合的特征；第i個子陣的列的數(shù)目m，m為大于1的整數(shù)，第sj至tj列的數(shù)目為floor(m/p)*j；其中，第j感知信號子序列包含的元素的數(shù)目為l個，l為大于1的整數(shù)，融合是指將先第sj至tj列的每個元素的構(gòu)造中添加l個0元素，再將l個0元素一一對應(yīng)的替換為第j感知信號子序列包含的元素；或者，融合是指將第sj至tj列的每個元素與第j感知信號子序列包含的元素相加。

10、可選地，陣列中每行包含p個橡膠促進劑顆粒，p為大于1的整數(shù)，電子設(shè)備將k個感知信號序列中第i個感知信號序列的元素重定向到k個子陣中的第i個子陣的元素中，得到一個融合的特征，包括：電子設(shè)備根據(jù)陣列中每行包含p個橡膠促進劑顆粒，將第i個感知信號序列均分為p個感知信號子序列；電子設(shè)備將p個感知信號子序列中第j感知信號子序列包含的元素中隨機選擇一個元素，融合到第i個子陣的第sj至tj列中對應(yīng)的一個元素中，得到一個融合的特征；第i個子陣的列的數(shù)目m，m為大于1的整數(shù)，第sj至tj列的數(shù)目為floor(m/p)*j；其中，融合是指將將第j感知信號子序列包含的元素中隨機選擇一個元素與第sj至tj列中對應(yīng)的一個元素相加。

11、可選地，感知信號為通過zc序列或m序列或gold序列生成的信號。

12、第二方面，提供一種基于感知融合的橡膠促進劑顆粒質(zhì)量檢測裝置，該裝置被配置為：獲取針對多個橡膠促進劑顆粒拍攝的圖像；獲取通過對多個橡膠促進劑顆粒進行感知而得到的感知信號序列；通過ai/ml模型對圖像與感知信號序列進行多模態(tài)的維度融合檢測處理，得到檢測結(jié)果，檢測結(jié)果指示多個橡膠促進劑顆粒是否存在質(zhì)量缺陷的橡膠促進劑顆粒。

13、可選地，獲取通過對多個橡膠促進劑顆粒進行感知而得到的感知信號序列，包括：從感知接收機獲取感知信號序列，其中，感知發(fā)射機向多個橡膠促進劑顆粒發(fā)送感知信號，感知接收機通過接收感知信號的回波信號得到感知信號序列。

14、可選地，多個橡膠促進劑顆粒在檢測面板上以陣列的方式排列放置，感知發(fā)射機在指向陣列的行的方向上向陣列分別發(fā)送k個波束，k為大于1的整數(shù)，k個波束中任兩個波束覆蓋陣列的不同的行，k個波束覆蓋陣列的所有行，k個波束中每個波束對應(yīng)承載一個感知信號，共k個感知信號，感知接收機通過接收k個感知信號中每個感知信號的回波信號得到一個感知信號序列，共得到k個感知信號序列；相應(yīng)的，獲取針對多個橡膠促進劑顆粒拍攝的圖像，包括：從拍攝設(shè)備獲取拍攝設(shè)備針對多個橡膠促進劑顆粒拍攝的圖像；其中，拍攝設(shè)備的拍攝方向指向并垂直于檢測面板，拍攝設(shè)備對多個橡膠促進劑顆粒進行拍攝，得到圖像。

15、可選地，通過ai/ml模型對圖像與感知信號序列進行多模態(tài)的維度融合檢測處理，得到檢測結(jié)果，包括：通過ai/ml模型的特征提取層對圖像進行特征提取處理，得到圖像的特征；根據(jù)感知信號序列的數(shù)目為k個，將圖像的特征分割為k份，得到k個子特征，并將k個子特征與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征；通過ai/ml模型的特征處理層對k個融合的特征進行特征檢測處理，得到檢測結(jié)果。

16、可選地，圖像的特征的構(gòu)造為矩陣，感知信號序列與矩陣的行中的元素對應(yīng)；在此基礎(chǔ)上，根據(jù)感知信號序列的數(shù)目為k個，將圖像的特征分割為k份，得到k個子特征，并將k個子特征與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征，包括：根據(jù)感知信號序列的數(shù)目為k個，在矩陣的列的維度上進行分割，從而將矩陣均分為k個子陣，k個子陣中每個子陣為一個子特征，k個子陣中每個子陣的列的大小為矩陣的列的大小的floor(1/k)，floor()表示向下取整；將k個子陣與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征。

17、可選地，將k個子陣與k個感知信號序列一一對應(yīng)的進行融合，得到k個融合的特征，包括：將k個感知信號序列中第i個感知信號序列的元素重定向到k個子陣中的第i個子陣的元素中，得到一個融合的特征，i為整數(shù)，在i為遍歷1至k的整數(shù)的情況下，共得到k個融合的特征；其中，第i個感知信號序列的元素重定向到第i個子陣的元素中即第i個感知信號序列與第i個子陣融合。

18、可選地，陣列中每行包含p個橡膠促進劑顆粒，p為大于1的整數(shù)，將k個感知信號序列中第i個感知信號序列的元素重定向到k個子陣中的第i個子陣的元素中，得到一個融合的特征，包括：根據(jù)陣列中每行包含p個橡膠促進劑顆粒，將第i個感知信號序列均分為p個感知信號子序列；將p個感知信號子序列中第j感知信號子序列包含的元素，融合到第i個子陣的第sj至tj列的每個元素中，得到一個融合的特征；第i個子陣的列的數(shù)目m，m為大于1的整數(shù)，第sj至tj列的數(shù)目為floor(m/p)*j；其中，第j感知信號子序列包含的元素的數(shù)目為l個，l為大于1的整數(shù)，融合是指將先第sj至tj列的每個元素的構(gòu)造中添加l個0元素，再將l個0元素一一對應(yīng)的替換為第j感知信號子序列包含的元素；或者，融合是指將第sj至tj列的每個元素與第j感知信號子序列包含的元素相加。

19、可選地，陣列中每行包含p個橡膠促進劑顆粒，p為大于1的整數(shù)，將k個感知信號序列中第i個感知信號序列的元素重定向到k個子陣中的第i個子陣的元素中，得到一個融合的特征，包括：根據(jù)陣列中每行包含p個橡膠促進劑顆粒，將第i個感知信號序列均分為p個感知信號子序列；將p個感知信號子序列中第j感知信號子序列包含的元素中隨機選擇一個元素，融合到第i個子陣的第sj至tj列中對應(yīng)的一個元素中，得到一個融合的特征；第i個子陣的列的數(shù)目m，m為大于1的整數(shù)，第sj至tj列的數(shù)目為floor(m/p)*j；其中，融合是指將將第j感知信號子序列包含的元素中隨機選擇一個元素與第sj至tj列中對應(yīng)的一個元素相加。

20、可選地，感知信號為通過zc序列或m序列或gold序列生成的信號。

21、第三方面，提供一種計算機可讀存儲介質(zhì)，包括：計算機程序或指令；當該計算機程序或指令在計算機上運行時，使得該計算機執(zhí)行第一方面所述的方法。

22、綜上，上述方法及裝置具有如下技術(shù)效果：

23、電子設(shè)備可以分別獲取針對多個橡膠促進劑顆粒拍攝的圖像，以及通過對多個橡膠促進劑顆粒進行感知而得到的感知信號序列，這樣，電子設(shè)備通過ai/ml模型對該圖像與感知信號序列進行多模態(tài)的維度融合檢測處理，得到指示多個橡膠促進劑顆粒是否存在質(zhì)量缺陷的橡膠促進劑顆粒的檢測結(jié)果，如此通過將感知與圖像處理融合，能夠進一步提高提高橡膠促進劑顆粒質(zhì)量檢測的魯棒性和可靠性。