為了解決傳統(tǒng)溯源電子秤不夠智能、操作繁瑣的問題，設(shè)計了一種新型果蔬圖像溯源秤系統(tǒng)。系統(tǒng)采用C/S架構(gòu)，包括溯 源秤客戶端和服務(wù)端兩大部分，客戶端基于圖像處理技術(shù)可以通過攝像頭采集果蔬圖像來實現(xiàn)果蔬產(chǎn)品的自動售賣，服務(wù)端 通過Wi-Fi遠程管理客戶端，整個系統(tǒng)都是利用QT框架開發(fā)。重點研究了基于顏色紋理特征的多類SVM果蔬圖像識別算 法、QT圖形界面開發(fā)、基于Tcp協(xié)議的網(wǎng)絡(luò)通信開發(fā)等。系統(tǒng)測試表明：果蔬圖像識別速度快捷、識別率高，系統(tǒng)整體功能工 作良好，可以滿足實際使用需求。

隨著國家對于食品溯源體系建設(shè)的日益重 視，商務(wù)部“肉類蔬菜流通追溯體系”正在緊鑼密 鼓的開展中。溯源秤作為集計量稱重、打印憑 證、無線通訊、電子結(jié)算、數(shù)據(jù)上傳為一體的終端 設(shè)備，通過與物聯(lián)網(wǎng)技術(shù)的“嫁接”，已經(jīng)成為了食 品流通追溯體系中的關(guān)鍵一環(huán)|31。目前傳統(tǒng)的溯 源秤主要采用人工記憶輸人或二維碼標簽、RFID 標簽掃描的形式來輸人果蔬產(chǎn)品的類別信息，不 僅需要耗費大量的人力物力成木，同時也不利于 果蔬產(chǎn)品的自動售賣。為解決上述問題，木文開 發(fā)研究了基于圖像處理的果蔬溯源秤系統(tǒng)。木系 統(tǒng)采用C/S架構(gòu)模式，客戶端和服務(wù)端之間采用 無線網(wǎng)絡(luò)進行數(shù)據(jù)通信，其中客戶端運行在嵌入 式系統(tǒng)平臺上，負責果蔬銷售功能和果蔬圖像識 別；服務(wù)端運行在PC機平臺上，負責對客戶端銷 售的信息進行管理。

1.系統(tǒng)方案論述

木文提出了一種新型果蔬圖像識別溯源秤系 統(tǒng)，溯源秤系統(tǒng)包括溯源秤客戶端和溯源秤服務(wù)端 軟件，其具體要求與功能為：溯源秤客戶端具有果 蔬識別和常規(guī)電子秤功能，果蔬識別采用木文提出的基于顏色和紋理特征的多類SVM分類算法。本 客戶端軟件通過Wi-Fi模塊與服務(wù)端軟件進行數(shù) 據(jù)通信，進行溯源信息的上傳與下載。服務(wù)端軟件 主要負責溯源信息的管理，管理員在PC端登錄服 務(wù)端軟件，對銷售的果蔬溯源信息進行錄人，并且 可以通過無線網(wǎng)絡(luò)遠程管理客戶端上的數(shù)據(jù)。通 過客戶端和服務(wù)端的協(xié)作，整個溯源秤系統(tǒng)可以完 成果蔬產(chǎn)品的自動售賣以及實現(xiàn)果蔬產(chǎn)品信息的 追溯功能。

2.系統(tǒng)設(shè)計

溯源秤客戶端運行在Linux系統(tǒng)上，運行于PC 的溯源秤服務(wù)端軟件和溯源秤客戶端運行的應(yīng)用 程序都是利用QT開發(fā)。溯源秤客戶端和服務(wù)端的 組成框圖如圖1、圖2所示。客戶端主要需要完成 圖像采集、圖像識別、稱重信息顯示、無線通信等功 能。服務(wù)端主要負責溯源信息管理以及與客戶端 之間進行網(wǎng)絡(luò)通信。

 2.1硬件設(shè)計

2.1.1Tiny210V2開發(fā)板平臺

本系統(tǒng)使用的嵌人式開發(fā)平臺為Tiny210V2開發(fā)板4。該開發(fā)板是一款高性 能 Cortex-A8核心板，米用了 Samsung S5PV210 作 為處理器，運行主頻高達1 GHz，64/32位內(nèi)部總線結(jié) 構(gòu)，可以實現(xiàn)2 000 DM instraction/s(每秒運算2億條 指令集）的高性能運算能力，內(nèi)部集成了 PowerVR SGX540高性能圖形引擎，可以流暢運行Android, Linux和WinCE6等高級操作系統(tǒng)，具有低功耗高效 率的特性，能夠充分滿足溯源秤系統(tǒng)的基本要求。

Tiny210V2開發(fā)板米用了核心板加底板的設(shè)計 方法，如圖3和圖4所示。核心板上主要有 S5PV210 處理器，512 Mbyte DDR2 RAM 內(nèi)存，512 Mbyte NAND Flash存儲器以及若干與底板連接的 接口等。底板上主要有LCD顯示屏接口、網(wǎng)口、 RS232 串口、SD 卡座、USB 接 口、SDIO Wi-Fi 接 口 等硬件資源。

2.1.2USB攝像頭選取

本系統(tǒng)中選用USB攝像頭作為圖像采集丁具， 使用USB攝像頭的優(yōu)點是即插即用，并且Linux系 統(tǒng)上可以通過V4L2驅(qū)動來配置USB攝像頭的幀 率、圖像壓縮格式、圖像大小等參數(shù)，便于程序優(yōu) 化。同時，考慮到溯源秤大小有限，為了方便以后開 模加丁，攝像頭體積應(yīng)該比較小巧。據(jù)此，本系統(tǒng)選 擇的攝像頭為HDF9655-BJ，該產(chǎn)品主要應(yīng)用于筆 記本電腦、一體機、小型攝像機，USB輸出，130萬像 素，符合VGA標準。攝像頭實拍圖如圖5所示。

2.1.3Zigbee無線傳輸模塊

本系統(tǒng)使用的Wi-Fi模塊是友善之臂公司提 供的基于Marvell 8686芯片的SD Wi-Fi模塊，如 圖6所示。

該模塊具有低功耗、高性能的特點，通過 Tiny210 SDK底板上的 SDIO 接口與 Tiny210V2 開發(fā)板連接使用。該模塊丁作特性為：（1)支持

IEEE 802.11b/g； (2) 11g： 54/48/36/24/18/12/9/6M 自 適應(yīng)；（3)11b: 11/5.5/2/1M自適應(yīng)；（4)常規(guī)功耗 (3.3 V 供電）：180 mA(接收）270 mA(發(fā)送）。

2.2溯源枰客戶端軟件設(shè)計

2.2.1系統(tǒng)工作流程

本系統(tǒng)在丁作時，首先撥動開發(fā)板上電開關(guān)， Linux系統(tǒng)啟動后自動加載溯源秤客戶端軟件，加 載數(shù)據(jù)庫以及SVM圖像樣本特征庫，隨后開啟串口 通信和網(wǎng)絡(luò)通信線程，等待接收數(shù)據(jù)，并顯示出軟 件操作界面等待用戶操作。用戶打開攝像頭后，攝 像頭采集到YUV格式的圖片，轉(zhuǎn)換成QImage格式 并實時顯示在LCD屏上，隨后進行圖像處理和識別 過程，識別出果蔬產(chǎn)品的種類后，結(jié)合數(shù)據(jù)庫中的 信息將交易結(jié)果顯示在屏幕上，即完成一筆自動售 賣交易。交易結(jié)果可以通過無線網(wǎng)發(fā)送到遠程的 服務(wù)端軟件內(nèi)。丁作流程如圖7所示。

2.2.2果蔬圖像數(shù)據(jù)庫構(gòu)建

為了模擬溯源秤的實際使用環(huán)境，本系統(tǒng)搭建 了如圖8所示的圖像采集裝置。以超市常用的ACS 電子秤為基礎(chǔ)，安裝了開發(fā)板和USB攝像頭。其中 攝像頭安裝在電子秤的頂部，斜向下約45°拍攝，秤盤大小為32 cmX24 cm，攝像頭距離秤盤垂直高度為 35 cm。米用基于Tiny210V2開發(fā)板自主開發(fā)的圖 像采集軟件，來采集果蔬圖像，果蔬產(chǎn)品的擺放位置 隨機，個數(shù)隨機，包含了貼近、堆疊、粘連等情況。

本文構(gòu)建的果蔬圖像數(shù)據(jù)庫一共包含13種果 蔬，包括蘋果、香蕉、桃子、梨、獼猴桃、火龍果、提 子、土豆、西紅柿、黃瓜、西蘭花、青菜、油麥菜。為 了保證構(gòu)建的圖像數(shù)據(jù)庫盡可能接近實際光照情 況，設(shè)計了 6種光照，包括陰影(光強73 cd)、弱側(cè)光 (光強103 cd)、強測光（光強118 cd)、室內(nèi)光（光強 98 cd)、正面強光（光強124 cd)、正面弱光（光強 110 cd)。所有的果蔬在每種光照下拍攝260張照 片，六種光照下果蔬圖片共計1 560張。

2.2.3果蔬圖像預處理

作為一款應(yīng)用于超市、菜市場里的實用產(chǎn)品，周 圍的圖像采集環(huán)境肯定不是一成不變的，亮度不均勻、 陰影、遮擋、鏡面反光、背景混亂以及攝像頭可能存在 缺陷導致拍攝圖像失真，這些因素都會嚴重的影響果 蔬農(nóng)產(chǎn)品的識別。在與處理中，將果蔬產(chǎn)品與背景準 確的分割開來是圖像預處理的關(guān)鍵步驟，本文采用了 一種基于Lab顏色空間的K均值聚類分割算法。

預處理主要步驟如下：（1)對攝像頭采集到的 圖片進行切割處理，由于設(shè)備攝像頭位置同定，故 僅保留圖片中秤盤內(nèi)的部分，可以切除外圍的干 擾；（2)對切割后的圖片進行中值濾波；（3)將RGB 彩色圖像轉(zhuǎn)換到Lab顏色空間，采用K均值聚類方 法對圖像進行分割；（4)對分割后的二值圖像進行 形態(tài)學處理，填充孔洞；（5)中值濾波后的圖片與形 態(tài)學處理后的圖片做交集，即得到去除背景后的果 蔬圖片。圖9為預處理前后圖像。

2.2.4特征提取

通常，描述果蔬圖像的特征一般包括顏色特 征、紋理特征。本系統(tǒng)提取了 HSV全局顏色直方圖 作為顏色特征，提取了局部二值模型（LBP)作為紋 理特征。下面簡要給出這兩種特征的提取方法。

2.2.4.1顏色特征

HSV顏色直方圖按照公式（1)計算，通過計算 可以得到一個256維的顏色直方圖：

L = HxQgxQV + SxQV + V ⑴

式中：H、S , V是量化后的顏色分量，本文將H分 量非均勻量化為16級，S、分量分別均勻量化為 4級；Qs、Qv分別為S、分量的量化級數(shù)。

2.2.4.2紋理特征

局部二值化模式LBP(Local Binary Pattern)最早 是由Ojala^81等人在1996年提出，由于具有計算速 度快和實現(xiàn)簡單的優(yōu)點，而且該方法是計算局部的紋 理特征，對光線變化具有較好的承受能力，可以得到 良好的識別效果，得到了許多研究人員的認可，現(xiàn)在 多將其應(yīng)用于圖像紋理特征的提取上，因此本文提取 果蔬圖像的LBP特征作為紋理特征用于果蔬識別。

圖10是一個LBP編碼過程例子，首先使用一 個3x3大小的窗口從原始圖像中取出對應(yīng)像素值， 通過中心點閾值化，得到LBP 二進制編碼，再與權(quán) 值窗口中對應(yīng)的權(quán)值相乘，即可得到中心點對應(yīng)的 LBP十進制編碼值。

2.2.3基于顏色紋理特征的多類SVM果蔬圖像識 別算法

本文提取果蔬圖像的顏色紋理特征，并通過多 類SVM分類器191進行識別，整個果蔬識別算法流程 如圖11所示。訓練階段，首先將樣本圖像進行預處 理，然后提取果蔬圖像的GCH特征(256維）和LBP 特征(256維），將這兩種特征采用級聯(lián)的方式融合 成圖像特征矢量(512維），并采用最大最小歸一化 方法歸一化到0和1之間，隨后，使用一對一(OAO) SVM多類分類器11101進行訓練，得到分類器模型。其 中，SVM的核函數(shù)均為徑向基函數(shù)RBF(Radial Ba-sis Function);在一對一SVM分類器訓練時，米用5 折交叉驗證法進行訓練，然后采用網(wǎng)格搜索法來得 到最優(yōu)的懲罰因子C和RBF核函數(shù)的參數(shù)g。

測試階段，首先讀人測試圖像，進行預處理、提取特 征并歸一化(方法同訓練過程)，然后，將待測圖像特征 輸人訓練好的多類SVM分類器中，即可得至IJ識別結(jié)果。

在實際編程實現(xiàn)時，先在MATLAB中訓練好 SVM模型，將模型導出為SVM.Model模型文件供 溯源枰系統(tǒng)客戶端軟件在進行果蔬識別時使用。

2.3溯源秤服務(wù)端軟件設(shè)計

Qt是1991年奇趣科技開發(fā)的一個跨平臺的 C++圖形用戶界面應(yīng)用程序框架lul。它提供給應(yīng)用 程序開發(fā)者建立藝術(shù)級的圖形用戶界面所需的所 用功能。本設(shè)計的上位機軟件正是用QT開發(fā)，選 用的集成開發(fā)環(huán)境是Qt Creator。

2.3.1信息管理模塊

信息管理界面是數(shù)據(jù)庫與用戶直接交互的工 具，需要具備信息錄人、信息修改、信息刪除以及信 息查詢這4個主要功能。主界面分為5個Tab頁’ 分別是商戶信息、商品信息、交易信息、賬號密碼和 網(wǎng)絡(luò)管理。服務(wù)端和客戶端都采用Sqlite3數(shù)據(jù) 庫1121來存儲溯源數(shù)據(jù)信息。

商戶信息Tab頁如圖12所示，包含該商戶的名 稱、電話、經(jīng)營主體備案號以及商戶的地址。直接在 輸人框內(nèi)輸人相應(yīng)信息，然后單擊“保存”，商戶信息 隨后會寫人服務(wù)端數(shù)據(jù)庫。點擊“取消”后，輸人框 內(nèi)的信息會清空，同時數(shù)據(jù)庫清除商戶信息數(shù)據(jù)。

商品信息Tab頁，用于果蔬產(chǎn)品信息的輸人、 修改、查詢，采用Qt中的QTabelView表格控件來顯 示，如圖13所示。

交易信息Tab頁用于顯示和查詢客戶端的交易 信息，如圖14所示。為了保證溯源信息不被修改， 本頁面只提供數(shù)據(jù)檢索和數(shù)據(jù)刪除功能，不提供數(shù) 據(jù)添加和數(shù)據(jù)修改功能。

本系統(tǒng)的服務(wù)端和客戶端采用的是基于無線 網(wǎng)絡(luò)的Tcp通信，服務(wù)端軟件主要負責創(chuàng)建服務(wù)端 口，等待客戶端建立Tcp通信，網(wǎng)絡(luò)管理界面如圖15 所示。在使用時，輸人本機IP地址及網(wǎng)絡(luò)端口號， 點擊開啟服務(wù)，待客戶端狀態(tài)由“未連接”變成“已 連接”時，即可點擊右側(cè)相應(yīng)按鈕進行數(shù)據(jù)通信。

本服務(wù)端軟件初始賬戶為Admin賬戶，在實際 使用時可以根據(jù)需要在該頁面修改Admin賬戶的密 碼，或者為其他管理員新創(chuàng)建賬戶密碼。具體界面 如圖16所示。

2.3.2網(wǎng)絡(luò)通信模塊

Qt 提供了 的 QTcpSocket 類和 QUdpSocket 類， 分別對應(yīng)實現(xiàn)TCP和UDP傳輸協(xié)議。TCP是面向 連接的基于數(shù)據(jù)流的可靠傳輸協(xié)議，適用于連續(xù)大 量的數(shù)據(jù)傳輸;UDP是輕量級無連接的基于數(shù)據(jù)報 文的不可靠傳輸協(xié)議，適用于離散信息包在網(wǎng)絡(luò)節(jié) 點間傳輸。為了保證客戶端和服務(wù)端之間數(shù)據(jù)傳輸 的正確可靠，本系統(tǒng)選擇使用TCP協(xié)議來進行數(shù)據(jù) 傳輸，TCP服務(wù)端和客戶端創(chuàng)建流程如圖17所示。

服務(wù)端軟件和客戶端軟件中，網(wǎng)絡(luò)通信模塊都 是在單獨的線程中運行，這樣可以實時進行數(shù)據(jù)的 上傳下載以及數(shù)據(jù)庫的更新。為了方便數(shù)據(jù)傳輸 和解析，本系統(tǒng)按照自定義的通信巾貞協(xié)議來傳輸數(shù) 據(jù)庫表中的數(shù)據(jù)，數(shù)據(jù)通信幀格式見表1和表2。

其中每組數(shù)據(jù)之間用“％”間隔，不同字段之間用” &”間隔，并且字段與字段之間的順序嚴格按照數(shù)據(jù)庫 表設(shè)計的順序排列。月艮務(wù)端和客戶端通信采用字符串 流的形式傳輸數(shù)據(jù)，且每次通信發(fā)起方都是服務(wù)端。 客戶端在正確收到服務(wù)端的請求后，立即回復表2中 的”10ACK”幀命令，隨后再完成服務(wù)端請求中要實現(xiàn) 的功能，如保存信息、刪除信息、更新系統(tǒng)時間等。

3.系統(tǒng)測試

系統(tǒng)開發(fā)完畢后，為了測試本系統(tǒng)的性能，搭建 了如圖18的系統(tǒng)聯(lián)試環(huán)境。主要包括ACS電子秤 一臺、USB攝像頭一個、安裝了溯源秤客戶端軟件的 Tiny210V2開發(fā)板一套、安裝了溯源秤服務(wù)端軟件的 筆記本電腦一臺、無線路由器一臺以及串口線兩根等。

打開攝像頭，將兩個蘋果隨意擺放在秤盤上， 如圖19所示，從圖像顯示區(qū)可以實時看到USB攝 像頭采集到的蘋果的圖像，同時將蘋果的重量 0.346 kg顯示在屏幕上，此時交易按鈕處于使能狀 態(tài)，等待點擊開始果蔬識別并交易。

單擊“交易”按鈕后，后臺開始對采集到的果蔬 圖像進行識別，等待約3 s，彈出交易對話框。對話框 中給出3種備選產(chǎn)品類別，依次為OAO SVM分類器 獲得的投票數(shù)排名前三的果蔬類別，等待用戶確認。

點擊人工確認的產(chǎn)品名稱所在的按鈕，客戶端軟 件根據(jù)產(chǎn)品名查詢數(shù)據(jù)庫，得到本次交易信息詳情，如 圖20所示，顯示在QLable控件內(nèi)。隨后，點擊“確認 購買”，本次交易完成并且將交易信息寫人數(shù)據(jù)庫內(nèi)。

在當天銷售結(jié)束后，通過點擊服務(wù)端軟件的網(wǎng) 絡(luò)管理模塊的“接收交易信息”按鈕，客戶端將交易 信息上報至服務(wù)端，服務(wù)端將交易內(nèi)容寫人數(shù)據(jù)庫 并在交易信息Tab頁內(nèi)顯示，如圖21所示。

本次交易中的蘋果圖像識別總耗時約2.303s，識 別過程中各階段耗時如表3所示。

其中預處理階段耗時最長，占總耗時的66.17%， 由于使用了基于LAB顏色空間的K-means聚類算 法，聚類時需要對圖像中每個像素點與聚類中心計算 歐式距離，因此所需計算量較大，耗時較長。

為了測試溯源秤客戶端在實際環(huán)境下對數(shù)據(jù)庫中 的13種果蔬的識別能力，定義圖20交易界面中的 OAO SVM分類獲得票數(shù)最高的識別結(jié)果為直接識別 結(jié)果;定義3種備選結(jié)果中至少包含一次正確類別的結(jié) 果為自動識別結(jié)果。對這13種果蔬分別進行20次試 驗，每次試驗擺放個數(shù)不定，擺放姿態(tài)隨意，記錄如表4 所示。從表4可以看出系統(tǒng)的平均果蔬自動識別率達 到了 97%，且平均識別時間在2.5 s內(nèi)，是在用戶使用時 的允許等待時間范圍內(nèi)。果蔬實地測試結(jié)果表明本果 蔬溯源秤系統(tǒng)的識別功能具有較高的實用價值。

4.結(jié)論

本文利用果蔬圖像識別技術(shù)，設(shè)計了一種新型 果蔬圖像溯源秤，解決了目前市場上現(xiàn)有的溯源秤 不夠智能、不易于自動售賣的問題。文中詳細給出了溯源秤各功能模塊的開發(fā)設(shè)計方法，并在最后對 整個系統(tǒng)進行了實地測試，測試驗證了系統(tǒng)能夠穩(wěn) 定運行，并且具有較好的果蔬自動識別能力，可以 滿足超市、菜場等地的自動售賣需求。