英特爾開發(fā)板試用：圖像檢測算法在RFID生產(chǎn)中產(chǎn)品缺陷檢測的應(yīng)用

我們公司是一個RFID電子標(biāo)簽生產(chǎn)制造企業(yè)，隨著AI技術(shù)的發(fā)展，我們將新的技術(shù)積極引入生產(chǎn)環(huán)節(jié)中，以便解決生產(chǎn)環(huán)節(jié)遇到的問題以及降低用工成本。

以下是我們在RFID生產(chǎn)中遇到的問題：

芯片綁定中的缺陷產(chǎn)品的檢測

1.1 芯片綁定流程的介紹

（1）點(diǎn)膠

該流程采用點(diǎn)膠控制器，通過特定針筒在天線基板上特定位置點(diǎn)上膠水，把天線和芯片粘合在一起，并經(jīng)過高溫固化，電性能檢測，最終分切成單排并回收成卷狀干標(biāo)簽的生產(chǎn)過程。

（2）固晶

首先對晶圓中的芯片進(jìn)行拾取并翻轉(zhuǎn)，然后有拾取頭拾取并貼裝到天線基板上已點(diǎn)膠的位置，完成對芯片的倒轉(zhuǎn)貼裝任務(wù)。

（3）熱壓

通過熱壓頭對芯片與天線的連接部位進(jìn)行加熱、加壓，使得膠水固化，完成芯片與天線的連接。

（4）測試

在收卷之前對粘接好芯片的RFID電子標(biāo)簽進(jìn)行測試，對不符合要求的標(biāo)簽打上標(biāo)識。

1.2 綁定流程中存在的問題

綁定流程的最后一道工序是測試RFID電子標(biāo)簽的良率，將壞標(biāo)簽剔除，但是無法知道損壞的原因，不利于操作人員及時調(diào)整生產(chǎn)參數(shù)。

如果使用圖像識別在熱壓環(huán)節(jié)進(jìn)行前道檢測，不但可以減低測試環(huán)節(jié)的設(shè)備成本，還能分析問題原因。

例如下圖的幾種情況：

訓(xùn)練樣本

除了以上缺陷還有可能存在芯片裂紋等問題，讓操作員可以提早定位問題，提早干預(yù)。

標(biāo)簽復(fù)合中的缺陷產(chǎn)品的檢測

在標(biāo)簽復(fù)合流程中，主要是外觀缺陷的檢測，例如下圖中標(biāo)注出的臟點(diǎn)。

這道工序中，使用圖像識別可以節(jié)省用于外觀檢測的工人，降低用工成本。

使用AI模型調(diào)用攝像頭檢測產(chǎn)品缺陷，方法描述：

（1）原型展示

（2）識別算法的描述

使用 YOLOv8 Detect 模型轉(zhuǎn)成 OpenVINO 模型，使用 python 對1200個樣本進(jìn)行訓(xùn)練，得到檢測模型，再使用C#+OpenVINO 實(shí)現(xiàn)模型的部署。

from ultralytics import YOLO 

import cv2
# Load a model
model = YOLO('yolov8n.yaml')  # build a new model from YAML
model = YOLO('yolov8n-seg.pt')  # load a pretrained model (recommended for training)
model = YOLO('yolov8n.yaml').load('yolov8n.pt')  # build from YAML and transfer weights

# Train the model
dsPath = r'c:Usersucard_liuhyDesktopinkdotinkdot.v1i.yolov8data.yaml'
results = model.train(data=dsPath, epochs=100, imgsz=640)

img_path = r'c:Usersucard_liuhyDesktopinkdotcaptured_image_20240905_150621.jpg'  # Update this path to your image file

# Perform prediction
results = model.predict(img_path)

#results = model([img_path])  # return a list of Results objects

# Process results list
for result in results:
    boxes = result.boxes  # Boxes object for bounding box outputs
    masks = result.masks  # Masks object for segmentation masks outputs
    keypoints = result.keypoints  # Keypoints object for pose outputs
    probs = result.probs  # Probs object for classification outputs
    result.show()  # display to screen
    result.save(filename='result.jpg')  # save to disk

最終的實(shí)現(xiàn)效果：

綁定流程的缺陷檢測，使得原先只能在訂單完成后才能進(jìn)行的缺陷分析步驟，提升為在線實(shí)時分析。這樣可以體現(xiàn)修改生產(chǎn)參數(shù)，降低部分原因(如溢膠)導(dǎo)致的缺陷率。

復(fù)合流程的缺陷檢測，使得原先由2個工人負(fù)責(zé)的檢測環(huán)節(jié)，降低到1個人負(fù)責(zé)。