Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Beyond CLIP: Calibrated (Few-Shot) Defect Detection With System One Decision Models

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

62 RADAR
Research Computer Vision · 1 nguồn đối chiếu · 2026-10-30 03:21:02 +0000 UTC

Beyond CLIP: Calibrated (Few-Shot) Defect Detection With System One Decision Models

Nguồn: arXiv AI
↗

Nghiên cứu giới thiệu giải pháp phát hiện lỗi sản phẩm trong sản xuất với số lượng mẫu cực ít (k=2 ảnh mỗi lớp) bằng mô hình quyết định có cấu trúc Jev và Clef-Flash, vượt trội hơn CLIP (đạt độ chính xác 0.75-1.00 và 0.71-0.99 so với 0.67-0.84). Công trình đóng góp: (1) khung học k-shot cho kiểm tra hình ảnh, (2) phương pháp agentic tự động tinh chỉnh mô tả văn bản định hướng phân loại giúp cải thiện độ chính xác ở 6/8 cấu hình, và (3) kỹ thuật hiệu chuẩn xác suất lỗi giúp giảm điểm Brier ở 13/15 cấu hình. Tác giả đồng thời phát hành mã nguồn, gói R 'decisions' và ứng dụng web no-code phục vụ kiểm tra thực tế.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Giải quyết bài toán thắt nút cổ chai lớn nhất trong kiểm định sản xuất bằng AI: sự thiếu hụt dữ liệu sản phẩm lỗi. Thay vì cần hàng ngàn ảnh (mô hình truyền thống) hay 50-100 ảnh (CLIP), phương pháp này hạ yêu cầu xuống chỉ còn 2 ảnh tham chiếu nhưng đạt độ chính xác cao hơn, đi kèm xác suất được hiệu chuẩn đáng tin cậy và công cụ web no-code sẵn sàng ứng dụng thực tế.

Developer 72
Business 77
Novelty 76
Actionable 82

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Cameras and vision sensors are widely used for product and process inspection in manufacturing environments. Traditionally, this process required thousands of images of both nominal and defective products to train such models. Recent research shows that vision transformer (ViT) models, such as CLIP, can reduce this requirement to 50-100 images per nominal and defective class. However, collecting even 50 defective images can be difficult in high-yield or low-volume manufacturing processes. In this paper, we examine the utility of two recently proposed structured decision models (Jev and Clef-Flash) in applications using as few as k=2 reference images per class at inference. In the process, we provide three main contributions: (a) a framework for k-shot learning of these models for image classification/inspection applications; (b) an agentic approach for automatically refining the text descriptions that guide image classification in these decision models; and (c) an approach to calibrate the resulting defect probabilities to improve their reliability for inspection decisions. We test these contributions in five manufacturing case studies. Using two reference images per class, both Jev and Clef-Flash outperform CLIP's test accuracies with the same references (0.75-1.00 [Jev] and 0.71-0.99 [Clef-Flash] vs 0.67-0.84 [CLIP]). Furthermore, we show that our agentic refinement of text descriptions significantly improves accuracy across 6 of 8 model-application combinations, and our calibration approach reduces the Brier score in 13 of the 15 model-application configurations. To support the reproducibility of our work, we provide our replication code and have created the R "decisions" package for evaluating additional models. We also provide a publicly available web app that allows practitioners to inspect their own images with no code.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-11-02 10:23:41 +0000 UTC
{"tags": ["Few-Shot Learning", "Defect Detection", "Computer Vision", "Manufacturing", "CLIP", "Model Calibration", "Agentic AI"], "risks": ["Độ phụ thuộc cao vào chất lượng của 2 ảnh tham chiếu; ảnh mờ hoặc góc chụp không chuẩn có thể làm sai lệch kết quả phân loại.", "Độ chính xác vẫn có khoảng dao động nhất định (tối thiểu 0.71 ở Clef-Flash và 0.75 ở Jev), cần cơ chế xác minh bổ sung cho các ứng dụng có độ rủi ro an toàn cao.", "Chưa kiểm chứng đầy đủ trong các điều kiện môi trường công nghiệp phức tạp và biến đổi liên tục (ánh sáng thay đổi, bụi bẩn, rung lắc dây chuyền).", "Độ trễ xử lý từ các bước tinh chỉnh agentic có thể ảnh hưởng đến các dây chuyền sản xuất đòi hỏi tốc độ cao trong thời gian thực."], "category": "Research", "entities": ["CLIP", "Jev", "Clef-Flash", "R decisions package"], "summary_vi": "Nghiên cứu giới thiệu giải pháp phát hiện lỗi sản phẩm trong sản xuất với số lượng mẫu cực ít (k=2 ảnh mỗi lớp) bằng mô hình quyết định có cấu trúc Jev và Clef-Flash, vượt trội hơn CLIP (đạt độ chính xác 0.75-1.00 và 0.71-0.99 so với 0.67-0.84). Công trình đóng góp: (1) khung học k-shot cho kiểm tra hình ảnh, (2) phương pháp agentic tự động tinh chỉnh mô tả văn bản định hướng phân loại giúp cải thiện độ chính xác ở 6/8 cấu hình, và (3) kỹ thuật hiệu chuẩn xác suất lỗi giúp giảm điểm Brier ở 13/15 cấu hình. Tác giả đồng thời phát hành mã nguồn, gói R 'decisions' và ứng dụng web no-code phục vụ kiểm tra thực tế.", "key_changes": ["Ứng dụng mô hình quyết định cấu trúc (Jev, Clef-Flash) cho bài toán phát hiện lỗi chỉ với k=2 ảnh tham chiếu mỗi lớp.", "Đạt độ chính xác vượt trội so với CLIP: Jev (0.75-1.00) và Clef-Flash (0.71-0.99) so với CLIP (0.67-0.84) trên cùng 2 ảnh đối chứng.", "Phát triển cơ chế agentic tự động tối ưu hóa mô tả văn bản (text prompts) dẫn đường cho mô hình phân loại, cải thiện độ chính xác trên 6/8 cấu hình thử nghiệm.", "Đề xuất phương pháp hiệu chuẩn (calibration) xác suất lỗi, giảm điểm Brier ở 13/15 trường hợp nhằm tăng độ tin cậy khi ra quyết định kiểm định.", "Cung cấp gói thư viện R 'decisions', mã nguồn mở và ứng dụng web no-code cho phép doanh nghiệp kiểm thử trực tiếp trên ảnh thực tế."], "sub_category": "Computer Vision", "novelty_score": 76, "business_score": 85, "research_score": 82, "why_it_matters": "Giải quyết bài toán thắt nút cổ chai lớn nhất trong kiểm định sản xuất bằng AI: sự thiếu hụt dữ liệu sản phẩm lỗi. Thay vì cần hàng ngàn ảnh (mô hình truyền thống) hay 50-100 ảnh (CLIP), phương pháp này hạ yêu cầu xuống chỉ còn 2 ảnh tham chiếu nhưng đạt độ chính xác cao hơn, đi kèm xác suất được hiệu chuẩn đáng tin cậy và công cụ web no-code sẵn sàng ứng dụng thực tế.", "developer_score": 78, "importance_score": 78, "possible_use_cases": ["Kiểm soát chất lượng tự động trong dây chuyền sản xuất có sản lượng thấp hoặc sản phẩm tùy biến cao, nơi khó thu thập nhiều ảnh lỗi.", "Triển khai thị giác máy tính nhanh chóng trong quy trình sản xuất hiệu suất cao (high-yield) với chỉ 2 mẫu ảnh đối chứng cho mỗi loại lỗi.", "Tự động tinh chỉnh mô tả khiếm khuyết sản phẩm bằng AI agentic thay vì điều chỉnh thủ công bởi chuyên gia.", "Sử dụng ứng dụng web no-code cho các kỹ sư nhà máy đánh giá nhanh tính khả thi của mô hình phát hiện lỗi trên dữ liệu thực tế."], "actionability_score": 82}