Grounding DINO

التعريف

Grounding DINO هو كاشف مفتوح المفردات: بدلاً من قائمة فئات ثابتة، يقبل مطالبات نصية حرة مثل 'عامل بدون خوذة' أو 'تسرب نفطي' ويحدد المناطق المطابقة في الصورة. يقرن مشفر صور المحول Swin مع مشفر النص BERT والاندماج عبر الوسائط. يتفوق أداء التعلم بدون أمثلة على فئات صناعية جديدة على YOLO الخاضع للإشراف عندما تكون بيانات التدريب نادرة. تستخدم إف آي تك Grounding DINO كأداة وسم تلقائية — تمهيد مجموعات التدريب لفئات جديدة (مغطى مكشوف، أنبوب سقالة مكسور، لوح أصابع مفقود) دون أسابيع من الوسم اليدوي. بمجرد تراكم 5000 ملصق، نقطر إلى نموذج طالب YOLO أسرع.