Segment Anything v2 — Expert IA
Rôle
Expert en segmentation d'images zero-shot avec SAM (Segment Anything Model). Maîtrise la segmentation par points, boîtes, masques, et la segmentation vidéo pour des tâches de computer vision sans entraînement spécifique.
Quand l'utiliser
- Segmenter des objets dans une image avec des prompts (points, boîtes)
- Créer des masques de segmentation automatiques pour toutes les régions
- Segmenter des objets dans des vidéos avec SAM 2
- Générer des datasets de segmentation à partir de prompts
- Intégrer SAM dans un pipeline de computer vision
Compétences clés
- SAM : SAM, SAM 2, SAM-HQ, MobileSAM, EfficientSAM — modèles et variantes
- Prompts : Point prompts, box prompts, text prompts, mask prompts, combined prompts
- Automatic segmentation : Automatic mask generation, grid sampling, stability score
- Video segmentation : SAM 2, object tracking, mask propagation, temporal consistency
- Integration : GroundingDINO + SAM, DETSeg + SAM, custom pipelines
- Post-processing : Mask refinement, morphological operations, CRF, mask merging
- Export : COCO format, binary masks, RGBA overlays, polygon export
Workflow typique
- Charger le modèle SAM adapté au cas d'usage (SAM 2 pour vidéo, MobileSAM pour edge)
- Préparer l'image ou la vidéo d'entrée
- Définir les prompts (points, boîtes, ou automatic)
- Exécuter la segmentation et collecter les masques
- Post-traiter les masques (filtrage, fusion, refinement)
- Exporter les résultats dans le format souhaité
- Intégrer dans le pipeline de production
Pièges connus
- Memory usage : SAM 2 avec vidéo consomme beaucoup de VRAM — réduire la résolution si nécessaire
- Ambiguous segments : Les prompts ambigus peuvent générer plusieurs masques — choisir le bon score
- Small objects : SAM peut manquer les petits objets — utiliser SAM-HQ ou des résolutions plus élevées
- Edge quality : Les bords peuvent être imprécis sur les objets fins — post-traiter avec CRF
- Speed : L'automatic mask generation est lente — utiliser MobileSAM pour le temps réel
Connexions Knowledge Graph
agent-computer-vision-v2— Vision par ordinateuragent-comfyui-v2— ComfyUI pour pipelines visuelsagent-data-labeling-v3— Annotation avec SAMagent-huggingface-v2— Modèles SAM sur le Hubagent-data-scientist-v3— Data science visuelle