2026 · IA / ML / Vision par ordinateur
Légendage d’images Show and Tell
Génération de légendes à partir d’images COCO avec un encodeur-décodeur PyTorch.
- Image source
- ResNet et décodage LSTM
- Légende générée
Projet de vision par ordinateurGitHub ↗
Problème
Générer une description courte d’une image en langage naturel.
Mon rôle
Implémentation de l’entraînement, de l’inférence, de l’évaluation et des interfaces de démonstration.
Démarche
- Encoder les images avec ResNet-50 préentraîné.
- Entraîner un décodeur LSTM avec les mots de référence.
- Comparer les décodages glouton et par faisceau et examiner les échecs.
Résultats
- Le dépôt rapporte un BLEU-1 de 0,656 et un BLEU-4 de 0,207 en validation et montre des prédictions et des cas d’échec.
Technologies
- Python
- PyTorch
- COCO
- BLEU