MM-RAG de recommandation de vêtements avec prix et liens et analyse stylistique

Étude de cas

Le challenge

Avoir un système IA d'analyse stylistique + MM-RAG recommandation de tenues au style similaires à l'image uploadée, avec prix et liens

• Pouvoir mettre à jour facilement le jeu de données, et ainsi éviter de lancer des entraînements continuels d'un modèle.
• Avoir un modèle de vision spécifique pour le RAG, précis pour recommander des tenues
• Avoir un 2ème modèle vision spécifique à l'analyse stylistique, suffisament capable, exemple les modèles Pixtral de Mistral AI.

Résultats et évaluation

• ⚡ Pas besoin de reranker 100% de précision atteinte dans la reconnaissance des vètements du jeu de données (les tenues de Taylor Swift) grâce au modèle ConvNeXt-Tiny (2022). Les modèles plus anciens en étaients incapables.
• Analyse stylistique poussé et reconnaissances des matières, des formes des tenues grâce au modèle Pixtral Large de Mistral AI.
• 🔄 Mise à jour facile des données car pas d'entraînement requis ce qui est un avatange non négligeable. Il suffit d'ajouter des tenues dans le jeu de données.
• 📊 Latence correct d'environ 10-15 secondes. Pour la recherche MM-RAG + l'analyse stylistique de Pixtral

  Montoring dans LangSmith