Microsoft Research Modèle d'embedding de texte

Multilingual E5.

Représentation vectorielle des requêtes et des fragments de documents

4.35 / 5Évaluation du catalogue
Site officiel

Le modèle affiche les représentations numériques des textes. La recherche et l'affichage des fragments originaux implémentent une application qui compare les vecteurs reçus.

Carte Multilingual E5 avec exemples de requêtes codées
Carte Multilingual E5 avec des exemples de requêtes codées. Ouvrir la source

Trouver un document, même si la langue est différente

Prenez la question en russe sur le délai de remplacement et deux courts extraits de l'aide anglaise. L'un décrit le remplacement, le deuxième retour de la marchandise. Multilingual E5 les convertit en vecteurs que l'application compare. Le modèle laisse une réponse au manuel d'origine ou au composant suivant. Il est utile que l'utilisateur affiche le paragraphe d'origine avec le résultat de la recherche afin qu'il puisse vérifier si la règle s'applique au cas approprié.

Les entrées doivent être codées de la même manière lors de la répétition

Pour la recherche, la fiche du modèle indique les préfixes query et passage. Utilisez chacun pour le type d'entrée prévu et gardez la même version des poids pour les vecteurs des requêtes et de l'index. Si vous découpez un document long uniquement selon la longueur, une règle et son exception peuvent se retrouver dans des passages différents. Essayez un découpage par unités de sens et conservez l'emplacement de chaque paragraphe pour retrouver le passage intégral.

Ajoutez des exemples similaires qui ne conviennent pas

Testez une requête avec une négation et un cas où les délais varient selon la catégorie de produits. Un passage similaire peut sembler pertinent tout en parlant d'une autre catégorie. Comparez la qualité sur les paires de langues dont vous avez besoin. Si vous changez les poids, reconstruisez l'index et reprenez les mêmes questions. Évitez de mélanger les vecteurs de différents modèles dans un même espace de recherche, même si leur dimension est identique. Examinez les cas où le bon passage figure dans la base mais où la recherche a classé une autre règle devant lui.

Pour quelles tâches convient-il

  • Trouver un extrait d'aide dans une autre langue
  • Comparer des extraits courts et longs lors de la recherche
Fonctionnalités

Les points forts

  • Prend en charge la vectorisation du texte dans différentes langues
  • La carte montre des exemples via Transformers et Sentence Transformers
Il faut prendre en compte

Limites

  • La qualité dépend de la langue, de la longueur et de la fragmentation des fragments
  • Un texte similaire trouvé peut se rapporter à une autre condition

Choix et conditions

Mode gratuit
Oui
Période d'essai
Non confirmé
Sans inscription
Non confirmé
Interface en russe
Non confirmé
Installation locale
Oui
API
Non confirmé

« Non confirmé » signifie que les informations disponibles ne suffisent pas. La fonctionnalité peut exister ; vérifiez les conditions du développeur.

Formats d’entrée
Texte
Résultat
Embedding

Conditions

Les poids sont publiés sous la licence indiquée dans la fiche du modèle. L'indexation, le calcul et l'hébergement sont à organiser séparément. La qualité dépend de la langue, de la longueur des passages et du découpage du texte.

De la tâche au premier résultat

Exemple pratique

Tâche
Trouver un extrait d'aide dans une autre langue
Que préparer
Deux courts textes à vous et plusieurs questions de recherche dans une même langue.

Consigne ou requête

Tâche de l’application : produire les embeddings des textes et des requêtes, relier chaque vecteur au passage d’origine et comparer leur proximité. Afficher le texte d’origine du passage trouvé ; le modèle d’embeddings ne rédige pas de réponse.

Résultat attendu

Représentations numériques et restitution vérifiable de passages proches, si l’application met en œuvre la recherche.

Comment vérifier le résultat

  • Vérifiez la correspondance du résultat avec le texte d’origine.
  • Comparez des vecteurs du même modèle et de même dimension ; testez séparément les négations et la recherche entre langues.

Cet exemple pédagogique préparé par la rédaction décrit une tâche ; il ne présente pas le résultat d’un test personnel du service. Vérifiez la disponibilité du mode requis, les droits sur les fichiers d’origine et les conditions d’utilisation du résultat.

Vérifier les détails

Sources officielles

  1. Carte Multilingual E5 Large
  2. Microsoft Research à l'E5
  3. Famille de modèles multilingues E5

La description est faite à partir des matériaux du développeur. Les fonctionnalités, les prix et la disponibilité peuvent varier; vérifiez la source avant de l'utiliser.