Le modèle utilise les lignes marquées comme contexte de la tâche. Pour l'évaluation, vous avez besoin de lignes individuelles qui n'ont pas participé à la préparation et au choix des paramètres.
Un objet peut donner plusieurs lignes
Dans le tableau de formation au contrôle de la qualité, un échantillon est mesuré plusieurs fois. Si vous mélangez les lignes par hasard, des mesures similaires seront à la fois en préparation et en vérification. TabPFN utilise des exemples balisés lors de l'utilisation de nouvelles lignes, de sorte qu'une telle partition facilite trop la tâche. Mettez de côté des groupes entiers d'échantillons ou sélectionnez une période ultérieure si le modèle est nécessaire pour les lots suivants.
Comment comparer les classificateurs
Préparez les colonnes avec des mesures et un point de référence distinct. Supprimez les enregistrements qui ne sont disponibles qu'après une décision de mariage manuelle. Comparez TabPFN avec un point de repère simple sur la même partition. Voyez quels types de mariages chaque modèle manque et combien de détails appropriés elle envoie pour une vérification supplémentaire. La proportion totale de bonnes réponses peut varier légèrement, bien que l'erreur dans une classe rare devienne beaucoup plus coûteuse.
Sauvegardez la version avant le lancement
Documentez les variables d'entrée et le traitement des données manquantes. Notez la version des poids et les réglages pour reproduire l'essai, car les limites et les conditions d'accès varient selon la variante. Le dépôt distingue la licence du code des licences des poids. Pour un usage commercial, vérifiez les conditions de la version choisie. Un essai court aide à décider s'il vaut la peine de poursuivre. Évaluez le modèle sur de vrais lots nouveaux et examinez séparément chaque type d'erreur important.
Pour quelles tâches convient-il
- Comparer la classification par petite table de caractéristiques
- Vérifier les erreurs sur les nouveaux groupes de lignes
Les points forts
- Prend en charge la classification et la régression
- Il y a une interface Python officielle et une description du mode local
Limites
- La licence des poids dépend de leur version
- La qualité dépend de la composition et de la ventilation des données
Choix et conditions
- Mode gratuit
- Oui
- Période d'essai
- Non confirmé
- Sans inscription
- Non confirmé
- Interface en russe
- Non confirmé
- Installation locale
- Oui
- API
- Non confirmé
« Non confirmé » signifie que les informations disponibles ne suffisent pas. La fonctionnalité peut exister ; vérifiez les conditions du développeur.
- Formats d’entrée
- Tableau, Données
- Résultat
- Données
Conditions
Le code et les poids ont des licences distinctes. Certaines versions des poids sont soumises à des conditions d'utilisation non commerciale. Prior Labs décrit d'autres options pour un usage en production. La licence des poids dépend de leur version.De la tâche au premier résultat
Exemple pratique
- Tâche
- Comparer la classification par petite table de caractéristiques
- Que préparer
- Un tableau de bord avec des lignes marquées, des groupes de sources et une période de vérification distincte.
Consigne ou requête
Enseignez le classificateur au début. Comparez les erreurs sur les lignes en attente avec un point de repère simple et écrivez les erreurs par classe.
Résultat attendu
Tableau des prévisions de vérification avec les valeurs cibles et la ventilation des erreurs par groupes.
Comment vérifier le résultat
- Retirez les signes qui sont apparus après le marquage.
- Vérifiez qu'un groupe de lignes ne figure pas dans les deux échantillons.
Cet exemple pédagogique préparé par la rédaction décrit une tâche ; il ne présente pas le résultat d’un test personnel du service. Vérifiez la disponibilité du mode requis, les droits sur les fichiers d’origine et les conditions d’utilisation du résultat.
Vérifier les détails
Sources officielles
La description est faite à partir des matériaux du développeur. Les fonctionnalités, les prix et la disponibilité peuvent varier; vérifiez la source avant de l'utiliser.