Créez vos propres benchmarks IA. Ajoutez des prompts, exécutez-les sur les modèles qui vous intéressent, évaluez les réponses et publiez un classement partageable.
Essai gratuit inclus Aucune carte bancaire requise Vos prompts restent privés
Enregistrez une liste de prompts qui comptent vraiment pour vous, choisissez une base de modèles de confiance, puis ajoutez de nouveaux modèles candidats à comparer. Chaque modèle dispose de dix tentatives maximum par prompt, vous notez chaque réponse avec des étoiles, et Raq calcule la moyenne des scores dans un classement public à votre propre URL. Inutile de vous fier au benchmark de quelqu'un d'autre. Créez celui qui correspond à votre travail.
Fonctionne dans Claude, ChatGPT Work, Grok Bot et toute application IA disposant de connecteurs. Connectez la vôtre
Comparez ces modèles d'IA à l'aide de vos questions clients.
Je vais poser les mêmes questions via Benchmark IA et regrouper les réponses pour que votre équipe puisse les évaluer.
Les questions et les tâches pour lesquelles vous utilisez vraiment l'IA.
Ajoutez chaque prompt exactement comme vous l'enverriez, jusqu'à 200 dans un benchmark. Collez-les un par un, importez un lot en JSONL, JSON ou CSV, ou partez d'un modèle.
Vos propres étoiles, une réponse attendue ou un juge IA.
Notez vous-même les réponses après l'exécution, indiquez la réponse attendue et vérifiez-la, ou rédigez les critères et laissez un modèle juge noter chaque réponse. Vous pouvez modifier toute note donnée par le juge.
Jusqu'à 25 modèles en une exécution.
Mélangez fournisseurs, tailles et niveaux de raisonnement, et gardez les modèles auxquels vous faites confiance comme référence exécutée à chaque fois. Chaque prompt peut être répété jusqu'à dix fois pour voir la stabilité des réponses.
Score, coût et vitesse pour chaque modèle.
Voyez quel modèle a obtenu le meilleur score, lequel était le moins cher et lequel était le plus rapide, puis ouvrez n'importe quelle réponse pour la lire. Publiez le tableau comme classement ou partagez l'exécution par un lien.
Chaque exécution indique l'utilisation de l'IA qu'elle demandera avant tout appel de modèle, et un plafond l'arrête si le coût le dépasse.
Lancez un benchmark chaque jour, chaque semaine ou chaque mois, ou laissez-le démarrer seul, avec seulement les nouveaux modèles, lorsqu'un modèle qui lui convient apparaît.
Publiez une exécution sur une page publique à votre nom, ou partagez une exécution avec un lien, un mot de passe et une date de fin.
Importez une configuration Promptfoo comme benchmark, exportez-en une en retour, ou lancez des exécutions depuis vos propres scripts avec une clé API.
Benchmark IA est inclus dans chaque offre Raq.com. À partir de $39 par utilisateur et par mois, avec 75+ modules. Les tâches d'IA utilisent le quota d'utilisation de votre forfait.
Essai gratuit inclus Aucune carte bancaire requise Vos prompts restent privés
Nous utilisons des cookies facultatifs pour comprendre comment les visiteurs découvrent ce site et mesurer nos publicités.
