GetAPI.ONE
Choisir un modèle pour votre tâche
Filtrez le catalogue actuel selon le point de terminaison déclaré et la tâche, exécutez une petite évaluation avec vos propres exemples et choisissez à partir de mesures de qualité, de latence et de coût en direct.
Définir d’abord la décision
- Décrivez la tâche, la structure d’entrée et de sortie requise, la langue, la tolérance à la latence et le coût d’un échec.
- Choisissez le protocole déjà pris en charge par votre application : Responses, Chat Completions, image, vidéo ou un autre point de terminaison déclaré.
- Préparez des exemples représentatifs et une condition de réussite vérifiable par une personne.
{
"task": "extract support ticket fields",
"endpoint": "openai-response",
"must_pass": ["valid JSON", "required fields", "no invented facts"],
"measure": ["quality", "latency", "live request cost"]
}Établir une présélection défendable
- Ouvrez le catalogue actuel et filtrez-le selon le point de terminaison déclaré exact que votre client appellera.
- Lisez la description sourcée et les tarifs en direct de chaque candidat ; considérez les faits manquants comme inconnus.
- Exécutez le même petit ensemble d’évaluation représentatif sur chaque candidat lorsque vous acceptez une facturation éventuelle.
- Consignez la qualité des sorties, les erreurs, la latence et le coût observé dans les mêmes conditions.
- Choisissez un modèle principal et un modèle de secours uniquement si les deux respectent le contrat requis.
Utiliser une liste de contrôle d’évaluation
| Dimension | Éléments à enregistrer |
|---|---|
| Adéquation au contrat | Point de terminaison déclaré, paramètres requis, analyse de la sortie et gestion des erreurs. |
| Qualité pour la tâche | Réussite ou échec sur les exemples que vous avez examinés, et non selon un classement marketing. |
| Latence | Observations médianes et extrêmes depuis la même région et avec la même structure de requête. |
| Coût | Tarifs en direct et enregistrements d’utilisation réels de l’évaluation. |
| Fiabilité | Erreurs et résultats des nouvelles tentatives pendant votre propre fenêtre de test. |
Vérifier la décision attendue
- Chaque modèle présélectionné dispose du point de terminaison déclaré utilisé par votre intégration.
- Le modèle sélectionné réussit tous les exemples requis, pas seulement l’invite la plus facile.
- Le document de choix consigne la date d’observation, les entrées de test, la configuration et les compromis mesurables.
Éviter les erreurs de sélection
- Ne déduisez pas la prise en charge d’un point de terminaison à partir d’un nom de modèle connu ; utilisez la déclaration du catalogue actuel.
- Ne comparez pas des modèles utilisant des invites, régions, limites de sortie ou politiques de nouvelle tentative différentes.
- Ne transformez pas un benchmark de fournisseur en preuve du routage, du prix ou de la disponibilité sur GetAPI.ONE, ni de la qualité pour votre tâche.