OpenRouter lanza la herramienta de evaluación de modelos de IA Ori Eval

OpenRouter ha lanzado la herramienta de evaluación de modelos de IA llamada 'Ori Eval', que compara el rendimiento, la velocidad y el costo de los modelos. Esta herramienta ayuda a los desarrolladores a encontrar el modelo adecuado sin necesidad de probar múltiples opciones. Ori Eval ejecuta prompts reales y verifica la calidad de las respuestas y las llamadas a la herramienta, proporcionando así una base para la selección del modelo. La herramienta evalúa qué modelo funciona mejor en un servicio específico, considerando datos de productos individuales y entornos de ejecución que no se reflejan fácilmente en benchmarks generales. Durante el proceso de evaluación, se fijan el entorno de ejecución y la configuración del modelo para evitar distorsiones en los resultados. Los contenidos de la evaluación se guardan en formato '.eval.ts' y se ejecutan mediante el método 'bun test'. También ofrece la funcionalidad de convertir problemas de agentes de soporte al cliente en pruebas, y se puede utilizar para pruebas de regresión conectándose a GitHub Actions. Este lanzamiento muestra que el ámbito de negocio de OpenRouter se está expandiendo de la intermediación de modelos a la gestión del desarrollo y la operación. OpenRouter también admite monedas estables como USD Coin (USDC), además de tarjetas de crédito y Alipay.

Este contenido se ofrece únicamente con fines informativos generales y no constituye un asesoramiento financiero, de inversión, legal ni fiscal. Cualquier evento, recompensa, promoción en línea o información relacionada que se mencione en el presente documento no debe considerarse como una recomendación, solicitud o invitación a comprar, vender, operar o de negociar de otra manera con cualquier criptoactivo. Los criptoactivos son sumamente volátiles y pueden provocar pérdidas. La disponibilidad de los servicios, productos y eventos relacionados de WEEX puede variar según la región. Tienes la responsabilidad de asegurarte de que tu participación esté de acuerdo con las leyes y regulaciones locales vigentes.