Artificial Analysis ha creado una clasificación de modelos de lenguaje, actualizada diariamente a partir de datos gratuitos, que le indica cuál es la mejor opción por su dinero. El sitio web grafica cada modelo en su Índice de Inteligencia en comparación con su precio de API combinado, y el resultado es una frontera simple: los modelos donde nada más barato es también más inteligente. Todo lo demás es superado en ambos aspectos por un punto en la línea.
La clasificación es una tabla de búsqueda. Encuentra la fila en la que se encuentra su presupuesto, y la elección es el modelo con la puntuación más alta que puede obtener a ese precio. El segundo mejor es el siguiente mejor que también se ajusta. Todo se recupera diariamente a través de un cron de GitHub Actions de la API de datos gratuitos de Artificial Analysis.
Cómo funciona la Frontera
La gráfica muestra el costo combinado por 1M de tokens en una escala de registro de entrada:salida 3:1, en comparación con el Índice de Inteligencia. Pasa el cursor sobre un punto o haz clic en él para ver los detalles. De forma predeterminada, solo se muestra la mejor variante de cada modelo, y se ocultan los modelos con puntajes bajos. Los filtros le permiten ampliar el campo.
Ordenar por cualquier encabezado de columna mueve el orden. Los nombres enlazan a la página de Artificial Analysis del modelo.
El Intercambio de Valor
La frontera de valor es donde el intercambio entre costo e inteligencia deja de ser doloroso. La clasificación está diseñada para mostrarle dónde los modelos más baratos también son más tontos, y dónde los modelos más inteligentes cuestan más. La frontera en sí es el punto donde ninguna de estas condiciones se cumple: nada más barato es también más inteligente, y nada más inteligente es también más barato.
Esta es la clase de herramienta que hace que la tecnología se sienta menos como magia y más como una lista de compras. Elimina las conjeturas de la comparación de modelos en función del precio y el rendimiento, y se actualiza automáticamente para que las respuestas se mantengan actualizadas.
Recuperaciones Diarias y la Tubería de Datos
El sitio se actualiza diariamente a través de un trabajo cron de GitHub Actions. Eso significa que los datos provienen de recuperaciones frescas, no de una instantánea estática. Los modelos nuevos aparecen, los modelos eliminados desaparecen y los modelos existentes se vuelven a puntuar o se vuelven a fijar precios. La diferencia entre las recuperaciones diarias consecutivas rastrea esos cambios.
El código y los datos se encuentran en GitHub en github.com/terryds/bestvaluemodel. Cualquier persona que quiera ver cómo se generan las clasificaciones puede ver la fuente.
Ignorando el Costo por Completo
También existe la opción de ignorar totalmente el costo. Eso le permite ver los modelos clasificados puramente por inteligencia, sin que el filtro de precio se interponga.
Para todos los demás, la frontera de valor es la respuesta práctica. Les indica qué modelo ofrece más inteligencia por dólar, y lo hace sin requerir un título en aprendizaje automático.
Lo que hacemos con ello
La clasificación es un pequeño truco, pero es útil. Toma dos cosas —una medida de la inteligencia de un modelo y su precio— y los coloca uno al lado del otro para que pueda compararlos directamente. La actualización diaria significa que la información se mantiene fresca, y la API de datos gratuita significa que cualquiera puede construir sobre ella.
Esta es la clase de herramienta que pertenece al kit de herramientas de un desarrollador. Ahorra tiempo dedicado a buscar puntos de referencia y tablas de precios, y proporciona un terreno común para comparar modelos que de otra manera serían difíciles de evaluar entre sí.
Caja de Datos Clave
- Clasificación: Mejor LLM para cada presupuesto, actualizado diariamente
- Fuente de datos: API de datos gratuitos de Artificial Analysis
- Obtenido: Diariamente a través de GitHub Actions cron
- Código/datos: github.com/terryds/bestvaluemodel
- Graficado: Costo combinado por 1M de tokens vs. Índice de Inteligencia
Tabla de Horario
| Acción | Frecuencia |
|---|---|
| Recuperación diaria de datos del modelo | Todos los días |
La clasificación es un recordatorio de que la tecnología no tiene por qué ser opaca. La inteligencia de un modelo tiene un número, y su precio tiene un número, y combinarlos produce una decisión. Esa es una pequeña victoria, pero es real.
Material fuente: “Mejor LLM para cada presupuesto, actualizado diariamente,” terrydjony.com.
Recibe El Cuaderno.
Las mejores historias del día y cada veredicto nuevo, en español claro, en tu correo a las siete. Un correo al día, nada más.