El investigador de OpenAI, Noam Brown, aboga por introducir la curva de potencia de inferencia
El investigador de OpenAI, Noam Brown, ha propuesto que una sola puntuación ya no puede medir la capacidad real de los modelos de vanguardia, y se debe introducir la "curva de potencia de inferencia" como un nuevo estándar de evaluación de modelos, reflejando de manera más completa el rendimiento real de los modelos en tareas de inferencia.
¿Por qué es importante?: Esto significa que los estándares de evaluación de la industria de la IA están pasando de un único benchmark a un sistema de evaluación de capacidades más tridimensional, lo que impactará profundamente en la dirección del desarrollo de modelos y en los juicios de inversión.
#OpenAI #AI #大模型 #inferencia
El investigador de OpenAI, Noam Brown, ha propuesto que una sola puntuación ya no puede medir la capacidad real de los modelos de vanguardia, y se debe introducir la "curva de potencia de inferencia" como un nuevo estándar de evaluación de modelos, reflejando de manera más completa el rendimiento real de los modelos en tareas de inferencia.
¿Por qué es importante?: Esto significa que los estándares de evaluación de la industria de la IA están pasando de un único benchmark a un sistema de evaluación de capacidades más tridimensional, lo que impactará profundamente en la dirección del desarrollo de modelos y en los juicios de inversión.
#OpenAI #AI #大模型 #inferencia