El ascenso reportado de InterLink del puesto 113 al 51 en una clasificación del NIST
InterLink Labs anunció recientemente que su modelo, interlinklabs-003, pasó del puesto 113 al puesto 51 en una clasificación del NIST. Eso supone subir 62 puestos. No puedo verificar la clasificación de forma independiente, así que lo considero un informe de InterLink y no un hecho confirmado.
El anuncio corresponde al área Human-AI, que evalúa qué tan bien responde un modelo a las interacciones reales con personas, y no solo su tamaño o velocidad. Un modelo puede obtener buenos resultados en métricas técnicas y aun así dar respuestas que no se ajustan a lo que pidió una persona. Por eso, los datos que respaldan un modelo son tan importantes.
InterLink afirma que el avance se debió a su trabajo de ingeniería e investigación, a las mejoras repetidas del modelo y a un conjunto de datos amplio y verificado por personas. Una iteración gradual de ese tipo parece una vía creíble para cambiar de puesto en una clasificación. Aun así, el anuncio no explica cómo se calcula la puntuación ni qué tareas abarca la clasificación, y esos detalles facilitarían evaluar la afirmación.
Una clasificación también es solo una instantánea. Otros equipos siguen mejorando y las posiciones pueden cambiar de una evaluación a otra. Me parece más útil que el número en sí saber si un equipo sigue compartiendo sus métodos y resultados con el tiempo.
Por ahora, este es un dato más sobre el desarrollo de Human-AI de InterLink. Si se publican más detalles sobre la evaluación y el conjunto de datos, será más fácil entender cuán significativo es realmente el avance.
¿Qué te gustaría saber sobre una clasificación como esta antes de confiar en ella?
#InterLink #ITLG #ITL #CPIWatch #Binance
$BTC $ETH
InterLink Labs anunció recientemente que su modelo, interlinklabs-003, pasó del puesto 113 al puesto 51 en una clasificación del NIST. Eso supone subir 62 puestos. No puedo verificar la clasificación de forma independiente, así que lo considero un informe de InterLink y no un hecho confirmado.
El anuncio corresponde al área Human-AI, que evalúa qué tan bien responde un modelo a las interacciones reales con personas, y no solo su tamaño o velocidad. Un modelo puede obtener buenos resultados en métricas técnicas y aun así dar respuestas que no se ajustan a lo que pidió una persona. Por eso, los datos que respaldan un modelo son tan importantes.
InterLink afirma que el avance se debió a su trabajo de ingeniería e investigación, a las mejoras repetidas del modelo y a un conjunto de datos amplio y verificado por personas. Una iteración gradual de ese tipo parece una vía creíble para cambiar de puesto en una clasificación. Aun así, el anuncio no explica cómo se calcula la puntuación ni qué tareas abarca la clasificación, y esos detalles facilitarían evaluar la afirmación.
Una clasificación también es solo una instantánea. Otros equipos siguen mejorando y las posiciones pueden cambiar de una evaluación a otra. Me parece más útil que el número en sí saber si un equipo sigue compartiendo sus métodos y resultados con el tiempo.
Por ahora, este es un dato más sobre el desarrollo de Human-AI de InterLink. Si se publican más detalles sobre la evaluación y el conjunto de datos, será más fácil entender cuán significativo es realmente el avance.
¿Qué te gustaría saber sobre una clasificación como esta antes de confiar en ella?
#InterLink #ITLG #ITL #CPIWatch #Binance
$BTC $ETH