A mudança relatada pela InterLink da posição 113 para a 51 em uma classificação do NIST
A InterLink Labs anunciou recentemente que seu modelo, interlinklabs-003, passou da posição 113 para a posição 51 em uma classificação do NIST. Isso representa uma subida de 62 posições. Não consigo verificar a classificação de forma independente, então estou tratando isso como um relato da própria InterLink, e não como um fato confirmado.
O anúncio está na área de Interação entre Humanos e IA, que avalia o quanto um modelo responde bem a interações reais com pessoas, e não apenas o seu tamanho ou sua velocidade. Um modelo pode ter bons resultados em métricas técnicas e, ainda assim, dar respostas que não correspondem ao que uma pessoa pediu. Por isso, os dados usados para treinar um modelo são tão importantes.
A InterLink afirma que o progresso veio do trabalho de engenharia e pesquisa, de melhorias repetidas no modelo e de um grande conjunto de dados verificado por pessoas. Uma evolução gradual desse tipo é um caminho plausível para uma mudança na classificação. Ainda assim, o anúncio não explica como a classificação é calculada nem quais tarefas ela abrange, e esses detalhes ajudariam a avaliar melhor a afirmação.
Uma classificação também é apenas um retrato de determinado momento. Outras equipes continuam aprimorando seus modelos, e as posições podem mudar de uma avaliação para outra. Mais útil do que o número em si, na minha opinião, é saber se uma equipe continua compartilhando seus métodos e resultados ao longo do tempo.
Por enquanto, este é apenas um dado sobre o desenvolvimento da InterLink na área de Interação entre Humanos e IA. Se forem publicados mais detalhes sobre a avaliação e o conjunto de dados, será mais fácil entender a real importância dessa mudança.
O que você gostaria de saber sobre uma classificação como esta antes de confiar nela?
#InterLink #ITLG #ITL #CPIWatch #Binance
$BTC $ETH
A InterLink Labs anunciou recentemente que seu modelo, interlinklabs-003, passou da posição 113 para a posição 51 em uma classificação do NIST. Isso representa uma subida de 62 posições. Não consigo verificar a classificação de forma independente, então estou tratando isso como um relato da própria InterLink, e não como um fato confirmado.
O anúncio está na área de Interação entre Humanos e IA, que avalia o quanto um modelo responde bem a interações reais com pessoas, e não apenas o seu tamanho ou sua velocidade. Um modelo pode ter bons resultados em métricas técnicas e, ainda assim, dar respostas que não correspondem ao que uma pessoa pediu. Por isso, os dados usados para treinar um modelo são tão importantes.
A InterLink afirma que o progresso veio do trabalho de engenharia e pesquisa, de melhorias repetidas no modelo e de um grande conjunto de dados verificado por pessoas. Uma evolução gradual desse tipo é um caminho plausível para uma mudança na classificação. Ainda assim, o anúncio não explica como a classificação é calculada nem quais tarefas ela abrange, e esses detalhes ajudariam a avaliar melhor a afirmação.
Uma classificação também é apenas um retrato de determinado momento. Outras equipes continuam aprimorando seus modelos, e as posições podem mudar de uma avaliação para outra. Mais útil do que o número em si, na minha opinião, é saber se uma equipe continua compartilhando seus métodos e resultados ao longo do tempo.
Por enquanto, este é apenas um dado sobre o desenvolvimento da InterLink na área de Interação entre Humanos e IA. Se forem publicados mais detalhes sobre a avaliação e o conjunto de dados, será mais fácil entender a real importância dessa mudança.
O que você gostaria de saber sobre uma classificação como esta antes de confiar nela?
#InterLink #ITLG #ITL #CPIWatch #Binance
$BTC $ETH