Enquanto a capacidade elétrica indica a potência total que uma instalação consome da rede elétrica, os megawatts medem simplesmente o que um centro de dados consome, e não o valor que efetivamente produz.

Por isso, tokens por megawatt estão rapidamente se tornando o parâmetro de referência que realmente importa. Essa única métrica reúne o desempenho do silício, a eficiência do resfriamento, a arquitetura de software e a utilização do sistema em um panorama claro.

De fato, uma pesquisa da NVIDIA revela que uma fábrica de IA totalmente otimizada gera 2,6 vezes mais tokens por segundo por megawatt do que uma instalação não otimizada, sendo que uma parcela significativa dessa vantagem vem do escalonamento inteligente e do ajuste em tempo de execução.

Para saber mais sobre como avaliar o desempenho das instalações modernas de computação, confira o guia da Aethir sobre como avaliar um centro de dados de IA.