Les versions plus récentes de trois familles de modèles d’IA ont détecté moins de paiements frauduleux et des montants frauduleux moins élevés lors d’un rejeu rétrospectif par Coinbase de 16 140 transactions, avec une politique de décision inchangée.

Ce test ne permet pas d’établir l’existence de pertes réelles pour les clients ni d’expliquer ces reculs. Il montre pourquoi les prestataires de paiement doivent tester les mises à niveau dans leur propre dispositif de filtrage, plutôt que de supposer qu’un modèle plus récent sera plus performant.