La détection de spam Gmail a reçu ses «plus importantes améliorations de défense ces dernières années».

Bloquer le spam par courrier électronique est une bataille constante et en évolution permanente, et la dernière technique de Gmail permet une amélioration de 38 % de la détection grâce à une meilleure identification du texte. Les spammeurs utilisent souvent des homoglyphes (caractères ressemblant à des lettres réelles), des caractères invisibles, un bourrage de mots clés et d’autres «manipulations adverses du texte» pour contourner les modèles de classification de texte de Gmail qui identifient les attaques par hameçonnage, les escroqueries et autres contenus nocifs. Google contre-attaque avec RETVec (Resilient & Efficient Text Vectorizer). Open sourced par Google Research, cette approche «aide les modèles à atteindre des performances de classification de pointe et réduit considérablement le coût de calcul», tout en prenant en charge «toutes les langues et tous les caractères UTF-8 sans nécessiter de prétraitement du texte». Cela le rend idéal pour les cas d’utilisation en mode hors connexion, web et autres à grande échelle: dans Gmail, RETVec a amélioré le «taux de détection du spam par rapport à la base de données de 19,4 %», tout en réduisant le taux de faux positifs (de 19,4 %) et l’utilisation de l’unité de traitement de tenseur (de 83 %). RETVec atteint ces améliorations en arborant un modèle de plongée de mots très léger (~200k paramètres), ce qui nous permet de réduire la taille du modèle Transformer au niveau des performances égal ou meilleur, et d’avoir la possibilité de fractionner le calcul entre l’hôte et le TPU d’une manière efficace en termes de réseau et de mémoire.