Convolution adaptative pour un transfert de style sensible à la structure

Le transfert de style entre images est une application artistique de CNN, dans laquelle le “style” d’une image est transféré à une autre image sans modifier son contenu. Le transfert de style neuronal de pointe actuel utilise une technologie appelée Adaptive Instance Normalization (AdaIN), qui transfère les caractéristiques statistiques des caractéristiques de style aux images de contenu, et peut transférer une variété illimitée de styles en temps réel. Cependant, AdaIN est une opération globale, de sorte que la structure géométrique locale dans l’image de style est souvent ignorée lors de la transmission. Nous proposons la convolution adaptative ; une extension universelle d’AdaIN qui permet la transmission simultanée de statistiques et de styles structurels en temps réel. En plus du transfert de style, notre méthode peut être facilement étendue à la génération d’images basée sur le style et à d’autres tâches qui ont déjà adopté AdaIN. Lien vers le fichier de sortie :.