Utiliser l'IA signifie-t-il que les masques ne servent plus ? À partir des artéfacts sur les étoiles causés par NXT
Cet article est compilé à partir de notes prises en 2023 ; certains outils ou processus ont depuis été mis à jour, veuillez en tenir compte lors de la lecture.
Traditionnellement, les traitements susceptibles d’abîmer les étoiles sont en réalité assez nombreux, par exemple la réduction du bruit, la déconvolution, les ondelettes (Wavelet), le LHE, etc. C’est pourquoi, autrefois, lorsque nous utilisions ces traitements, il nous fallait souvent créer d’abord un masque d’étoiles pour empêcher que les étoiles soient endommagées.
Depuis l’apparition des traitements liés à l’IA, l’endommagement des étoiles s’est nettement atténué. Les traitements de suppression des étoiles nous permettent de retirer d’abord les étoiles et de ne renforcer que le fond. Cependant, tous les traitements ne peuvent pas nécessairement être menés à bien sur une image sans étoiles : la déconvolution traditionnelle, par exemple, abîme souvent le cœur des étoiles dont la PSF est incorrecte — bien sûr, ce problème semble avoir été résolu depuis l’apparition de BXT.
Alors, une fois qu’on dispose de l’IA, n’a-t-on vraiment plus jamais besoin de masques ? Une expérience que j’ai faite récemment a donné une réponse négative.
Le problème : NXT a détérioré le centre des étoiles à l’état linéaire
Lorsque je me suis aperçu que les images que j’avais traitées récemment présentaient toutes des problèmes au centre des étoiles à l’état non linéaire, j’ai remonté quelques étapes en arrière et j’ai fini par trouver la réponse.
NoiseXTerminator (NXT), en tant qu’outil de réduction du bruit par IA de nouvelle génération, met précisément en avant sa capacité à identifier automatiquement le bruit sans toucher aux autres parties de l’image. Grâce à l’entraînement de son modèle d’IA, ce traitement fait effectivement du très bon travail. Cependant, j’ai constaté que, s’il est utilisé à l’état linéaire, ce traitement engendre des problèmes différents au centre des étoiles colorées et des étoiles de luminance respectivement ; et ce problème n’est pas évident : on ne le remarque généralement qu’après l’étirement non linéaire.
- Étoiles colorées : les pixels du cœur des étoiles les plus brillantes sont modifiés (comme au centre de la rangée supérieure de la figure). Après l’étirement non linéaire, cela se manifeste sous forme d’artéfacts à la couleur étrange.
- Étoiles de luminance : en règle générale, le cœur de l’étoile est la partie la plus brillante, mais après l’usage de NXT la luminosité du centre de l’étoile baisse, si bien que les environs finissent par être plus brillants que le centre et qu’un problème de star fade apparaît au cœur (comme dans la rangée inférieure de la figure). Ce problème est moins évident que sur les étoiles RGB, mais il se repère sur les étoiles de luminosité moyenne.
La solution : l’IA aussi a besoin de masques
Auparavant, comme je n’avais pas trouvé la cause, je réparais toujours le cœur des étoiles à la fin dans Photoshop avec l’outil Pièce, et pour la partie luminance je relevais un peu les hautes lumières afin d’éclaircir le centre des étoiles.
Maintenant que j’ai trouvé la cause profonde, ma façon de procéder est la suivante : lorsque j’utilise NXT, je l’associe au moins à un masque d’étoiles (ou à un masque d’objets brillants), exactement comme pour la réduction du bruit traditionnelle.
J’ai déjà signalé ce problème à Russell Croman. En attendant qu’il soit résolu, je recommande d’accompagner l’usage de NXT d’un masque. Je vous suggère aussi de revenir jeter un œil à vos propres images où vous avez utilisé NXT, pour vérifier si quelque chose de semblable y est apparu.