Usare l'IA significa che le maschere non servono più? A partire dagli artefatti sulle stelle causati da NXT

Questo articolo è tratto da appunti del 2023; alcuni strumenti o flussi di lavoro nel frattempo sono stati aggiornati, quindi ne tenga conto durante la lettura.

Tradizionalmente, i process che possono rovinare le stelle sono in realtà parecchi: per esempio la riduzione del rumore, la deconvoluzione, i Wavelet, l’LHE e così via. Proprio per questo, in passato, quando usavamo questi process dovevamo spesso creare prima una maschera di stelle, per impedire che le stelle venissero danneggiate.

Da quando sono comparsi i process legati all’IA, il danneggiamento delle stelle si è ridotto parecchio. I process di rimozione delle stelle ci permettono di togliere prima le stelle e di potenziare solo lo sfondo. Tuttavia, non tutti i process si possono necessariamente portare a termine su un’immagine senza stelle: la deconvoluzione tradizionale, per esempio, danneggia spesso il nucleo delle stelle con una PSF errata — anche se, certo, questo problema sembra risolto da quando è comparso BXT.

E allora, con l’IA le maschere non servono davvero più? Una mia esperienza recente ha dato una risposta negativa.

Il problema: NXT ha peggiorato il centro delle stelle allo stato lineare

Quando mi sono accorto che le immagini elaborate di recente presentavano tutte problemi al centro delle stelle allo stato non lineare, sono tornato indietro di alcuni passaggi e ho finalmente trovato la risposta.

NoiseXTerminator (NXT), in quanto strumento di riduzione del rumore con IA di nuova generazione, punta proprio a riconoscere automaticamente il rumore senza intaccare le altre parti dell’immagine. Grazie all’addestramento del modello di IA, questo process fa davvero un ottimo lavoro. Tuttavia, ho scoperto che, se usato allo stato lineare, questo process genera problemi diversi al centro delle stelle a colori e delle stelle di luminanza rispettivamente; e questo problema non è evidente: di solito lo si nota solo dopo lo stretch non lineare.

• Stelle a colori: i pixel del nucleo delle stelle più luminose vengono modificati (come nella parte centrale della fila superiore della figura). Dopo lo stretch non lineare, ciò si manifesta come artefatti dal colore strano.
• Stelle di luminanza: di norma il nucleo della stella è la parte più luminosa, ma dopo l’uso di NXT la luminosità del centro della stella cala, così che i dintorni finiscono per essere più luminosi del centro e nel nucleo si produce il problema dello star fade (come nella fila inferiore della figura). Rispetto alle stelle RGB questo problema è meno evidente, ma sulle stelle di media luminosità si riesce a notare.

La soluzione: anche l’IA ha bisogno di maschere

In precedenza, non avendo individuato la causa, riparavo sempre il nucleo delle stelle alla fine in Photoshop con lo strumento Toppa, mentre per la luminanza alzavo un poco le alte luci per schiarire il centro delle stelle.

Ora che ho trovato la radice del problema, il mio approccio è questo: quando uso NXT, lo abbino almeno a una maschera di stelle (o a una maschera di oggetti luminosi), proprio come con la riduzione del rumore tradizionale.

Questo problema l’ho già segnalato a Russell Croman. Fino a quando non sarà risolto, per l’uso di NXT consiglierei di accompagnarlo con una maschera. Le suggerisco inoltre di riguardare le proprie immagini in cui ha usato NXT e di verificare se sia comparso qualcosa di simile.