Чи означає використання ШІ, що маски більше не потрібні? Відштовхуючись від зоряних артефактів, які спричиняє NXT

Ця стаття складена на основі нотаток 2023 року; деякі інструменти чи процеси відтоді вже оновилися, тож майте це на увазі під час читання.

Традиційно процесів, здатних зіпсувати зорі, насправді чимало — наприклад, зменшення шуму, деконволюція, вейвлети (Wavelet), LHE тощо. Саме тому раніше, використовуючи ці процеси, нам часто доводилося спочатку створювати зоряну маску, щоб запобігти пошкодженню зір.

Відколи з’явилися процеси на основі ШІ, пошкодження зір помітно зменшилося. Процеси видалення зір дозволяють нам спочатку прибрати зорі й підсилювати лише фон. Однак не всі процеси обов’язково можна завершити на зображенні без зір — наприклад, традиційна деконволюція часто пошкоджує ядра зір з некоректним PSF. Звісно, ця проблема, схоже, уже вирішена відтоді, як з’явився BXT.

Отже, чи означає це, що з появою ШІ маски більше взагалі не потрібні? Один мій нещодавній досвід дав на це заперечну відповідь.

Проблема: NXT зіпсував центри зір у лінійному стані

Коли я помітив, що на нещодавно оброблених зображеннях у нелінійному стані центри зір мають проблеми, я повернувся на кілька кроків назад і врешті знайшов відповідь.

NoiseXTerminator (NXT) як інструмент зменшення шуму нового покоління на основі ШІ робить ставку саме на автоматичне розпізнавання шуму без впливу на інші частини зображення. Завдяки навчанню моделі ШІ цей процес справді працює дуже добре. Однак я виявив, що якщо цей процес використовувати в лінійному стані, він по-різному впливає на центри кольорових зір і зір яскравості, викликаючи різні проблеми; причому ця проблема непомітна — зазвичай її вдається помітити лише після нелінійного розтягування.

• Кольорові зорі: пікселі ядра яскравіших зір змінюються (як у центрі верхнього ряду на зображенні). Після нелінійного розтягування це проявляється як артефакти дивного кольору.
• Зорі яскравості: зазвичай ядро зорі є найяскравішою частиною, але після використання NXT яскравість центру зорі знижується, через що периферія стає яскравішою за центр, і в ядрі виникає проблема star fade (як у нижньому ряду на зображенні). Ця проблема менш помітна порівняно із зорями RGB, але її видно на зорях середньої яскравості.

Рішення: ШІ теж потребує маски

Раніше, оскільки я не знаходив причини, я завжди наприкінці відновлював ядра зір у Photoshop інструментом Patch Tool, а для яскравості трохи піднімав світлі ділянки, щоб освітлити центр зорі.

Тепер, коли я знайшов корінь проблеми, мій підхід такий: під час використання NXT я щонайменше поєдную його із зоряною маскою (або маскою яскравих об’єктів), так само як і при традиційному зменшенні шуму.

Про цю проблему я вже повідомив Расселу Кроману (Russell Croman). Поки її не вирішено, при використанні NXT я рекомендую поєднувати його з маскою. Також раджу всім повернутися й переглянути власні зображення, де застосовувався NXT, — чи не з’явилося там щось подібне.