Значит ли использование ИИ, что маски больше не нужны? Отталкиваясь от звёздных артефактов, которые вызывает NXT

Эта статья составлена по заметкам 2023 года; некоторые инструменты или процессы с тех пор уже обновились, учитывайте это при чтении.

Традиционно процессов, способных испортить звёзды, на самом деле немало — например, снижение шума, деконволюция, вейвлет (Wavelet), LHE и так далее. Именно поэтому в прошлом при использовании этих процессов нам часто приходилось сначала создавать звёздную маску, чтобы предотвратить их повреждение.

С момента появления процессов на основе ИИ повреждение звёзд заметно уменьшилось. Процессы удаления звёзд позволяют нам сначала убрать звёзды и усилить только фон. Однако не все процессы обязательно можно завершить на изображении без звёзд — например, традиционная деконволюция часто повреждает ядро звёзд с некорректной PSF. Конечно, эта проблема, похоже, уже решена после появления BXT.

Так значит ли это, что с появлением ИИ маски больше вообще не нужны? Мой недавний опыт дал на это отрицательный ответ.

Проблема: NXT испортил центры звёзд в линейном состоянии

Когда я заметил, что у всех недавно обработанных изображений в нелинейном состоянии есть проблемы с центрами звёзд, я вернулся на несколько шагов назад и наконец нашёл ответ.

NoiseXTerminator (NXT) как инструмент шумоподавления нового поколения на основе ИИ делает ставку именно на автоматическое распознавание шума без влияния на остальные части изображения. Благодаря обучению модели ИИ этот процесс действительно справляется очень хорошо. Однако я обнаружил, что если использовать этот процесс в линейном состоянии, он порождает разные проблемы в центрах цветных и яркостных звёзд соответственно, причём эта проблема неочевидна и обычно замечается только после нелинейного растяжения.

• Цветные звёзды: пиксели ядра более ярких звёзд изменяются (как показано в центре верхнего ряда на рисунке). После нелинейного растяжения это проявляется как артефакты странного цвета.
• Яркостные звёзды: обычно ядро звезды самое яркое, но после применения NXT яркость центра звезды снижается, из-за чего окрестности оказываются ярче центра, а в ядре возникает проблема star fade (как показано в нижнем ряду на рисунке). Эта проблема менее заметна, чем на RGB-звёздах, но её видно на звёздах средней яркости.

Решение: ИИ тоже нужна маска

Раньше, поскольку я не находил причину, я всегда в конце восстанавливал ядра звёзд в Photoshop с помощью инструмента «Заплатка», а для яркости слегка поднимал светлые участки, чтобы осветлить центр звезды.

Теперь, найдя первопричину, я поступаю так: при использовании NXT как минимум сочетаю его со звёздной маской (или маской ярких объектов), точно так же, как при традиционном снижении шума.

Об этой проблеме я уже сообщил Расселу Кроману (Russell Croman). Пока она не решена, при использовании NXT я бы рекомендовал сочетать его с маской. Также советую всем вернуться и посмотреть на собственные изображения, где применялся NXT, — не появилось ли там что-то похожее.