AI を使えばマスクは要らない？NXT が引き起こす星のアーティファクトから考える

本記事は 2023 年のメモをまとめたものです。一部のツールやフローはすでに更新されているため、お読みの際はご留意ください。

従来、星を壊してしまう処理プロセスは実のところ少なくありません。たとえばノイズ低減、デコンボリューション、ウェーブレット（Wavelet）、LHE などです。そのため、かつてこうしたプロセスを使う際には、星が壊されるのを防ぐために、まず星のマスクを作らなければならないことがよくありました。

AI 関連のプロセスが登場して以来、星が壊されるという問題はかなり軽減されました。星の除去のプロセスによって、先に星を取り除き、背景だけを強化できるようになったのです。ただし、一部のプロセスは星を除去した画像で完了できるとは限りません。たとえば従来のデコンボリューションは、PSF が正しくない星の中心をしばしば壊してしまいます——もっとも、この問題は BXT が登場してから、どうやら解決されたようですが。

では、AI があれば、もうマスクは一切要らないのでしょうか？私の最近のある経験は、それに「否」という答えを出しました。

問題：NXT がリニアの状態で星の中心を改悪した

最近処理した画像で、ノンリニアの状態で星の中心にどれも問題があることに気づいたとき、私はいくつかの手順をさかのぼり、ついに答えを見つけました。

NoiseXTerminator（NXT）は新世代の AI ノイズ低減ツールとして、売りにしているのは、画像のほかの部分に影響を与えずにノイズを自動的に識別することです。AI モデルの訓練によって、このプロセスは確かによくできています。ただ、私はこのプロセスをリニアの状態で使うと、カラーの星と輝度の星の中心に、それぞれ異なる問題を生じさせることに気づきました。しかもこの問題は目立たず、たいていノンリニアのストレッチのあとにならないと気づけません。

• カラーの星：やや明るい星の中心のピクセルが改変されます（図の上段中央のように）。この状況は、ノンリニアのストレッチのあとに、色のおかしなアーティファクトとして見えるようになります。
• 輝度の星：通常、星の中心が最も明るいのですが、NXT を使うと星の中心の明るさが下がり、周辺のほうがかえって中心より明るくなって、中心に star fade の問題が生じます（図の下段のように）。この問題は RGB の星に比べると目立ちませんが、中程度の明るさの星では見て取れます。

解決方法：AI にもマスクを添える

以前は原因を突き止められなかったので、私はいつも最後に Photoshop の修復ツールで星の中心を直し、輝度については明部を少し持ち上げて、星の中心を明るくしていました。

今は根本原因を見つけたので、私のやり方はこうです：NXT を使うときは、少なくとも星のマスク（または明部オブジェクトのマスク）を併用する、従来のノイズ低減と同じように、というものです。

この問題は、私はすでに Russell Croman に報告済みです。解決されるまでは、NXT を使う際にはマスクの併用をおすすめします。また、これまでに NXT を使った自分の画像を見返して、似たような状況が出ていないか確認してみることをおすすめします。