本日は画像のフーリエ変換を用いて画像を周波数成分に変換し、高周波成分を除去することで画像のノイズ除去を行いたいと思います。
フーリエ変換は、ある時間領域の信号を周波数領域の信号に変換する変換手法です。
画像に対しては2次元離散フーリエ変換が使われますが、これを高速に計算する手段としてFFT（Fast Fourier Transform：高速フーリエ変換）が広く用いられています。
一般的な画像は、低周波成分が多く、高周波成分が少ない傾向にあります。よって低周波成分だけを残しても、画像の多くの特徴は残ります。
また、一般にホワイトノイズと呼ばれるようなノイズは、低周波・高周波によらず全周波数帯に一様にノイズ成分が載る特徴があります。
よって、高周波成分を積極的に削減することによって、ノイズの成分のみを多く削減することができます。
このように、信号の見方を変えて周波数成分で扱うことは、画像処理において非常に強力なツールとなり得ます。
以下に画像を入力にフーリエ変換を施し、高周波数を除去することでノイズを除去するプログラムを紹介します。今回はグレースケール画像に対してフーリエ変換を実施します。
ノイズ画像は、ガウシアンノイズを付与した以下の画像をグレースケールで読み込みました。
また、品質の評価のために正解画像（Groundtruth）も読み込んでおり、Groundtruthは以下の画像を用いました。
このコードの中では、正解画像とノイズ画像を入力し、ノイズ画像に対してフーリエ変換ベースのノイズ除去を行い、最後に画像の品質評価手法であるPSNRを用いて評価を行います。
PSNRについては以下の記事などを参考にしてください。
今回実装したプログラムでは、高周波数をどこまで除去するかの値をFor文を使って徐々に変更し、随時PSNRを測定します。
そして、PSNRが一番高くなる（一番ノイズ除去効果が高い）のがどこかを記録し、最終的に一番結果が良くなる箇所の画像を出力します。
以下にプログラムの主な処理の説明します。
上記の箇所で画像の高周波成分をマスクし、低周波成分のみの画像を生成します。
上記の箇所でFor文を回すことで、特定の周波数まで低周波成分を通過させた場合の画像を随時生成し、PSNRを測定していきます。
FFTLowpassFilter関数に渡すiの値が、どの周波数帯まで周波数を残すかを示しています。
上記の箇所でPSNRが最も良くなる場合の画像を保存します。
Frequency Filterの白の部分が通過させる周波数、黒の部分が遮断する周波数になります。以下は最も結果が良くなった「CUTOFF_FREQ=51」の結果です。
何も処理を行わない画像のPSNRが22.44dBであったため、「CUTOFF_FREQ=51」のとき、品質としては22.44dB -> 26.44dB（+4dB）と4dBの改善効果が得られました。
また、Image（Inverse）が高周波成分を除去した場合の画像ですが、Inputに比べるとノイズが除去されているように見えますが、まだ結構ノイズが残っているように見えます。
今回は、周波数成分を通す or 遮断するを完全にどちらか決めましたが、中間周波数帯は半分（0.5）だけ通すなど、より柔軟な周波数フィルタリング方法を検討することで、更なる精度向上が期待できるかもしれません。
本日は画像のフーリエ変換を行い、ノイズの除去を行ってみました。
フーリエ変換で画像の周波数成分を計算し、高周波成分を除去した上で逆フーリエ変換して元に戻すことで、ノイズの除去を行うことができます。