画像処理システム論画像処理システム論画像処理システム論画像処理システム論（視覚情報処理論）（視覚情報処理論）（視覚情報処理論）（視覚情報処理論）Image Media SystemsImage Media Systems視覚感性と画像処理視覚感性と画像処理（５）（５）視覚感性と画像処理視覚感性と画像処理（５）（５）

加藤加藤 俊一俊一加藤加藤 俊俊ToshiToshi KATOKATO

生体から学ぶべきメカニズム（１）生体から学ぶべきメカニズム（１）

明暗順応：

明るさの変化に対する調節機構

側抑制：側抑制：

視野の中の明暗の微小変化を局所的に検出 強調するメカ ズム出・強調するメカニズム

色順応：順

色彩の対比に対する調節機構

生体から学ぶべきメカニズム（２）生体から学ぶべきメカニズム（２）

初期視覚における特徴抽出：空間領域

局所的な明るさ・色調の対比

エッジ検出

構図

全体的な 色全体的な明るさ・色調

周波数領域画像・映像の複雑さ

画像・映像内の規則性

［注意］［注意］ 今日の話題は今日の話題は､､､､､､

感性工学の研究の最前線の話題が含まれています。

「教科書」的な知識ではないので「教科書」的な知識ではないので、専門家の間でも、知らない人が多いかも。

［復習］明暗順応の必要性［復習］明暗順応の必要性

ある定常状態では、受容できる刺激強度（ダイナミックレンジ）が限られる（ダイナミックレンジ）が限られる。

環境光（刺激強度）が急に変わると、暗 暗くて何も見えない→暗： 暗くて何も見えない。

→明： 明るすぎて何も見えない。

ある時間が経過するとある時間が経過すると、知覚（＝コントラストの違いを検出）できるようになるできるようになる。

→暗： 数分～数十分

→明： 数秒～数分→明： 数秒～数分

［実験＆課題1a］明順応（大域的現象）

テストパターンに目を慣れさせて（明順応）被写体の細部を観察してみよう。観察してみよう。

「目」では、どんな現象が生じているのかどんな現象が生じているのか、定性的・定量的に説明してみよう。

［参考：原画像］

［実験＆課題1b］暗順応（大域的現象）

テストパターンに目を慣れさせて（暗順応）被写体の細部を観察してみよう。観察してみよう。

「目」では、どんな現象が生じているのかどんな現象が生じているのか、定性的・定量的に説明してみよう。

［参考：原画像］

明暗順応（大域的な処理）明暗順応（大域的な処理）

感度を調整するfcurve shifting

シグモイド関数=

SEE

Naka-Rashotonの式σ+

=S

EE 0

S

いたるところで

σ+=

SSEE 0

いたるところで微分可能

［補足］

明暗順応だけでは、全体的な （ダ ク ジ）が全体的なコントラスト（ダイナミックレンジ）が増幅されるわけではない。

全体的・部分的なコントラストの増幅が見やすさにつながる。

［参考：ダイナミックレンジも調整］

［参考：ダイナミックレンジも調整］

［実験＆課題２］明暗順応

テストパターンに目を慣れさせて（？順応）被写体の細部を観察することができるだろうか？観察することができるだろうか？

「目」では、どんな現象が生じているのかどんな現象が生じているのか、定性的・定量的に説明してみよう。

中間部強調が必要

(*)１枚の画像中に強調すべき輝度区間が複数ある複数ある↓

明暗順応では

明部強調が必要

明暗順応では強調しきれない

く き(*)くっきり見せるにはエッジ強調も必要

暗部強調が必要暗部強調が必要

階調の非線形補正（暗部強調）階調の非線形補正（暗部強調）

階調の非線形補正（明部強調）階調の非線形補正（明部強調）

階調の非線形補正（中間の変化を強調）階調の非線形補正（中間の変化を強調）

「見える・見やすい」

大域的

明順応、暗順応

局所的局所的

明るさの違い、色の違いを「強調（増幅）」（ここにも 側抑制！）（ここにも、側抑制！）

→ 明るさ・色の違いに気づく

→ 物体と背景の分離

→ 物体の認識

側抑制側抑制 Lateral InhibitionLateral Inhibition

側抑制機構（中心 - 周辺拮抗作用）：ある点が刺激を受けて（正 ON 負 OFF の）興奮作用を起こすと、その周辺の点が逆に抑制作用を起こす様な機構様な機構。

光刺激の空間的・時間的変化を検出エッジ強調

ON-center型（ON-center OFF-surround型）

OFF-center型（OFF-center ON-surround型）

錯視現象マッハバンド

ハーマングリッド

側抑制側抑制 Lateral InhibitionLateral Inhibition

特に今回は、す 側抑明暗に関する側抑制について

考察します。

カラーに関する側抑制については次回に考察します（仕組みが違う！）

側抑制（明暗の場合）側抑制（明暗の場合）

On-center型、off-center型

I+ II+

I- I+

I-

［実験＆課題2a,b］側抑制

テストパターンを見てどのような明るさ（＆空間上の変化）を観察することができるだろうか？観察することができるだろうか？

「目」では、どんな現象が生じているのかどんな現象が生じているのか、定性的・定量的に説明してみよう。

［実験＆課題3a］側抑制

テストパターンを見てどのような明るさ（＆空間上の変化）を観察することができるだろうか？観察することができるだろうか？

「目」では、どんな現象が生じているのかどんな現象が生じているのか、定性的・定量的に説明してみよう。

階調の非線形補正階調の非線形補正階調の非線形補正階調の非線形補正（明暗部の変化を強調）（明暗部の変化を強調）

［実験＆課題3b］側抑制

テストパターンを見てどのような明るさ（＆空間上の変化）を観察することができるだろうか？観察することができるだろうか？

「目」では、どんな現象が生じているのかどんな現象が生じているのか、定性的・定量的に説明してみよう。

高周波の強調（高周波の強調（HighHigh--pass filterpass filter））gg pp

画像強調（側抑制機構）の画像強調（側抑制機構）の画像強調（側抑制機構）の画像強調（側抑制機構）の工学的な必要性工学的な必要性

視野の中の明部や暗部での微小変化に対する感度が低下。（明るさに対するＳ字型の応答特性）（明るさに対するＳ字型の応答特性）

応答を何らかの逆Ｓ字型変換で補正し、スケール不変に近付ける神経回路が必要。

広いダイナミックレンジの光刺激に対して、良好な応答特性を得る。

V V ' V '

⊗ →⊗

V =I src

Isrc +σV = log

V − V0

V1 − V

→

i = log I src V

刺激強度に対する

電位応答

逆Ｓ字型変換による

電位応答の補正

i = log I src

刺激強度（対数）に対し

線形に近い電位応答

中間部強調が必要

(*)１枚の画像中に強調すべき輝度区間が複数ある複数ある↓

明暗順応では

明部強調が必要

明暗順応では強調しきれない

く き(*)くっきり見せるにはエッジ強調も必要

暗部強調が必要暗部強調が必要

[[考察考察]]ポジポジ&&ネガの２チャンネルの構造ネガの２チャンネルの構造

背景の明るさに対して「見やすい明るさ」がある。

ポジ 像 変 ガ 像 変ポジ画像上での微小変化量とネガ画像上での微小変化量の線形和。

階調の反転（ポジ階調の反転（ポジ→→ネガ）ネガ）

側抑制の工学的なモデル側抑制の工学的なモデル

側抑制 ON-center 型チャネル OFF-center 型チャネル

画像 ポジ ネガ

刺激 {I − I0} {I1 − I }

Weber 則則

差分の加算

Fechner 則

側抑制効果の加算側抑制効果の加算

側抑制の工学的なモデル側抑制の工学的なモデル

側抑制 ON-center 型チャネル OFF-center 型チャネル

画像 ポジ ネガ

刺激 {I − I0} {I1 − I }

Weber 則ΔI

I I則 I − I0

差分の加算

Fechner 則

側抑制効果の加算側抑制効果の加算

側抑制の工学的なモデル側抑制の工学的なモデル

側抑制 ON-center 型チャネル OFF-center 型チャネル

画像 ポジ ネガ

刺激 {I − I0} {I1 − I }

Weber 則ΔI

I I則 I − I0

差分の加算

Fechner 則 log(I − I0 )

側抑制効果の加算側抑制効果の加算

側抑制の工学的なモデル側抑制の工学的なモデル

側抑制 ON-center 型チャネル OFF-center 型チャネル

画像 ポジ ネガ

刺激 {I − I0} {I1 − I }

Weber 則ΔI

I IΔI

I I則 I − I0 I1 − I

差分の加算

Fechner 則 log(I − I0 ) − log(I1 − I )

側抑制効果の加算側抑制効果の加算

側抑制の工学的なモデル側抑制の工学的なモデル

側抑制 ON-center 型チャネル OFF-center 型チャネル

画像 ポジ ネガ

刺激 {I − I0} {I1 − I }

Weber 則ΔI

I IΔI

I I則 I − I0 I1 − I

差分の加算ΔI

I − I0+

ΔII1 − I

Fechner 則 log(I − I0 ) − log(I1 − I )

側抑制効果の加算側抑制効果の加算

側抑制の工学的なモデル側抑制の工学的なモデル

側抑制 ON-center 型チャネル OFF-center 型チャネル

画像 ポジ ネガ

刺激 {I − I0} {I1 − I }

Weber 則ΔI

I IΔI

I I則 I − I0 I1 − I

差分の加算ΔI

I − I0+

ΔII1 − I

Fechner 則 log(I − I0 ) − log(I1 − I )

側抑制効果の加算 K( I) = log(I − I0 ) − log(I1 − I ) = logI − I0

側抑制効果の加算 K( I) log(I I0 ) log(I1 I ) logI1 − I

側抑制機構の工学的な解釈側抑制機構の工学的な解釈

視野の中の明部や暗部での微小変化に対する感度が低下。（明るさに対するＳ字型の応答特性）（明るさに対するＳ字型の応答特性）

応答を何らかの逆Ｓ字型変換で補正し、スケール不変に近付ける神経回路が必要。（側抑制機構の必要性）（側抑制機構の必要性）

広いダイナミックレンジの光刺激に対して、良好な応答特性を得る。V V ' V '

⊗ →⊗

V =I src

Isrc +σV = log

V − V0

V1 − V

→

i = log I src V

刺激強度に対する

電位応答

逆Ｓ字型変換による

電位応答の補正

i = log I src

刺激強度（対数）に対し

線形に近い電位応答

非線形変換非線形変換 K(I) K(I) の性質の性質

非線形変換 K(I) は、逆Ｓ字型曲線を描く。

明部・暗部のコントラストを強調する輝度の補正式として利用できる。正式として利用できる。

K(I) = c1 logI − I0

I1 − I+ c2

非線形変換 K(I) の微分は、輝度に対するスケ ル不変なエッジ強度を表す

1

スケール不変なエッジ強度を表す。

dK(I) = c11

+1⎛

⎝⎜ ⎞

⎠⎟ dIdK(I) c1 I − I0

+I1 − I⎝ ⎠

⎟dI

非線形変換非線形変換 K(I) K(I) の数値シミュレーションの数値シミュレーション 中間部強調が必要

(*)１枚の画像中に強調すべき輝度区間が複数ある複数ある↓

明暗順応では

明部強調が必要

明暗順応では強調しきれない

く き(*)くっきり見せるにはエッジ強調も必要

暗部強調が必要暗部強調が必要

非線形変換非線形変換 K(I) K(I) の局所並列性の局所並列性

非線形変換 K(I) とコントラスト：視野の中の明部 暗部での微小変化に対する感度を補正視野の中の明部・暗部での微小変化に対する感度を補正。

注目点の近傍の背景の明るさに適応して、補正式を制御。

様々な明るさの背景の下で、注目点の近傍のコントラストを局所様々な明るさの背景の下で、注目点の近傍のコントラストを局所並列的に強調。

I I +α × (I I ) + βK(I) = c1 log

I − IL +α posi × (Imin − IL) + β posi

IU − I +α nega × (IU − Imax ) + βnega

+ c2

IU, IL: 数値的に想定される最大輝度・最小輝度（定数）

Imax, Imin: 局所近傍における最大値、最小値Imax, Imin: 局所近傍における最大値、最小値

αposi, αnega, βposi, βnega: 生理学的な定数

側抑制の工学的モデル側抑制の工学的モデル

側抑制による非線形変換 K(I) は、逆Ｓ字型曲線を描を描く。

I → V 等と置換えると、非線形変換 K(v) は応答の補正回路と考えられる。

錯視現象のシミュレーション錯視現象のシミュレーション

マッハバンド効果効果

ハーマングリッド錯視

残像

側抑制と バ ド効果側抑制と バ ド効果側抑制とマッハバンド効果側抑制とマッハバンド効果Mach Band EffectMach Band Effect

マッハバンド効果：マッ ンド効果：明るさがステップ的に変わる画像の境界付近で、暗い側により暗い帯が、暗い側により暗い帯が、明るい側により明るい帯が見える視覚心理的現象。

より一般的には、色がステップ的に変わる画像の境界付近でも、同様の現象が認められる。（例 明るさは同じで 色相のみ変化 等の場合）（例：明るさは同じで、色相のみ変化、等の場合）

側抑制と バ ド効果側抑制と バ ド効果側抑制とマッハバンド効果側抑制とマッハバンド効果Mach Band EffectMach Band Effect 側抑制とマッハバンド効果側抑制とマッハバンド効果

側抑制による説明：

各 傍 度 布 適 変換 自 節各局所近傍の輝度分布に適応して、変換式を自動調節

→ 輝度の一様部と境界部で、変換の曲率が異なる。

K(I) lI − IL +α posi × (Imin − IL) + β posi +K(I) = c1 log p p

IU − I +α nega × (IU − Imax ) + βnega

+ c2

マッハバンド効果の数値シミュレーションマッハバンド効果の数値シミュレーション

250 250

150

200

150

200

50

100

0

16

32

48

50

100

0

16

32

48

マッハバンド効果の数値シミュレーションマッハバンド効果の数値シミュレーション

250 2 5 0

100

150

200

1 0 0

1 5 0

2 0 0

0

50

0

20

40 60

0

5 0

0

20

40

60

側抑制とグリッド錯視側抑制とグリッド錯視側抑制とグリッド錯視側抑制とグリッド錯視Hermann Grid IllusionHermann Grid Illusion

ハーマングリッド錯視：錯視黒い背景の上の白い格子パターンを見ると、格子の交差部に暗い点が見える。格子の交差部に暗い点が見える。

白い背景の上に黒い格子パターンを見ると、格子の交差部に明るい点が見える格子の交差部に明るい点が見える。

側抑制とグリッド錯視側抑制とグリッド錯視側抑制とグリッド錯視側抑制とグリッド錯視Hermann Grid IllusionHermann Grid Illusion

側抑制とハーマングリッド錯視側抑制とハーマングリッド錯視

側抑制による説明：

白格子の交点付近 → ON t 型が優位白格子の交点付近 → ON-center型が優位

白格子の交点以外 → OFF-center型が優位

各局所近傍の輝度分布に適応して、マッハバンドの生じ方が異なる。各局所近傍の輝度分布に適応して、 ッ ンドの生じ方が異なる。

→ マッハバンド効果の重ね合わせで、交点付近・交点以外での応答が異なる。

( ) 側抑制の ト（近傍の大きさ）と格子の太さの相対的な関係(*) 側抑制のユニット（近傍の大きさ）と格子の太さの相対的な関係に依存する。

K(I) = c1 logI − IL +α posi × (Imin − IL) + β posi

IU − I +α nega × (IU − Imax ) + βnega

+ c2g g

グリッド錯視の数値シミュレーショングリッド錯視の数値シミュレーション

側抑制と残像現象側抑制と残像現象 After ImageAfter Image

残像現象：像現象正の残像：もとの光刺激が取り除かれた後も、ごく短い時間（0.５秒程度）だけ、もとの光刺激による効果がそのまま認められる現象。

像負の残像：正の残像に引き続いて、光刺激のネガの様な像（負の残像）が見える この現象はもとの光刺激の強度との残像）が見える。この現象はもとの光刺激の強度と刺激の持続時間によって異なるが、数秒ないし数分現れる。現れる。

［実験＆課題４］側抑制と残像現象［実験＆課題４］側抑制と残像現象 After ImageAfter Image

側抑制と残像現象側抑制と残像現象

従来は「受容器の疲労と新しい刺激への順応での時間遅れ」で説明されてきたがされてきたが、、、

正の残像から負の残像への移行過程、

残像におけるマッハバンドの有無など、

計測が難しく、様々な実験結果とその解釈が報告されている。

側抑制と残像現象側抑制と残像現象

側抑制による説明：kt ktvt = vt−1 × e−kt + vnew × (1− e− kt)

( ) βK(vt) = c1 log

v t− vL +α posi × (vt min −vL) + β posi

vU −vt +α nega × (vU −vt max) + βnega

+ c2

但 暗 応 する時間

U t nega ( U t max) βnega

但し、明暗順応に要する時間TA>> 側抑制での順応に要する時間TL>> 正の残像から負の残像への移行に要する時間TPN>> 正の残像から負の残像 の移行に要する時間TPN

残像現象の数値シミュレーション残像現象の数値シミュレーション

残像現象の数値シミュレーション残像現象の数値シミュレーション

(a) 入力画像

残像(b) t=1正の残像

(c) t=2

(d) t=3 負の残像に移行

(e) t=4

(f) t=5

(g) t=10 マッハバンド消失

(h) t=20

(i) t=40 負の残像消失へ

［宿題］（チャレンジ問題）

今回の説明は主として明暗対比に関する側抑制だった。

ではでは、色彩知覚・色彩対比に関する側抑制では、どのような現象が生じていると考えられるどのような現象が生じていると考えられるか？

（参考）側抑制（色彩に対する対比）（参考）側抑制（色彩に対する対比）

色彩に対する側抑制

G-R+

R-G+

Y-BR+ G+

On-center

G+ R+ B-Y

On-center

R- G-

Off-center

色彩の知覚色彩の知覚

明暗対比

色対比

側抑制（カラーの場合）側抑制（カラーの場合）

期待される効果は？

「赤」の変化する部位でのボケ（Gaussian、赤の漏れ出し）の影響をボケ（ 、赤の漏れ出し）の影響を抑えて、「赤」の変化を強調、、、ではない！赤」 変化を強調、、、 はな

「赤」の変化にメリハリをつけ、、、ない！

側抑制（カラーの場合）側抑制（カラーの場合）

期待される効果は？

「赤」の支配的な部位での弱い「緑」の光による弱 緑」の光 よる色ボケ（赤→橙→黄）の影響を抑えて、抑え 、「赤」を強調

「赤」はより「赤」く「赤」はより「赤」く色ムラを抑えて、均一の色

生理レベルの感性を利用した画像強調生理レベルの感性を利用した画像強調

側抑制と順応機構の統合

明暗対比： 明るさの微妙な差を増幅

色対比： より彩度（色差）を強調色対比： より彩度（色差）を強調

おまけおまけ 今回の提出物今回の提出物

翌々週の月曜（１２月２７日）は全停電なので、年内 内に年内の内に

宛先: hm-q@indsys.chuo-u.ac.jp ポ件名: [IPS] レポート 氏名、学年、番号

（添付書類）考 ポ実験結果＋考察課題のレポートを提出

PDFの添付書類（書類名に注意！）IPS ID 授業日 版 dfIPS-userID-授業日-版.pdf

（例）IPS-d70123-091126-v1.pdf

次回は？年明けは？

次回（１２月２３日（木、祝））は、授業しますか？

年明けは１月１３日（木）が最終回年明けは１月１３日（木）が最終回、補講しますか？