25.08.2013 Views

Rezumat teza

Rezumat teza

Rezumat teza

SHOW MORE
SHOW LESS

Create successful ePaper yourself

Turn your PDF publications into a flip-book with our unique Google optimized e-Paper software.

Facultatea de Electronică, Telecomunicat , ii<br />

s , i Tehnologia Informat , iei<br />

Ing. Cosmin Ludus,an<br />

TEZĂ DE DOCTORAT<br />

în cotutelă cu<br />

UNIVERSITATEA BORDEAUX 1<br />

(Frant ,a)<br />

– rezumat în limba română –<br />

DE LA RESTAURARE LA ÎMBUNĂTĂT, IRE<br />

DE IMAGINI:<br />

fuziune de imagini cu eliminare concomitentă de zgomot<br />

folosind Ecuat , ii cu Derivate Part , iale<br />

Comisia de evaluare a tezei de doctorat:<br />

Conducători s ,tiint ,ifici:<br />

Prof.dr.ing. Monica BORDA<br />

Prof.dr.ing. Olivier LAVIALLE<br />

PRES , EDINTE:<br />

Prof.dr.ing. Gabriel OLTEAN Secretar S , tiint ,ific ETTI,<br />

Universitatea Tehnică din Cluj-Napoca<br />

MEMBRI:<br />

Prof.dr.ing. Monica BORDA Universitatea Tehnică din Cluj-Napoca<br />

Prof.dr.ing. Olivier LAVIALLE ENITA de Bordeaux (Frant ,a)<br />

Prof.dr.ing. Philippe BOLON referent, Polytech Annecy-Chambéry (Frant ,a)<br />

Prof.dr.ing. Ioan NAFORNIT , Ă referent, Universitatea ” Politehnica” din Timis ,oara<br />

Prof.dr.ing. Christian GERMAIN ENITA de Bordeaux (Frant ,a)<br />

Conf.dr.ing. Romulus TEREBES , Universitatea Tehnică din Cluj-Napoca


<strong>Rezumat</strong><br />

Prezenta teză abordează aspecte cheie ale metodologiei actuale în restaurarea s ,i îmbunătăt<br />

,irea de imagini, tratând aceste aspecte de o manieră progresivă prin propunerea a două<br />

noi paradigme de procesare de imagini. Cele două modele, i.e., deconvolut ,ie cu eliminare<br />

simultană de zgomot s ,i ameliorare de coerent ,ă s ,i fuziune de imagini cu eliminare concomitentă<br />

de zgomot, fiind formalizate într-un cadru teoretic comun, s ,i anume Ecuat ,ii cu<br />

Derivate Part ,iale.<br />

Din punct de vedere funct ,ional, cel dintâi model de procesare de imagini propus<br />

reprezintă un pas intermediar în validarea s ,i testarea conceptului de restaurare s ,i îmbunătăt<br />

,ire simultană de imagini, în timp ce al doilea model, i.e., fuziune de imagini cu eliminare<br />

concomitentă de zgomot, ilustrează pe deplin avantajele unei abordări simultane (paralelizate)<br />

în procesarea de imagini, comparativ cu abordarea oarecum clasică a procesării<br />

secvent ,iale de imagini în vederea restaurării s ,i îmbunătăt ,irii acestora.<br />

În ceea ce prives ,te metodologia de lucru, cele două modele propuse sunt formalizate<br />

atât din punct de vedere teoretic precum s ,i experimental, fiind analizate s ,i comparate<br />

cu modelele similare existente, în conformitate cu rigorile s ,tiint ,ifice actuale. Analiza experimentală<br />

evident ,iază caracteristicile s ,i particularităt ,ile celor două modele propuse, în<br />

timp ce studiul comparativ reiterează avantajele ce derivă din paralelizarea, s ,i implicit comasarea,<br />

celor două procese (restaurare s ,i îmbunătăt ,ire de imagini) în raport cu abordarea<br />

standard, secvent ,ială.


Cuprins<br />

Capitolul 1.<br />

Introducere . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1<br />

1.1 Motivat ,ie . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1<br />

1.2 Conceptualizare . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1<br />

1.3 Organizare . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2<br />

Capitolul 2.<br />

Restaurarea de imagini folosind Ecuat ,ii cu Derivate Part ,iale . . . . . 3<br />

2.1 Definit ,ii . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3<br />

2.2 Procesarea de imagini folosind Ecuat ,ii cu Derivate Part ,iale . . . . . . . . . 3<br />

2.3 Filtrarea liniară în restaurarea de imagini . . . . . . . . . . . . . . . . . . . 4<br />

2.4 Filtrarea neliniară – difuzia anizotropă . . . . . . . . . . . . . . . . . . . . 5<br />

Capitolul 3.<br />

Restaurare de imagini folosind filtre de s ,oc hibride . . . . . . . . . . . 6<br />

3.1 Introducere . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6<br />

3.2 Filtrul de s ,oc hibrid . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7<br />

3.2.1 Modelul matematic . . . . . . . . . . . . . . . . . . . . . . . . . . . 8<br />

3.2.2 Extensia modelului pentru ameliorare de coerent ,ă . . . . . . . . . . 9<br />

3.2.3 Analiză experimentală . . . . . . . . . . . . . . . . . . . . . . . . . 10<br />

3.3 Concluzii . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12<br />

Capitolul 4.<br />

Fuziunea de imagini ca proces de îmbunătăt ,ire de imagini . . . . . . . 13<br />

4.1 Introducere . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13<br />

4.2 Definit ,ii s ,i clasificări . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13<br />

Capitolul 5.<br />

Fuziunea de imagini cu eliminare concomitentă de zgomot . . . . . . 14<br />

5.1 Motivat ,ie . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14<br />

5.2 Formulare matematică . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14<br />

5.3 Analiză experimentală . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17


Cuprins v<br />

Capitolul 6.<br />

Concluzii, observat ,ii, perspective . . . . . . . . . . . . . . . . . . . . . . 20<br />

Bibliografie . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21


Listă de figuri<br />

3.1 Exemplificarea unui proces de deconvolut ,ie pentru un semnal 1-D pentru<br />

I0(x) = − sin(x) definit pe intervalul [−π, π]. Linia punctată albastră<br />

reprezintă semnalul init ,ial, în timp ce linia continuă ilustrează evolut ,ia<br />

în timp a funct ,iei I, săget ,ile indicând sensul de propagare a efectului de<br />

deconvolut ,ie. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7<br />

3.2 Filtre de s ,oc – analiză comparativă: (a) Imagine referint ,ă; (b) Imagine<br />

init ,ială contaminată I0 – defocalizare gaussiană (σd = 3) + zgomot alb<br />

gaussian aditiv (σz = 10); (c) Rezultat filtru Osher–Rudin; (d) Rezultat<br />

filtru Alvarez–Mazorra [AM94]; (e) Rezultat filtru Kornprobst et al.<br />

[KDA97]; (f) Rezultat filtru Remaki–Cheriet [RC03]; (g) Rezultat filtru<br />

Gilboa et al.; (h) Rezultat filtru de s ,oc hibrid. . . . . . . . . . . . . . . . . 10<br />

3.3 Filtru de s ,oc hibrid cu ameliorare de coerent ,ă – analiză comparativă: (a)<br />

Imagine referint ,ă; (b) Imagine init ,ială I0 contaminată cu defocalizare gaussiană<br />

(σd = 10) + zgomot alb, gaussian aditiv (σz = 25); (c) Rezultat filtru<br />

Gilboa et al.; (d) Rezultat filtru CESF Weickert; (e) Rezultat filtru de s ,oc<br />

hibrid cu ameliorarea de coerent ,ă + detaliu. . . . . . . . . . . . . . . . . . 11<br />

5.1 Analiză comparativă – rezultate selective: (a) Imagine de intrare I1 (σz =<br />

13); (b) Imagine de intrare I2 (σz = 13); (c) Rezultat metodă MED; (d)<br />

Rezultat metodă SIDWT-hard; (e) Rezultat metodă Pop-2; (f) Rezultat<br />

metodă propusă. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17<br />

5.2 Scenariu de fuziune multi-expunere – model propus: (a) I1 s ,i detaliu (d);<br />

(b) I2 s ,i detaliu (e); (c) Ĩ rezultat fuziune s ,i detaliu (f). . . . . . . . . . . . 19<br />

5.3 Scenariu de fuziune imagini medicale – model propus: (a) I1 imagine CT<br />

s ,i detaliu (d); (b) I2 imagine RMN s ,i detaliu (e); (c) Ĩ rezultat fuziune s ,i<br />

detaliu (f). . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19


Listă de tabele<br />

3.1 Rezultate analiză calitativă – cadru experimental Fig. 3.2 . . . . . . . . . 11<br />

3.2 Rezultate analiză calitativă – cadru experimental Fig. 3.3 . . . . . . . . . 12<br />

5.1 Analiză comparativă – zgomot alb, gaussian aditiv - σz = 13 . . . . . . . . 18


Capitolul 1<br />

Introducere<br />

1.1 Motivat, ie<br />

În ceea ce prives ,te enunt ,ul problemei, cerint ,ele generale ale acestei teze s-au înscris pe<br />

direct ,ia definirii de noi mecanisme de restaurare s ,i îmbunătăt ,ire de imagini prin modelizare<br />

matematică pe bază de Ecuat ,ii cu Derivate Part ,iale. Mai mult, problema s-a dorit a fi<br />

abordată încă de la început t ,inându-se cont de, s ,i evaluând, posibilitatea definirii unor<br />

modele unificate, care să permită paralelizarea celor două tipuri de procesări de imagini.<br />

Odată definite, aceste paradigme urmau a fi evaluate experimental s ,i pozit ,ionate din punct<br />

de vedere al performat ,elor în cadrul metodologiei existente, pe baza analizei experimentale<br />

comparative.<br />

Comasarea celor două procedee de procesare de imagini într-un proces singular, paralelizat,<br />

a fost în principal motivată de către metodele existente, care, des ,i într-un stadiu<br />

incipient, au demonstrat o serie de avantaje date de maniera concomitentă de a gestiona<br />

sarcinile de procesare precum s ,i de faptul că din punct de vedere teoretic sunt corect<br />

formulate, fiind probleme cu solut ,ie unică.<br />

Printre principalele aspecte care motivează necesitatea acestor modele combinate,<br />

o important ,ă aparte o reprezintă capacitatea lor de a procesa informat ,ia de o manieră<br />

corelată. Acest lucru este cu precădere important în scenariile de fuziune de imagini,<br />

unde informat ,ia de intrare (un număr S de surse) este, într-o mai mică sau mai mare măsură,<br />

corelată. Astfel, o abordare simultană este avantajoasă, deoarece permite utilizarea<br />

acestei informat ,ii corelate ca informat ,ie utilă s ,i factor de decizie în cadrul proceselor<br />

de restaurare s ,i îmbunătăt ,ire de imagini. Mai mult, în scenariile reale, imaginile nu sunt<br />

niciodată afectate de o singură sursă de contaminare cum ar fi zgomotul sau defocalizarea,<br />

prin urmare o procesare secvent ,ială pentru a elimina o sursă de contaminare poate fi în<br />

detrimentul următoarei metode din lant ,ul de procesare. Prin urmare, abordarea simultană<br />

a gestionării surselor de contaminare a imaginilor poate elimina acest inconvenient,<br />

aducând totodată o serie de avantaje ce provin din procesarea corelată a informat ,iei.<br />

1.2 Conceptualizare<br />

În ceea ce prives ,te conceptualizarea solut ,iei la nivel de cerint ,e generale, abordarea propusă<br />

este fundamentată pe un principiu progresiv de la simplu spre complex, unde solut ,ia<br />

finală este rezultatul unei analize etapizate, produsul intermediar al acestui proces fiind<br />

reprezentat de prima metodă propusă, i.e., un nou model de filtru de s ,oc pentru eliminarea<br />

defocalizărilor gaussiene concomitent cu filtrarea de zgomot. Acest model (altfel de<br />

sine stătător s ,i cu aplicabilitate directă s ,i imediată în procesarea de imagini) reprezintă,<br />

în contextul tezei, un studiu de fezabilitate al conceptului de comasare s ,i paralelizare a<br />

metodelor de restaurare de imagini, deschizând astfel calea unor paradigme cu o complex-


2 Capitolul 1. Introducere<br />

itate s ,i aplicabilitate sporită. Mai mult de atât, ca o extensie a modelului filtrului de s ,oc<br />

propus în primă fază, se adaugă acestuia not ,iunea de ameliorare de coerent ,ă, not ,iune care<br />

permite extinderea spectrului de aplicabilitate a metodei, consolidând caracterul de sine<br />

stătător al acesteia. Totodată, adăugarea caracteristicii de ameliorare de coerent ,ă la modelul<br />

propus pentru eliminarea defocalizărilor gaussiene concomitent cu filtrarea de zgomot<br />

reprezintă un pas important în direct ,ia unificării conceptelor de restaurare s ,i îmbunătăt ,ire<br />

de imagini, desideratul final al acestei teze.<br />

Ca parte a abordării progresive, a doua metodă propusă, s ,i anume fuziunea de imagini<br />

cu eliminare concomitentă de zgomot, urmăres ,te satisfacerea unei duble meniri: (a) validarea<br />

atât din punct de vedere teoretic, cât s ,i practic a conceptului de comasare a sarcinilor<br />

de procesare de imagini; (b) pozit ,ionarea ca metodă alternativă în domeniul fuziunii de<br />

imagini (în sens larg), precum s ,i în cel al fuziunii de imagini zgomotoase (în sens restrâns),<br />

cu rezultate calitative comparabile sau superioare metodelor existente.<br />

1.3 Organizare<br />

În ceea ce prives ,te organizarea acestui rezumat, din rat ,iuni de consecvent ,ă cu manuscrisul<br />

complet al tezei, se va păstra aceeas ,i structură, punându-se însă accentul pe contribut ,iile<br />

tezei, partea de fundamentare teoretică fiind disponibilă pe larg în manuscrisul anterior<br />

ment ,ionat. Prin urmare, prezentul rezumat este alcătuit după cum urmează:<br />

Capitolul 1 (capitolul curent) reprezintă sect ,iunea introductivă a acestui rezumat, fiind<br />

alcătuit din trei părt ,i: (i) prezentarea subiectului acestei teze, i.e., enunt ,ul problemei,<br />

(ii) conceptualizarea s ,i abordarea practică, s ,i (iii) organizarea rezumatului.<br />

Capitolul 2 oferă o descriere succintă a not ,iunilor teoretice fundamentale în metodologia<br />

procesării de imagini pe baza Ecuat ,iilor cu Derivate Part ,iale, precum s ,i a folosirii<br />

acestora în formulări variat ,ionale.<br />

Capitolul 3 prezintă primul model propus, i.e., filtrul de s ,oc pentru eliminarea defocalizărilor<br />

gaussiene concomitent cu filtrarea de zgomot, din perspectiva formulării<br />

teoretice, validării experimentale s ,i a analizei comparative.<br />

Capitolul 4 constituie o trecere în revistă a terminologiei s ,i definit ,iilor legate de fuziunea<br />

de imagini, ca ramură de sine stătătoare în procesarea de imagini, stabiles ,te<br />

obiectivele cheie ale unui proces de fuziune, s ,i nu în ultimul rând aduce în discut ,ie<br />

neajunsurile metodologiei actuale de evaluare calitativă în cazul scenariilor de fuziune<br />

complexe, e.g., fuziune de imagini cu eliminare concomitentă de zgomot.<br />

Capitolul 5 este dedicat descrierii pe scurt a modelului de fuziune de imagini cu eliminare<br />

concomitentă de zgomot propus, incluzând prezentarea teoretică, analiza experimentală<br />

s ,i o scurtă exemplificare a potent ,ialelor aplicat ,ii practice.<br />

Capitolul 6 conchide acest rezumat prezentând concluziile finale, observat ,iile legate de<br />

modelele propuse precum s ,i perspectivele continuării cercetării pe această direct ,ie.


Capitolul 2<br />

Restaurarea de imagini folosind<br />

Ecuat,ii cu Derivate Part,iale<br />

2.1 Definit, ii<br />

Dat fiind faptul că subiectul acestei teze abordează elemente specifice procesării de imagini,<br />

i.e., restaurarea s ,i îmbunătăt ,irea de imagini, este necesară o definire prealabilă a<br />

acestor termeni precum s ,i o clasificare a principalelor obiective în procesarea de imagini 1 .<br />

Conform DEX, restaurarea este definită ca act ,iunea de ” a repara, a aduce în bună<br />

stare, a reface în forma init ,ială un monument de arhitectură, o pictură etc.”, în timp ce<br />

procesul de îmbunătăt ,ire descrie act ,iunea de ” a face ca ceva să devină sau a deveni mai<br />

bun, a face să capete sau a căpăta o valoare sau o calitate superioară”.<br />

Cu toate că definit ,iile anterioare exprimă doar lato sensu cele două not ,iuni în accept ,iunea<br />

procesării de imagini, ele sunt edificatoare în stabilirea diferent ,elor funct ,ionale între<br />

cele două procese. Astfel prin procesul de restaurare de imagini se urmăres ,te aducerea<br />

unei imagini afectate de un contaminant (e.g., zgomot, defocalizare) la o stare anterioară<br />

contaminării, când se presupune că imaginea era nealterată, cont ,inând doar informat ,ie<br />

utilă. Pe de altă parte, procesul de îmbunătăt ,ire de imagini pornes ,te de la o imagine a<br />

priori nealterată s ,i are ca obiectiv sporirea, intensificarea caracteristicilor utile ale imaginii<br />

init ,iale, printr-un aport de informat ,ie utilă. În această teză îmbunătăt ,irea imaginilor<br />

se referă cu precădere la două procedee, s ,i anume ameliorarea de coerent ,ă s ,i fuziunea de<br />

imagini.<br />

2.2 Procesarea de imagini folosind Ecuat, ii cu Derivate<br />

Part, iale<br />

În metodologia actuală formalismul EDP 2 reprezintă doar unul dintre posibilele instrumente<br />

matematice folosite în prelucrarea de imagini, conform clasificării întocmite în<br />

[CS05], care împarte metodologia curentă în: metode morfologice; analiză Fourier<br />

s ,i spectrală; analiză wavelet s ,i spat ,iu-scalat; modelizare stocastică; metode<br />

variat ,ionale; metode EDP.<br />

Observat ,ie În ceea ce prives ,te formularea matematică, trebuie subliniat faptul că metodele<br />

variat ,ionale sunt în mod normal exprimate prin intermediul EDP, dar că nu toate metodele<br />

bazate pe EDP sunt implict metode variat ,ionale, fapt evident ,iat s ,i de către Chan s ,i Shen<br />

1 n.b. în contextul acestei teze, not,iunea de procesare de imagini se referă stricto sensu la procesul de<br />

prelucrare computerizată a imaginilor ca semnal digital bi- sau tridimensional<br />

2 Ecuat,ii cu Derivate Part ,iale


4 Capitolul 2. Restaurarea de imagini folosind Ecuat ,ii cu Derivate Part ,iale<br />

în [CS05] dând exemplu ecuat ,iile Navier–Stokes din dinamica fluidelor sau pe cele ale lui<br />

Maxwell din electromagnetism.<br />

Folosirea EDP în procesarea de imagini îs ,i are originile în fizică, unde acestea erau<br />

folosite pentru a modeliza fenomene fizice, prin care un exemplu elocvent ar fi acela al<br />

propagării căldurii. Koenderink a fost primul care a stabilit în [Koe84] echivalent ,a dintre<br />

solut ,ia ecuat ,iei propagării căldurii la momentul t (modelizată printr-o EDP) s ,i procesul<br />

de convolut ,ie cu un nucleu gaussian de deviat ,ie standard √ 2t.<br />

În procesarea de imagini<br />

această ecuat ,ie este cunoscută sub numele de difuzie izotropă, fiind formalizată init ,ial pe<br />

baza a trei principii [Koe84]: (i) cauzalitate, (ii) omogenitate s ,i (iii) izotropie.<br />

2.3 Filtrarea liniară în restaurarea de imagini<br />

În prelucrarea de imagini zgomotul, ca factor contaminant, este considerat a fi un semnal<br />

de frecvent ,ă înaltă, prin urmare o solut ,ie imediată în filtrarea de zgomot este dată<br />

de difuzia izotropă. Fie I0 : R2 → R funct ,ia luminant ,ă care descrie imaginea init ,ială,<br />

contaminată, definită pe mult ,imea Ω = [0, a] × [0, b]. Imaginea filtrată, I(x, y, σ), este<br />

exprimată matematic ca:<br />

<br />

I(x, y, σ) = I0(x, y) ∗ Gσ(x, y) = Gσ(x − u, y − v)I0(u, v)dudv (2.1)<br />

unde σ reprezintă deviat ,ia standard a lui G, care în majoritatea cazurilor reprezintă un<br />

nucleu gaussian. Pe baza echivalent ,ei stabilite de Koenderink în [Koe84], procesul de<br />

filtrare poate fi exprimat alternativ sub forma unei EDP (ecuat ,ia de difuzie izotropă):<br />

⎧<br />

⎨I(x,<br />

y, 0) = I0(x, y)<br />

∂I<br />

⎩<br />

∂t = ∆I = Ixx(x,<br />

(2.2)<br />

y, t) + Iyy(x, y, t)<br />

Observat ,ie Trebuie subliniat încă de la început faptul că din cauza caracterului izotrop,<br />

(2.2) are o aplicabilitate reală limitată, datorată complexităt ,ii imaginilor reale. Această<br />

complexitate este dată de felul în care informat ,ia utilă este reprezentată în imaginile<br />

digitale, i.e., ochiul uman fiind cel mai sensibil la schimbări de contrast, care implicit se<br />

traduc prin prezenta contururilor s ,i a muchiilor, structuri care la nivel de semnal sunt de<br />

asemena componente de înaltă frecvent ,ă. Astfel, un proces izotrop va filtra o imagine fără<br />

a t ,ine cont de structura acesteia, prin urmare filtrând nediscriminatoriu atât zgomotul<br />

cât s ,i muchiile s ,i contururile.<br />

Pe baza observat ,iei anterioare, este us ,or de înt ,eles de ce o astfel de metodă de filtrare<br />

nu poate fi aplicată decât pe imagini cu o geometrie extrem de simplă, timpul de<br />

evolut ,ie al modelului EDP izotrop fiind puternic restrict ,ionat pentru a împiedica filtrarea<br />

de informat ,ie utilă. Cu toate acestea, trebuie subliniat rolul esent ,ial jucat de modelul<br />

de difuzie izotropă ca procedeu de filtrare de zgomot în procesarea de imagini, precum s ,i<br />

utilitatea EDP ca instrument de modelizare matematică a problemelor de restaurare de<br />

imagini. Mai mult, echivalent ,a stabilită de către Koenderink între fenomenul de difuzie a<br />

căldurii, ca proces fizic, s ,i procesul de convolut ,ie ca mecanism de filtrare de imagini a constituit<br />

un precedent motivant, impulsionând dezvoltarea metodologiei EDP ca instrument<br />

de bază în prelucrarea de imagini.<br />


2.4. Filtrarea neliniară – difuzia anizotropă 5<br />

2.4 Filtrarea neliniară – difuzia anizotropă<br />

Având ca punct de plecare limitările modelului izotrop ca abordare viabilă în filtrarea<br />

de imagini, Perona s ,i Malik au propus în [PM90] primul model de difuzie anizotropă, un<br />

model de difuzie selectivă cu ameliorare de contururi exprimat prin următoarea EDP:<br />

∂I<br />

∂t<br />

= div [c(x, y, t)∇I(x, y, t)] (2.3)<br />

unde I(x, y, 0) = I0(x, y) reprezintă condit ,ia init ,ială a (2.3), model care poate fi rescris<br />

de forma:<br />

∂I<br />

= c∆I + ∇c · ∇I (2.4)<br />

∂t<br />

iar prin considerarea cazului particular c(x, y, t) = const., echivalent ,a (2.4) cu (2.2) este<br />

imediată.<br />

Funct ,ia c, denumită de către autori conductivitate, este definită în as ,a fel încât să favorizeze<br />

filtrarea intra-regiuni în detrimentul celei inter-regiuni pentru a conferi modelului<br />

propus caracterul anizotrop, atributul cheie al (2.3). Controlul caracteristicii anizotrope<br />

a (2.3) prin intermediul funct ,iei c se obt ,ine definind această funct ,ie ca dependentă de<br />

norma gradientului funct ,iei imagine I:<br />

c(x, y, t) = g(|∇I|)<br />

Ca propuneri init ,iale pentru funct ,ia conductivitate, Perona s ,i Malik [PM90] definesc<br />

(2.4) de forma:<br />

<br />

2<br />

|∇I|<br />

g(|∇I|) = exp −<br />

K<br />

(2.5)<br />

s ,i<br />

g(|∇I|) =<br />

1<br />

<br />

|∇I|<br />

1 +<br />

K<br />

2<br />

(2.6)<br />

unde K este un parametru prag, numit s ,i barieră de difuzie.<br />

Modelul de difuzie anizotropă propus de Perona s ,i Malik în [PM90] marchează începutul<br />

utilizării EDP în procesarea de imagini, fiind primul model formalizat prin EDP<br />

cu funct ,ionalitate deplină s ,i utilizare imediată. Este de la sine înt ,eles faptul că difuzia<br />

anizotropă a reprezentat s ,i încă mai reprezintă un punct de plecare în dezvoltarea de<br />

noi modele matematice formulate prin intermediul EDP. Dintre acestea, se pot aminti<br />

cele care au succedat modelul Perona–Malik, aducând îmbunătăt ,iri celui din urmă sau<br />

redefinind întru-totul not ,iunea de difuzie anizotropă: modelul Catté et al. [CLMC92],<br />

modelul Nitzberg–Shiota [NS92], modelul Whitaker–Pizer [WP93], modelul unificator<br />

EDP-variat ,ional Deriche–Faugeras [DF95], modelele tensoriale Weickert [Wei94], s ,.a.<br />

Pentru o descriere detaliată a metodologiei EDP în restaurarea de imagini, cititorul<br />

este sfătuit să consulte manuscrisul integral al tezei, care include printre altele s ,i un<br />

subcapitol dedicat discretizării modelelor matematice exprimate prin EDP în vederea<br />

utilizării lor în prelucrarea digitală de imagini.


Capitolul 3<br />

Restaurare de imagini folosind filtre<br />

de s,oc hibride<br />

3.1 Introducere<br />

Înainte de a discuta prima propunere a acestei teze, s ,i anume filtrul de s ,oc pentru eliminarea<br />

defocalizărilor gaussiene concomitent cu filtrarea de zgomot (filtrul de s ,oc hibrid),<br />

este necesară o corelare a not ,iunilor discutate în capitolul precedent cu aspectele teoretice<br />

particulare filtrelor de s ,oc.<br />

În problematica filtrării zgomotului, abordarea clasică pre-<br />

supune folosirea unui proces de convolut ,ie pentru a filtra componentele izolate de înaltă<br />

frecvent ,ă din semnalul 2-D, reducând astfel entropia globală a imaginii. Solut ,ia elementară<br />

în cazul folosirii unui formalism EDP constă în utilizarea unui filtru descris de ecuat ,ia<br />

de difuzie anizotropă propusă de Perona s ,i Malik în [PM90].<br />

În cazul filtrelor de s ,oc, contaminarea semnalului util este dată de un proces nedorit<br />

de convolut ,ie, numit s ,i defocalizare. Ca manifestare fizică, defocalizarea este un efect des<br />

întâlnit în fotografie s ,i poate fi cauzat de divers ,i factori, ca de exemplu mis ,carea subiectului<br />

sau a dispozitivului de achizit ,ie de imagini, condit ,ii atmosferice sau focalizarea incorectă.<br />

În acest caz, procesul de restaurare a imaginii defocalizate se traduce prin aplicarea unui<br />

proces invers, numit deconvolut ,ie. O solut ,ie aparent simplă poate fi considerată inversarea<br />

procesului de difuzie anizotropă, rezultând astfel o deconvolut ,ie ca proces de filtrare în<br />

locul clasicei convolut ,ii (difuzii). Din punct de vedere matematic însă, o astfel de formulare<br />

este prost-pusă” reprezentând o problemă fără solut<br />

”<br />

,ie unică, care din punct de vedere<br />

numeric se comportă de o manieră divergentă.<br />

Pentru a răspunde de o manieră eficientă acestui tip de perturbat ,ie, i.e., defocalizare,<br />

Osher s ,i Rudin propun în [OR90] o formulare matematică bazată pe EDP care descrie<br />

un proces de deconvolut ,ie cu solut ,ie unică, surmontând problemele puse de abordarea directă,<br />

a difuziei inverse. Pentru exemplificare se consideră cazul particular al unui semnal<br />

unidimensional init ,ial descris de funct ,ia cos(x), problema de procesare fiind definită ca<br />

procesul de deconvolut ,ie descris de o EDP cu solut ,ie init ,ială − sin(x):<br />

⎧<br />

⎨∂I<br />

∂t<br />

⎩<br />

= −|Ix| sgn(Ixx)<br />

(3.1)<br />

I(x, 0) = I0(x) = − sin(x)<br />

Metoda descrisă în (3.1), cunoscută în literatura de specialitate sub numele de filtru<br />

de s ,oc, reprezintă o solut ,ie directă s ,i relativ simplă a problemei convolut ,iei (flu) ca factor<br />

perturbator în procesarea de imagini.<br />

Observat ,ie Trebuie precizat că validitatea (3.1) este asigurată doar în domeniul discret<br />

prin intermediul unei discretizări explicite propusă de către autori pentru a garanta<br />

convergent ,a s ,i unicitatea solut ,iei.


3.2. Filtrul de s ,oc hibrid 7<br />

Fig. 3.1 – Exemplificarea unui proces de deconvolut,ie pentru un semnal 1-D pentru I0(x) =<br />

− sin(x) definit pe intervalul [−π, π]. Linia punctată albastră reprezintă semnalul init,ial,<br />

în timp ce linia continuă ilustrează evolut,ia în timp a funct,iei I, săget,ile indicând sensul<br />

de propagare a efectului de deconvolut,ie.<br />

Principiul de funct ,ionare al unui filtru de s ,oc clasic, pentru un semnal 1-D init ,ial dat<br />

de funct ,ia I0(x) = − sin(x), este ilustrat în Fig. 3.1. În acest caz, semnalul init ,ial I0 este<br />

considerat a fi afectat de o convolut ,ie gaussiană, iar rezultatul procesului de filtrare cu un<br />

filtru de s ,oc este reprezentat în cazul ideal de un semnal treaptă unitate.<br />

3.2 Filtrul de s, oc hibrid<br />

Prin cele discutate până acum s-a evident ,iat modul în care se pot aborda două probleme<br />

importante în restaurarea de imagini, i.e., filtrarea de zgomot s ,i deconvolut ,ia. Din punct<br />

de vedere teoretic cele două procese se modelizează prin procedee opuse în caracteristică<br />

s ,i efect, prin urmare, filtrarea lor se face prin metode cu efect contrar, s ,i anume filtrarea<br />

de zgomot necesită un proces de convolut ,ie în timp ce eliminarea defocalizărilor necesită<br />

un proces de deconvolut ,ie. Este us ,or de înt ,eles faptul că, definirea unei paradigme de<br />

restaurare de imagini care să gestioneze cele două tipuri de procesare (filtrare de zgomot<br />

s ,i deconvolut ,ie), va implica un grad ridicat de complexitate s ,i în acelas ,i timp va trebui să<br />

gestioneze cu succes caracterul contradictoriu al celor două mecanisme de filtrare.<br />

Filtrul de s ,oc hibrid reprezintă prima abordare a problematicii metodelor combinate<br />

în restaurarea de imagini, s ,i în primă instant ,ă îs ,i propune să aducă împreună într-un<br />

cadru sinergetic filtrarea de zgomot s ,i eliminarea de flu. Fundamentele acestui filtru se<br />

regăsesc în filtrul de s ,oc complex propus de Gilboa et al. în [GSZ02], care propune o<br />

redefinire radicală a not ,iunii de filtru de s ,oc prin extensia în domeniul complex. Astfel<br />

funct ,ia imagine I este considerată o funct ,ie complexă, în care partea reală descrie imaginea<br />

propriu-zisă iar partea imaginară se comportă ca un detector de contur robust, detector<br />

ce permite detect ,ia corectă a contururilor chiar s ,i în condit ,ii de zgomot, performant ,ă care<br />

lipses ,te filtrului de s ,oc clasic.<br />

Cu toate că filtrul de s ,oc complex propus de Gilboa et al. prezintă o serie de avantaje<br />

care îi permit să gestioneze cu succes scenarii de restaurare complexe, cum ar fi cel de zgomot<br />

cu flu gaussian suprapus, rezultatele experimentale au evident ,iat divergent ,a acestuia


8 Capitolul 3. Restaurare de imagini folosind filtre de s ,oc hibride<br />

în cazul în care imaginea de intrare necesită o filtrare mai temeinică. Cum gradul de contaminare<br />

diferă de la imagine la imagine este imposibil de cunoscut a priori timpul necesar<br />

filtrării de o manieră suficientă a fiecărei imagini. Astfel, un proces de filtrare divergent<br />

va necesita o continuă supraveghere umană pentru a se evita rezultatele nedorite.<br />

Considerând cele două mari clase de filtre de s ,oc, i.e., clasic s ,i complex, precum s ,i<br />

avantajele s ,i respectiv dezavantajele lor, modelul filtrului de s ,oc hibrid îs ,i propune să<br />

combine avantajele celor două filtre fără a păstra însă dezavantajele acestora. Astfel,<br />

filtrul de s ,oc hibrid prezintă robustet ,ea la zgomot a filtrului complex s ,i caracterul stabilconvergent<br />

al filtrului de s ,oc clasic.<br />

3.2.1 Modelul matematic<br />

Matematic, filtrul de s ,oc hibrid este definit pe un domeniu complex, la fel ca filtrul de<br />

s ,oc complex, cu diferent ,a că o componentă a acestuia este definită exclusiv ca o cantitate<br />

reală s ,i este asemănătoare din punct de vedere funct ,ional filtrului de s ,oc clasic. Astfel,<br />

fie I : Ω → C, cu Ω ⊂ R2 în cazul în care spat ,iul imaginii este considerat a fi continuu, s ,i<br />

Ω ⊂ N2 când spat ,iul imaginii este văzut ca un domeniu discret.<br />

Condit ,iile init ,iale pentru EDP care descrie modelul filtrului de s ,oc hibrid sunt exprimate<br />

pentru imaginea I(x, y, t), cu (x, y) ∈ Ω, ca: I(x, y, 0) = I0(x, y), I0(x, y) ∈ R s ,i<br />

∂I<br />

∂n = 0, unde n reprezintă direct ,ia ortogonală pe frontiera imaginii, i.e., exprimând astfel<br />

condit ,ii la limită de tip Neumann. Astfel, modelul matematic propriu-zis este exprimat<br />

matematic după cum urmează:<br />

⎧ <br />

∂I<br />

Re = −<br />

⎪⎨<br />

∂t<br />

⎪⎩<br />

2<br />

π arctan<br />

<br />

a · Im(I)<br />

<br />

f1(t)|∇I| − sgn<br />

θ<br />

Re(Iηη) f2(t)|∇I|<br />

<br />

+ f1(t) Re(λ) Re(Iηη) − Im(λ) Im(Iηη) + ˜ <br />

λ Re(Iξξ)<br />

<br />

∂I<br />

Im = Im(λ) Re(Iηη) − Re(λ) Im(Iηη) +<br />

∂t<br />

˜ (3.2)<br />

λ Im(Iξξ)<br />

Dat fiind faptul că modelul filtrului de s ,oc hibrid este part ,ial derivat din filtrul de<br />

s ,oc complex, cele două filtre împărtăs ,esc o serie de parametri de intrare, în timp ce restul<br />

parametrilor este specific filtrului de s ,oc hibrid:<br />

a – parametrul care controlează panta funct ,iei semn arctan responsabilă de gestionarea<br />

detectorului de contur.<br />

θ – argumentul complex pe baza căruia se calculează parametrul complex λ, unde<br />

θ ∈ (−π/2, π/2). Când θ → 0, Im(I)<br />

aproximează un laplacian netezit al funct ,iei<br />

θ<br />

imagine I, aproximare demonstrată matematic în [GZS01], lucru ce conferă părt ,ii<br />

imaginare un caracter de detector de contur natural regularizat”.<br />

”<br />

|∇I| – reprezintă norma gradientului funct ,iei I, aproximată numeric folosind funct ,ia<br />

minmod, as ,a cum a fost ea definită init ,ial de către Osher s ,i Rudin în [OR90].<br />

λ = r · e iθ – parametru scalar complex, calculat pe baza parametrului θ.<br />

˜ λ – parametru scalar real.


3.2. Filtrul de s ,oc hibrid 9<br />

f1(t) s ,i f2(t) – cele două funct ,ii complementare de control, specifice filtrului de<br />

s ,oc hibrid. Scopul lor este de a controla comportamentul filtrului de s ,oc hibrid<br />

la diferitele momente ale evolut ,iei acestuia în timp. Prin intermediul funct ,iilor<br />

de control se poate stabili tranzit ,ia de la un comportament exclusiv complex la<br />

unul exclusiv real, bineînt ,eles cu trecere prin etapa intermediară în care cele două<br />

comportamente coexistă.<br />

Setul de funct ,ii de control este definit de forma:<br />

⎧<br />

1, n < T1i<br />

⎪⎨<br />

n − T1i<br />

f1(T1i, T1s) = 1 − , T1i n < T1s<br />

T1s − T1i<br />

⎪⎩<br />

0, n T1s<br />

⎧<br />

0, n < T2i<br />

⎪⎨<br />

n − T2i<br />

f2(T2i, T2s) =<br />

, T2i n < T2s<br />

T2s − T2i<br />

⎪⎩<br />

1, n T2s<br />

(3.3)<br />

cu n = 0 . . . Nn − 1 s ,i T1i, T1s, T2i, T2s ∈ [0, Nn − 1], sau ca definit ,ie alternativă:<br />

<br />

f1(ω) = cos(ω)<br />

ω =<br />

f2(ω) = sin(ω)<br />

π<br />

2 ·<br />

n<br />

Nn − 1 , n = 0 . . . Nn − 1 (3.4)<br />

3.2.2 Extensia modelului pentru ameliorare de coerent , ă<br />

Adăugând caracteristica de ameliorarea de coerent ,ă filtrului de s ,oc hibrid se face trecerea<br />

de la comasarea a două metode de restaurare de imagini, i.e., filtrare de zgomot s ,i<br />

eliminare de defocalizare, la corelarea a două mari subcategorii în procesarea de imagini,<br />

s ,i anume restaurarea s ,i îmbunătăt ,irea de imagini.<br />

În acest fel se face primul pas către<br />

definirea unei metode compuse care să includă restaurare s ,i îmbunătăt ,ire de imagini întrun<br />

singur proces, simultan s ,i de sine stătător, pasul final în atingerea acestui deziderat<br />

fiind reprezentat de metoda de fuziune de imagini cu eliminare concomitentă de zgomot,<br />

descrisă în Capitolul 5.<br />

Astfel, modelul filtrului de s ,oc hibrid este reformulat pentru a include s ,i o componentă<br />

de ameliorare de coerent ,ă, as ,a cum este ea definită de către Weickert în [Wei03]:<br />

⎧ <br />

∂I<br />

Re = −<br />

⎪⎨<br />

∂t<br />

⎪⎩<br />

2<br />

π arctan<br />

<br />

a · Im(I)<br />

<br />

f1(t)|∇I| − sgn<br />

θ<br />

Re(I σ ww) f2(t)|∇I|<br />

<br />

+ f1(t) Re(λ) Re(Iηη) − Im(λ) Im(Iηη) + ˜ <br />

λ Re(Iξξ)<br />

<br />

∂I<br />

Im = Im(λ) Re(Iηη) − Re(λ) Im(Iηη) +<br />

∂t<br />

˜ (3.5)<br />

λ Im(Iξξ)<br />

unde I σ ww = (Gσ ∗ I)ww, iar w vectorul propriu normalizat corespunzător celei mai mari<br />

valori proprii a tensorului Jρ, valoare proprie care descire direct ,ia pe care schimbarea de<br />

contrast este maximă. Tensorul Jρ reprezintă variantă netezită a tensorului de structură<br />

calculat în fiecare punct al imaginii I:<br />

Jρ(∇I) = Gρ ∗ T<br />

∇I · ∇I<br />

(3.6)


10 Capitolul 3. Restaurare de imagini folosind filtre de s ,oc hibride<br />

3.2.3 Analiză experimentală<br />

În cadrul analizei experimentale se vor folosi ca etalon modelele de filtre de s ,oc existente,<br />

propuse în [OR90, AM94, KDA97, GSZ02, RC03, BCM05, BCM06], precum s ,i o<br />

gamă extinsă de metrici obiective de evaluare calitativă a rezultatelor, e.g., RMSE (Root<br />

Mean Square Error – Eroare Medie Pătratică), PSNR (Peak Signal-to-Noise Ratio), SCC<br />

(Sample Correlation Coefficient), MI (Mutual Information – Informat ,ie Mutuală), SSIM<br />

(Structural SIMilarity index) propus de către Wang et al. în [WBSS04], MSSIM (Multiscale<br />

Structural SIMilarity index), la fel propus de către Wang et al.s ,i detaliat în [WSB03]<br />

s ,i nu în ultimul rând VSNR (Visual Signal-to-Noise Ration) [CH07] s ,i VIF (Visual Information<br />

Fidelity) [SB06].<br />

Pentru a asigura o evaluare obiectivă s ,i a elimina orice dependent ,e de implementare<br />

a metricilor de calitate, acestea au fost folosite ca parte a pachetului MeTriX MuX Visual<br />

Quality Assessment Package, disponibil la [Gau11].<br />

Dată fiind natura acestui rezumat partea experimentală va fi exemplificată succint,<br />

analiza completă fiind disponibilă ca parte a manuscrisului tezei. Spre exemplificare se<br />

alege imaginea reală Barcă de Pescuit disponibilă în baza de imagini [Uni11], reprezentând<br />

o scenă reală, în format digital de 8 bit ,i/pixel (niveluri de gri) de dimensiune 512 × 512<br />

pixeli.<br />

Cadrul experimental constă în contaminarea imaginii referint ,ă cu o defocalizare gaussiană<br />

de deviat ,ie standard σd = 3 urmată de o contaminare cu zgomot alb gaussian aditiv<br />

de deviat ,ie standard σz = 10. Imaginea astfel degradată, va fi considerată imaginea<br />

(a) (b) (c) (d)<br />

(e) (f) (g) (h)<br />

Fig. 3.2 – Filtre de s,oc – analiză comparativă: (a) Imagine referint,ă; (b) Imagine init,ială<br />

contaminată I0 – defocalizare gaussiană (σd = 3) + zgomot alb gaussian aditiv (σz = 10);<br />

(c) Rezultat filtru Osher–Rudin; (d) Rezultat filtru Alvarez–Mazorra [AM94]; (e) Rezultat<br />

filtru Kornprobst et al. [KDA97]; (f) Rezultat filtru Remaki–Cheriet [RC03]; (g) Rezultat<br />

filtru Gilboa et al.; (h) Rezultat filtru de s,oc hibrid.


3.2. Filtrul de s ,oc hibrid 11<br />

Tabel 3.1 – Rezultate analiză calitativă – cadru experimental Fig. 3.2<br />

Tip filtru de s ,oc Metrici de calitate<br />

RMSE PSNR SCC MI SSIM MSSIM VSNR VIF<br />

Imagine init ,ială I0 16,74 23,655 0,93 1,199 0,401 0,806 13,097 0,122<br />

Osher–Rudin 19,96 22,127 0,901 1,041 0,292 0,764 12,901 0,1<br />

Alvarez–Mazorra 15,072 24,567 0,944 1,38 0,653 0,82 11,455 0,101<br />

Kornprobst et al. 14.669 24.802 0.948 1.453 0.678 0.831 11.473 0.128<br />

Remaki–Cheriet 14,326 25,007 0,952 1,507 0,666 0,848 11,943 0,136<br />

Gilboa et al. 14,812 24,718 0,946 1,425 0,671 0,824 11,62 0,104<br />

Hibrid 12,668 26,076 0,961 1,6 0,727 0,879 13,082 0,183<br />

I0 la momentul t = 0 s ,i va constitui imaginea de intrare pentru filtrele de s ,oc testate.<br />

Rezultatele cadrului experimental sunt ilustrate vizual în Fig. 3.2 s ,i calitativ în Tabel 3.1.<br />

Analiza experimentală a filtrului de s ,oc hibrid nu poate fi completă fără testarea<br />

modelului extins, descris de (3.6). În acest sens, un scenariu adecvat evident ,ierii caracteristicii<br />

de ameliorare de coerent ,ă este cel al procesării amprentelor digitale. Cadrul de test<br />

va fi compus, la fel ca cel anterior, dintr-o imagine referint ,ă care va fi supusă degradării<br />

(a) (b) (c)<br />

(d) (e)<br />

Fig. 3.3 – Filtru de s,oc hibrid cu ameliorare de coerent,ă – analiză comparativă: (a)<br />

Imagine referint,ă; (b) Imagine init,ială I0 contaminată cu defocalizare gaussiană (σd = 10)<br />

+ zgomot alb, gaussian aditiv (σz = 25); (c) Rezultat filtru Gilboa et al.; (d) Rezultat filtru<br />

CESF Weickert; (e) Rezultat filtru de s,oc hibrid cu ameliorarea de coerent,ă + detaliu.


12 Capitolul 3. Restaurare de imagini folosind filtre de s ,oc hibride<br />

Tabel 3.2 – Rezultate analiză calitativă – cadru experimental Fig. 3.3<br />

Tip filtru de s ,oc Metrici de calitate<br />

RMSE PSNR MI SSIM MSSIM VSNR VIF<br />

Imagine init ,ială I0 63,217 12,114 1,032 0,372 0,572 5,014 0,08<br />

Gilboa et al. 65,471 11,809 0,84 0,519 0,561 5,167 0,04<br />

Weickert CESF 62,394 12,227 0,935 0,289 0,577 5,857 0,059<br />

Hibrid cu ameliorare de coerent ,ă 61,203 12,395 0,995 0,486 0,627 5,576 0,059<br />

cu o defocalizare gaussiană, urmată de o contaminare cu un zgomot alb, gaussian aditiv.<br />

Imaginea astfel rezultată va reprezenta imaginea init ,ială, I0. Ca metode comparative se<br />

vor folosi doar filtrul CESF propus de Weickert, special conceput pentru astfel de imaginii,<br />

s ,i filtrul de s ,oc complex, fiind filtrele cele mai reprezentative pentru acest scenariu de test,<br />

ilustrat în Fig. 3.3 s ,i calitativ exprimat în Tabel 3.2.<br />

3.3 Concluzii<br />

Modelul filtrului de s ,oc hibrid reprezintă, as ,a cum s-a precizat s ,i în Capitolul 1, un pas<br />

intermediar în demersul de a defini un model EDP complex, care să combine restaurarea<br />

cu îmbunătăt ,irea de imagini. Cu toate acestea, trebui subliniat caracterul de sine stătător<br />

al acestei metode, precum s ,i aplicabilitatea directă ca metodă complexă de restaurare de<br />

imagini. Mai mult, prin adăugarea de ameliorare de coerent ,ă la modelul init ,ial se obt ,ine<br />

o paradigmă de restaurare – îmbunătăt ,ire de imagini, reprezentând pasul intermediar în<br />

atingerea dezideratului final, i.e., definirea unui model dedicat restaurării s ,i îmbunătăt ,irii<br />

de imagini.<br />

Rezultatele experimentale prezentate în §3.2.3 au demonstrat faptul că modelul propus<br />

s ,i-a atins cu succes obiectivele principale: (i) gestionarea corectă a imaginilor zgomotoase<br />

s ,i filtrarea acestui zgomot de o manieră satisfăcătoare (caracteristică specifică<br />

filtrului de s ,oc complex); (ii) gestionarea defocalizării gaussiene de o manieră adecvată<br />

atât din punct de vedere calitativ cât s ,i al stabilităt ,ii s ,i convergent ,ei (caracteristică de<br />

bază a filtrului de s ,oc clasic); (iii) combinarea cu succes s ,i de o manieră sinergetică a<br />

caracteristicilor filtrului de s ,oc clasic, respectiv complex, obt ,inând astfel un nou model<br />

alei cărui caracteristic combină avantajele celor două filtre anterior ment ,ionate, fără a<br />

păstra însă dezavantajele acestora.<br />

Potent ,ialele îmbunătăt ,iri viitoare pot cuprinde, fără însă a se limita la, următoarele<br />

aspecte:<br />

definirea unor noi funct ,ii de control, direct dependente de geometria imaginii, pentru<br />

a face o mai bună distinct ,ie între zonele omogene s ,i cele neomogene, sporind astfel<br />

caracterul izotrop al filtrării.<br />

redefinirea detectorului de contur, în sensul sporirii caracteristicii anizotrope a acestuia.<br />

studierea posibilităt ,ii adăugării unui indicator de orientare local sau semi-local, care<br />

să controleze intensitatea filtrării ca parametru al funct ,iilor de control.<br />

s ,i<br />

folosirea unor metode de discretizare mai elaborate precum s ,i a unei abordări tensoriale<br />

în vederea cres ,terii calităt ,ii rezultatului filtrat.


Capitolul 4<br />

Fuziunea de imagini ca proces de<br />

îmbunătăt,ire de imagini<br />

4.1 Introducere<br />

Conform [Mit10], principalele beneficii ale fuziunii de imagini sunt: (i) sigurant ,ă crescută,<br />

(ii) incertitudine redusă, (iii) performant ,e robuste, (iv) reprezentare compactă<br />

a informat ,iei, (v) domeniu extins de aplicabilitate, s ,i (vi) acoperire spat ,ială<br />

s ,i temporală extinsă.<br />

4.2 Definit, ii s, i clasificări<br />

În sens general, prin fuziune se înt ,elege, conform definit ,iei DEX, o ” 1. contopire a două<br />

sau mai multe state sau a două sau mai multe partide într-unul singur ori a două sau<br />

mai multe organizat ,ii într-una singură; 2. îmbinare, reunire între mai multe elemente”.<br />

Cu toate că definit ,ia anterioară explică not ,iunea de fuziune în linii generale, fuziunea<br />

de imagini necesită o definire mai precisă, raportată la rigorile s ,i realităt ,ile procesării de<br />

imagini. Astfel, de-a lungul timpului fuziunea de imagini a fost definită în diverse contexte,<br />

ca parte integrantă a fuziunii de date sau a fuziunii de informat ,ii, printre definit ,iile cele<br />

mai pertinente numărându-se cele formulate de:<br />

Abidi s ,i Gonzalez [AG92] – ” Fuziunea de date se ocupă de combinat ,ia sinergetică a<br />

informat ,iei pusă la dispozit ,ie de diversele surse de cunoas ,tere, cum ar fi senzori, în<br />

vederea unei mai bune înt ,elegeri a unei scene date.”<br />

Hall [Hal92] – ” Fuziunea de date multi-senzorială caută să combine informat ,ia provenită<br />

din senzori multipli pentru a formula deduct ,ii altfel imposibil de formulat pe baza<br />

unui singur senzor.”<br />

Bloch s ,i Maître [BM08] – ” Fuziunea de informat ,ie constă în combinarea informat ,iei<br />

provenite din surse multiple pentur a îmbunătăt ,i procesul decizional.”<br />

În ceea de prives ,te clasificarea proceselor de fuziune, acestea se pot clasifica după<br />

mai multe criterii, printre cele mai utilizate fiind cel al complexităt ,ii informat ,iei fuzionate,<br />

sau mai bine zis complexitate de integrare a informat ,iei în momentul fuziunii acesteia. Se<br />

disting astfel patru niveluri de complexitate:<br />

nivel de semnal<br />

nivel de imagine, cunoscut s ,i sub denumirea de nivel de pixel<br />

nivel de caracteristică sau altfel spus nivel de simbol<br />

nivel de decizie<br />

O altă clasificare des întâlnită, împarte metodele de fuziune în: (a) metode bazate pe<br />

descompuneri multi-scală s ,i (b) metode bazate pe descompuneri non-multi-scală.


Capitolul 5<br />

Fuziunea de imagini cu eliminare<br />

concomitentă de zgomot<br />

5.1 Motivat, ie<br />

Ideea de comasare a mai multor procese într-unul singur vine dintr-o necesitate reală de<br />

a aborda procesarea de imagini de o manieră cât mai apropiată de realitate. Modelul<br />

propus s ,i analizat în acest capitol este fundamentat pe premisa că în fuziunea de imagini,<br />

prezumt ,ia a priori că acele imagini sunt perfecte” (cu except<br />

”<br />

,ia îmbunătăt ,irii aduse de<br />

procesul de fuziune în sine) este cel mai des gres ,ită, deoarece în realitate imaginile sunt<br />

afectate de diverse surse perturbatoare, una dintre cele mai întâlnite fiind zgomotul.<br />

Astfel, considerând un scenariu mai apropiat de realitate, s ,i anume că imaginile de<br />

fuzionat nu sunt ideale, se constată necesitatea formulării unui model care să combine<br />

fuziunea de imagini propriu-zisă cu elemente de restaurare de imagini. Dat fiind faptul<br />

că printre factorii perturbatori cei mai des întâlnit ,i este zgomotul, modelul propus constă<br />

într-o paradigmă de fuziune de imagini cu filtrare concomitentă de zgomot, definită<br />

folosind un formalism variat ,ional, exprimat teoretic prin EDP. Metoda se înscrie astfel<br />

în categoria altor propuneri, relativ recente, [Pha01, PLTB07, PTB + 07, MS08, Pop08,<br />

WSF08], care îs ,i propun de asemena abordarea procesului de fuziune de imagini de o<br />

manieră complexă, mai apropiată de realitate.<br />

Întrebarea firească în cazul acestui scenariu este ce avantaje aduce o procesare para-<br />

”<br />

lelă fat ,ă de una secvent ,ială?”. Răspunsul în acest caz este dat de complexitatea s ,i core-<br />

larea informat ,iei în procesele de fuziune de imagini, s ,i nu numai.<br />

În cazul unui scenariu de<br />

fuziune real, în care imaginile de intrare sunt contaminate cu zgomot, procesarea acestora<br />

secvent ,ial ar elimina corelat ,ia dintre ele prin filtrarea zgomotului, s ,i mai mult această<br />

filtrare s-ar face pentru fiecare imagine în parte de o manieră singulară, fără a se t ,ine cont<br />

de legăturile la nivel informat ,ional între imaginea curentă s ,i restul imaginilor de intrare<br />

(a se vedea capitolul 4 al tezei pentru mai multe detalii s ,i exemplificare experimentală).<br />

Astfel, prin abordarea simultană a celor două procese, i.e., fuziune s ,i eliminare de<br />

zgomot, se obt ,ine o metodă care nu numai că filtrează zgomotul de o manieră mai eficientă,<br />

prin corelarea s ,i procesarea simultană a imaginilor de intrare, dar în acelas ,i timp<br />

are ca rezultat final o imagine fuzionată cu caracteristici egale sau superioare proceselor<br />

secvent ,iale.<br />

5.2 Formulare matematică<br />

Modelul matematic al metodei de fuziune de imagini cu eliminare concomitentă de zgomot<br />

îs ,i are originile în modelul variat ,ional de fuziune de imagini propus de John s ,i Vorontsov<br />

în [JV05], model fundamentat pe teoria estimării erorii, teorie care presupune existent ,a


5.2. Formulare matematică 15<br />

unei imagini degradate observate I : Ω → R s ,i a versiunii sale recuperate Ir(x, y), unde<br />

(x, y) se înt ,elege pixelul de coordonate (x, y) în spat ,iul imaginii Ω ⊂ R2 . Imaginea<br />

recuperată Ir(x, y) poate fi estimată folosind teoria estimării erorii, prin intermediul unei<br />

funct ,ionale de eroare E(Ir) care exprimă diferent ,a dintre imaginea originală, observată,<br />

s ,i cea estimată, ca funct ,ie de Ir:<br />

<br />

E(Ir) = ρ (x, y), Ir(x, y), |∇Ir(x, y)| dxdy (5.1)<br />

Ω<br />

unde Ω este suportul imaginii iar ∇Ir(x, y) este vectorul gradient al imaginii în pixelul<br />

(x, y). Norma erorii ρ este definită conform cerint ,elor aplicat ,iei de procesare precum s ,i<br />

a contaminării ce se dores ,te filtrată, e.g., în cazul eliminării zgomotului dintr-o imagine<br />

degradată, o alegere posibilă pentru ρ este norma erorii pătratice minime, exprimată ca:<br />

ρ (x, y), |∇Ir(x, y)| = 1<br />

2 |∇Ir(x, y)| 2<br />

(5.2)<br />

Trebuie subliniat însă, că o astfel de alegere nu este adecvată pentru aplicat ,iile practice<br />

deoarece din punct de vedere al filtrării are un comportament izotrop, efect nedorit<br />

în cazul procesării de imagini as ,a cum a fost deja subliniat s ,i în Capitolul 2. Pentru<br />

detalierea adecvată a teoriei estimării erorii, cititorul este sfătuit să consulte manuscrisul<br />

integral al tezei.<br />

Alternativa folosită în metodele variat ,ionale de fuziune bazate pe această formalizare,<br />

e.g., [JV05, WSF08, MS08], este o normă de eroare cu componentă de difuzie izotropă s ,i<br />

ameliorare de contururi, definită după cum urmează:<br />

ρ (x, y), Ir(x, y, t), |∇Ir(x, y, t)| = α<br />

2 |∇Ir(x, y, t)| 2<br />

(5.3)<br />

+ β<br />

2 JI(x, y) Ir(x, y, t) − I(x, y) 2 unde α s ,i β sunt parametrii folosit ,i pentru controlul nivelului de filtrare de zgomot, respectiv<br />

ameliorare de contur, în timp ce JI este o hartă de contururi pre-filtrată gaussian<br />

de forma:<br />

<br />

JI(x, y) = |∇I(x ′ , y ′ )| 2 G(x − x ′ , y − y ′ , σ)dx ′ dy ′<br />

(5.4)<br />

unde G este o funct ,ie gaussiană de medie nulă s ,i deviat ,ie standard σ.<br />

Neajunsul (5.3) este dat de faptul că, des ,i adaugă o componentă de ameliorare de contururi<br />

care, adit ,ional, cont ,ine s ,i un mecanism de atas ,are la datele init ,iale (diferent ,a dintre<br />

imaginea estimată s ,i cea degradată), filtrarea zgomotului se face în continuare izotrop.<br />

Astfel definită, metoda de fuziune nu se poate numi metodă combinată de restaurare–<br />

îmbunătăt ,ire, în adevăratul sens al cuvântului, fiind, din punct de vedere funct ,ional o<br />

metodă exclusiv de fuziune de imagini.<br />

Astfel, pentru a defini o metodă complexă de restaurare s ,i îmbunătăt ,ire de imagini,<br />

mai precis de fuziune de imagini cu eliminare concomitentă de zgomot este necesară<br />

definirea unei norme de eroare corespunzătoare care să permită o filtrare anizotropă eficientă<br />

a zgomotului, de forma:<br />

ρ (x, y), Ir(x, y, t), |∇Ir(x, y, t)| = − α |∇Ir(x, y, t)|<br />

2<br />

2<br />

∇Ir(x, y, t) ∇−1 <br />

Da Ir(x, y, t) <br />

− β<br />

2 J(x, y, t)Ir(x, y, t) − I(x, y) 2 (5.5)


16 Capitolul 5. Fuziunea de imagini cu eliminare concomitentă de zgomot<br />

unde ∇−1 este operatorul invers ∇ iar J(x, y, t) = JI(x, y) − JIr(x, y, t) reprezintă funct ,ia<br />

de control al ameliorării contururilor, init ,ial definită în [JV05], s ,i redefinită pentru modelul<br />

propus după cum urmează:<br />

<br />

J(x, y, t) = | ˙ ∇I(x ′ , y ′ )|G(x − x ′ , y − y ′ , σem)dx ′ dy ′<br />

<br />

− | ˙ ∇Ir(x ′ , y ′ , t)|G(x − x ′ , y − y ′ , σem)dx ′ dy ′<br />

(5.6)<br />

cu ˙ ∇ reprezentând vectorul gradient calculat exclusiv pe direct ,ia η, η = ∇Ir/|∇Ir|.<br />

Înlocuind norma de eroare propusă, i.e., (5.6), în solut ,ia (5.1) (pentru mai multe detalii<br />

a se vedea versiunea integrală a tezei) se obt ,ine următoarea expresie pentru imaginea<br />

recuperată Ir:<br />

unde<br />

∂Ir(x, y, t)<br />

∂t<br />

<br />

= −α Da Ir(x, y, t) + β Θ J(x, y, t) J(x, y, t) Ir(x, y, t) − I(x, y) <br />

Da(Ir) = cξIrξξ + cηIrηη<br />

(5.7)<br />

(5.8)<br />

reprezintă un operator diferent ,ial de difuzie anizotropă, init ,ial definit în [TLBB02, TBB + 04],<br />

în timp ce Θ(J) este definită de as ,a manieră încât să permită doar transferul de informat ,ie<br />

pertinentă în Ir:<br />

Θ(J) =<br />

<br />

1, dacă J 0<br />

0, dacă J < 0<br />

(5.9)<br />

Având astfel definit cadrul teoretic al teoriei estimării erorii, transpunerea modelului<br />

matematic în formalism de fuziune de imagini cu filtrare concomitentă de zgomot este<br />

imediată. Mai mult, folosind interpretarea din [MS08], unde procesul de fuziune este văzut<br />

ca o combinat ,ie ponderată liniară a intrărilor sale Is, iar evolut ,ia în timp a acestui proces<br />

poate fi translatată evolut ,iei ponderilor fiecărei intrări ws(x, y, t), imaginea fuzionată Ĩ se<br />

exprimă astfel:<br />

S<br />

Ĩ(x, y, t) = ws(x, y, t) · Is(x, y) (5.10)<br />

s=1<br />

În acest caz, imagine fuzionată reprezintă imaginea recuperată Ir din teoria estimării<br />

erorii, în timp ce imaginile de intrare Is reprezintă imaginile degradate, pe baza cărora se<br />

face estimarea Ir. Astfel, fiecare funct ,ie pondere este iterativ estimată după următoarea<br />

regulă:<br />

ws(x, y, t + 1) ← ws(x, y, t) − τ ∂ws(x, y, t)<br />

(5.11)<br />

∂t<br />

unde<br />

∂ws(x, y, t)<br />

∂t<br />

= 1<br />

<br />

− α Da Ĩ(x, y, t)<br />

Is(x, y)<br />

+ β Θ Js(x, y, t) Js(x, y, t) Ĩ(x, y, t) − Is(x, y) <br />

(5.12)<br />

În cadrul fiecărei iterat ,ii, la finalul procesului de estimare a ponderilor, imaginea<br />

fuzionată Ĩ se obt ,ine prin reintegrarea ponderilor ws(x, y, t) în (5.10). O componentă<br />

importantă a metodei propuse o reprezintă aproximarea numerică, bazată pe estimarea


5.3. Analiză experimentală 17<br />

orientării prin Analiză în Componente Principale (ACP) [Don99] în vedera calculării sistemului<br />

de coordonate relativ (ξ, η), necesar schemei de interpolare de precizie sub-pixel<br />

folosită printre altele în calcularea Da Ĩ(x, y, t) [Ter04]. Toate aceste detalii referitoare<br />

la modul în care modelul matematic este transpus în practică sunt descrise pe larg în<br />

manuscrisul integral al tezei.<br />

5.3 Analiză experimentală<br />

Dat fiind caracterul acestui document s ,i implicit limitele impuse în ceea ce prives ,te<br />

lungimea sa, analiza experimentală va fi redusă la un singur exemplu de fuziune de imagini<br />

zgomotoase, metodele comparative fiind în prealabil optimizate pentru a permite o evaluare<br />

calitativă cât mai relevantă. În ceea ce prives ,te optimizarea s ,i parametrizarea aferentă,<br />

pentru metodele existente în literatură s ,i folosite în cadrul analizei comparative, această<br />

etapă a fost acoperită în [Pop08] pentru setul de imagini folosit s ,i un zgomot alb, gaussian<br />

aditiv de deviat ,ie standard σz = 13. Pentru mai multe detalii asupra parametrilor fiecărui<br />

model analizat, precum s ,i pentru optimizarea metodei propuse, a se consulta manuscrisul<br />

integral al tezei.<br />

Scenariul experimental prezentat în cele ce urmează este construit în jurul setului<br />

Des ,teptătoare (disponibil la [Ima11]), ce cont ,ine două imagini de intrare (scenariul minimal<br />

de fuziune) cu focalizări diferite (Fig. 5.1a s ,i Fig. 5.1b). Trebuie subliniat s ,i faptul<br />

(a) (b) (c)<br />

(d) (e) (f)<br />

Fig. 5.1 – Analiză comparativă – rezultate selective: (a) Imagine de intrare I1 (σz = 13);<br />

(b) Imagine de intrare I2 (σz = 13); (c) Rezultat metodă MED; (d) Rezultat metodă<br />

SIDWT-hard; (e) Rezultat metodă Pop-2; (f) Rezultat metodă propusă.


18 Capitolul 5. Fuziunea de imagini cu eliminare concomitentă de zgomot<br />

Tabel 5.1 – Analiză comparativă – zgomot alb, gaussian aditiv - σz = 13<br />

Metodă de fuziune Setul de parametri Metrici de calitate dedicate Metrici de calitate clasice<br />

optimali QW rSF e QAB/F RMSE PSNR SSIM MSSIM VSNR VIF MI<br />

MED 0,833 0,726 0,295 10,913 27,371 0,557 0,904 21,485 0,354 1,981<br />

DWT L=7 H=max 0,79 2,103 0,257 17,427 23,305 0,358 0,823 19,276 0,336 1,502<br />

SIDWT L=5 H=max 0,821 1,854 0,292 15,461 24,345 0,395 0,861 21,852 0,383 1,618<br />

DWT-soft L=7 Ln=1 H=max 0,885 0,439 0,335 10,112 28,033 0,637 0,89 19,568 0,352 2,209<br />

DWT-hard L=7 Ln=2 H=max 0,877 0,503 0,356 9,948 28,175 0,674 0,892 19,853 0,333 2,284<br />

SIDWT-soft L=5 Ln=1 H=max 0,929 0,021 0,425 6,837 31,433 0,798 0,932 21,448 0,432 2,726<br />

SIDWT-hard L=5 Ln=2 H=max 0,931 -0,082 0,477 5,771 32,905 0,911 0,965 23,275 0,455 3,055<br />

JoV IT=339 dt=0,0001 0,855 1,197 0,328 11,585 26,852 0,524 0,906 24,569 0,418 1,961<br />

Pop-1<br />

σ=5 α=2500 β=0,9<br />

IT=35 dt=0,1 α=0,7 0,864 -0,250 0,424 9,557 28,523 0,878 0,94 18,489 0,391 2,657<br />

β=0,3<br />

Kη=2<br />

γ=1,5 Kξ=5<br />

Pop-2 0,925 -0,161 0,485 7,904 30,173 0,902 0,959 21,517 0,436 2,976<br />

Model propus-QW IT=18 dt=0,1 α=1,6 0,936 -0,046 0,524 5,162 33,874 0,879 0,965 26,029 0,482 3,027<br />

β=0,3 WP CA=5×5<br />

Model propus<br />

Kξ=15 Kη=1,5 σem=5<br />

IT=16 dt=0,1 α=1,7 0,932 -0,048 0,478 5,219 33,777 0,885 0,965 25,993 0,48 3,04<br />

β=0,4 WP CA=5×5<br />

Kξ=10 Kη=5 σem=5<br />

că, des ,i cele două imagini sunt considerate referint ,e s ,i implicit versiuni ideale din punct<br />

de vedere al zgomotului, zgomotul estimat pentru cele două intrări este de σz1 = 0, 53<br />

s ,i respectiv σz2 = 0, 51, reprezentând un caz real s ,i unul ideal, fără zgomot. Analiza<br />

experimentală comparativă este construită prin adăugarea de zgomot alb, gaussian aditiv<br />

de deviat ,ie standard σz = 13.<br />

Modelele comparate în acest caz sunt următoarele: MED reprezintă media aritmetică<br />

dintre cele două intrări s ,i totodată cel mai simplu mecanism de fuziune, fiind prezentat<br />

în Tabel 5.1 cu rol de etalon; DWT s ,i SIDWT reprezintă modele de fuziune bazate pe<br />

wavelet-uri [Roc97, RF98], iar variantele lor hard s ,i soft fiind variante adaptate la filtrarea<br />

de zgomot (a se vedea <strong>teza</strong>); metodele JoV s ,i Pop reprezintă modele de fuziune EDP,<br />

primul fiind modelul propus de John s ,i Vorontsov în [JV05] iar al doilea fiind un model<br />

de fuziune de imagini cu filtrare de zgomot, descris pe larg în [Pop08].<br />

În cadrul analizei comparative, evaluarea calitativă (Tabel 5.1) s-a făcut folosind atât<br />

metrici de calitate dedicate fuziunii de imagini, i.e., QAB/F [XP00, Pet01], QW [Pie04] s ,i<br />

rSF e [ZEHH07], precum s ,i metricile clasice, amintite în Capitolul 3.<br />

În cazul metricilor<br />

clasice, care necesită o imagine referint ,ă unică, pentru a nu influent ,a evaluarea s-a folosit<br />

rezultatul fuziunii imaginilor de referint ,ă, fără zgomot adăugat, prin metoda piramidei<br />

laplaciene, metodă care, nefiind adaptată filtrării de zgomot, nu a fost inclusă în scenariul<br />

ilustrat în Fig. 5.1.<br />

Datele experimentale descrise în Tabel 5.1 indică, prin intermediul metricilor de calitate,<br />

performant ,ele superioare ale modelului propus. Pe baza valorilor metricilor clasice,<br />

e.g., RMSE, PSNR, VSNR, se confirmă capacitatea metodei de fuziune propuse de a filtra<br />

zgomotul de o manieră eficientă concomitent cu procesul de fuziune propriu-zis, proces<br />

confirmat calitativ la rândul său atât prin metricile de calitate dedicate, precum s ,i prin<br />

cele clasice, i.e., SSIM, MSSIM, VIF.<br />

Observat ,ie Metoda propusă oferă performant ,e similare s ,i în scenariile simple, de fuziune,<br />

unde nu este necesară o filtrare explicită a zgomotului. În aceste cazuri, as ,a cum reiese din<br />

analiza experimentală descrisă în detaliu în capitolul 5 al tezei, rezultatele obt ,inute sunt<br />

la egalitate sau superioare cu cele mai bune rezultate obt ,inute prin intermediul metodelor<br />

existente.<br />

Ca exemplificare a potent ,ialelor domenii de aplicare, se vor ilustra selectiv două


5.3. Analiză experimentală 19<br />

scenarii reale de fuziune de imagini, i.e., fuziunea multi-expunere s ,i fuziunea de imagini<br />

medicale. În ambele cazuri, seturile de imagini de intrare sunt fuzionate ” as ,a cum sunt”<br />

fără a fi alterate în vreun fel, fiind disponibile la [ECE11].<br />

(a) (b) (c)<br />

(d) (e) (f)<br />

Fig. 5.2 – Scenariu de fuziune multi-expunere – model propus: (a) I1 s,i detaliu (d); (b)<br />

I2 s,i detaliu (e); (c) Ĩ rezultat fuziune s,i detaliu (f).<br />

(a) (b) (c)<br />

(d) (e) (f)<br />

Fig. 5.3 – Scenariu de fuziune imagini medicale – model propus: (a) I1 imagine CT s,i<br />

detaliu (d); (b) I2 imagine RMN s,i detaliu (e); (c) Ĩ rezultat fuziune s,i detaliu (f).


Capitolul 6<br />

Concluzii, observat,ii, perspective<br />

Enunt ,ul general al problemei abordate în această teză se încadrează în liniile studierii s ,i<br />

ulterior definirii unui cadru teoretic combinat, care să aducă împreună concepte de restaurare<br />

s ,i îmbunătăt ,ire de imagini. Încă de la început s-a decis fundamentarea dezideratelor<br />

init ,iale pe metodologia EDP, datorită flexibilităt ,ii, polivalent ,ei s ,i nu în ultimul rând<br />

eficient ,ei acestui formalism ca instrument matematic în procesarea de imagini.<br />

Versatilitatea cadrului teoretic, a permis comasarea cu succes s ,i de o manieră naturală<br />

a unor metode esent ,iale în procesarea de imagini, s ,i anume filtrarea de zgomot, eliminarea<br />

de flu gaussian, ameliorarea de coerent ,ă s ,i contururi sau fuziunea de imagini. Mai mult,<br />

aceste aspecte ale restaurării s ,i îmbunătăt ,irii de imagini au fost abordate progresiv pentru<br />

o mai bună evaluare a rezultatelor precum s ,i pentru a analiza mai us ,or felul în care<br />

diversele procese interact ,ionează atunci când sunt folosite concomitent.<br />

În ceea ce prives ,te prima propunere, i.e., filtrul de s ,oc hibrid, se pot face următoarele<br />

observat ,ii:<br />

O primă observat ,ie se referă la caracteristica duală a acestui model, fiind totodată un<br />

studiu al fezabilităt ,ii combinării procedeelor în restaurarea de imagini s ,i o paradigmă<br />

de procesare de imagini de sine stătătoare.<br />

Prin extensia sa (ameliorarea de coerent ,ă), reprezintă prima legătură între restaurarea<br />

de imagini s ,i îmbunătăt ,irea acestora, ca procedeu concomitent care îmbină<br />

sinergetic cele două procese.<br />

Cu toate că performant ,ele obt ,inute sunt satisfăcătoare, fiind comparabile sau superioare<br />

metodelor alternative existente, definit ,ia actuală lasă loc de îmbunătăt ,iri.<br />

Despre al doilea model propus, i.e., fuziune de imagini cu eliminare concomitentă de<br />

zgomot, trebuie făcute următoarele precizări:<br />

<br />

În forma sa actuală, modelul este limitat într-o oarecare măsură de modalitatea în<br />

care se face init ,ializarea funct ,iei imagine fuzionată Ĩ la momentul de timp t = 0, s ,i<br />

anume printr-un proces de fuziune de bază (MED).<br />

Cu toate că rezultatele obt ,inute plasează metoda propusă în vârful clasamentului<br />

metodelor de fuziune comparate în Capitolul 5 din punct de vedere calitativ, caracteristica<br />

anizotropă a modelului suportă îmbunătăt ,iri atât din punct de vedere al<br />

filtrării de zgomot precum s ,i al ameliorării de contururi.<br />

Dat fiind aplicabilitatea generală a metodei în forma sa actuală, o îmbunătăt ,ire a<br />

performant ,elor este posibilă în funct ,ie de aplicat ,ie, după o adaptare prealabilă a<br />

metodei la natura imaginilor procesate.


Bibliografie<br />

[AG92] M.A. Abidi and R.C. Gonzalez. Data fusion in robotics and machine intelligence.<br />

Academic Press Professional, Inc., San Diego, CA, USA, 1992. 13<br />

[AM94] L. Alvarez and L. Mazorra. Signal and image restoration using shock filters and<br />

anisotropic diffusion. SIAM J. Numer. Anal., 31:590–605, April 1994. vi, 10<br />

[BCM05] A. Buades, B. Coll, and J.-M. Morel. A Non-Local Algorithm for Image Denoising.<br />

In Proceedings of the 2005 IEEE Computer Society Conference on Computer<br />

Vision and Pattern Recognition, volume 2 of CVPR ’05, pages 60–65, Washington,<br />

DC, USA, 2005. IEEE Computer Society. 10<br />

[BCM06] A. Buades, B. Coll, and J.-M. Morel. Image enhancement by non-local reverse<br />

heat equation. Preprint – Centre de Mathématiques et de Leurs Applications,<br />

2006. 10<br />

[BM08] I. Bloch and H. Maître. Information Fusion in Signal and Image Processing:<br />

Major Probabilistic and Non-probabilistic Numerical Approaches, chapter Definitions,<br />

pages 13–24. ISTE Ltd – John Wiley and Sons, Inc., London, UK –<br />

Hoboken, NJ, USA, 1st edition, 2008. 13<br />

[CH07] D.M. Chandler and S.S. Hemami. VSNR: A Wavelet-Based Visual Signal-to-<br />

Noise Ratio for Natural Images. IEEE Trans. Image Process., 16(9):2284–2298,<br />

September 2007. 10<br />

[CLMC92] F. Catté, P.-L. Lions, J.-M. Morel, and T. Coll. Image Selective Smoothing<br />

and Edge Detection by Nonlinear Diffusion. SIAM J. Numer. Anal., 29(1):182–<br />

193, February 1992. 5<br />

[CS05] T.F. Chan and J. Shen. Image Processing and Analysis: variational, PDE,<br />

wavelet, and stochastic methods. Society for Industrial and Applied Mathematics,<br />

Philadephia, PA, USA, 2005. 3, 4<br />

[DF95] R. Deriche and O. Faugeras. Les EDP en traitement des images et vision par<br />

ordinateur (in French). Traitement du Signal, 5(2697):136–146, 1995. 5<br />

[Don99] M. Donias. Caractérisation de Champs d’Orientations par Analyse en Composantes<br />

Principales et Estimation de la Curbure (in French). PhD thesis,<br />

L’Université Bordeaux I - École Doctorale des Sciences Physiques et de<br />

L’Ingénieur, 1999. 17<br />

[ECE11] ECE – Lehigh University. Investigations of image fusion. http://www.ece.<br />

lehigh.edu/SPCRL/IF/disk.htm, 2011. 19<br />

[Gau11] M. Gaubatz. MeTriX MuX Visual Quality Assessment Package. http://<br />

foulard.ece.cornell.edu/gaubatz/metrix_mux/, 2011. 10


22 Bibliografie<br />

[GSZ02] G. Gilboa, N.A. Sochen, and Y.Y. Zeevi. Regularized Shock Filters and Complex<br />

Diffusion. In Proceedings of the 7th European Conference on Computer Vision-<br />

Part I, Lecture Notes in Computer Science, pages 399–413. Springer-Verlag, May<br />

2002. 7, 10<br />

[GZS01] G. Gilboa, Y.Y. Zeevi, and N.A. Sochen. Complex Diffusion Processes for Image<br />

Filtering. In Proceedings of the 3rd International Conference on Scale-Space and<br />

Morphology in Computer Vision, SCALE-SPACE ’01, pages 299–307. Springer-<br />

Verlag, July 2001. 8<br />

[Hal92] D.L. Hall. Mathematical Techniques in Multisensor Data Fusion. Artech House,<br />

Inc., Norwood, MA, USA, 1992. 13<br />

[Ima11] ImageFusion.org. 2-D Image Collections. http://www.imagefusion.org/,<br />

2011. 17<br />

[JV05] S. John and M.A. Vorontsov. Multiframe selective information fusion from robust<br />

error estimation theory. IEEE Trans. Image Process., 14(5):577–584, May<br />

2005. 14, 15, 16, 18<br />

[KDA97] P. Kornprobst, R. Deriche, and G. Aubert. Image coupling, restoration and<br />

enhancement via PDE’s. In Proceedings of the 1997 IEEE International Conference<br />

on Image Processing, volume 2 of ICIP ’97, pages 458–461, Washington,<br />

DC, USA, October 1997. IEEE Computer Society. vi, 10<br />

[Koe84] J.J. Koenderink. The structure of images. Biol. Cybern., 50(5):363–370, 1984.<br />

4<br />

[Mit10] H. B. Mitchell. Image Fusion - Theories, Techniques and Applications. Springer-<br />

Verlag Berlin Heidelberg, 2010. 13<br />

[MS08] N. Mitianoudis and T. Stathaki. Image Fusion: Algorithms and Applications,<br />

chapter Enhancement of multiple sensor images using joint image fusion and<br />

blind restoration, pages 299–326. Academic Press, Amsterdam, The Netherlands,<br />

1st edition, July 2008. 14, 15, 16<br />

[NS92] M. Nitzberg and T. Shiota. Nonlinear Image Filtering with Edge and Corner<br />

Enhancement. IEEE Trans. Pattern Anal. Mach. Intell., 14(8):826–833, August<br />

1992. 5<br />

[OR90] S. Osher and L.I. Rudin. Feature-oriented image enhancement using shock filters.<br />

SIAM J. Numer. Anal., 27(4):919–940, August 1990. 6, 8, 10<br />

[Pet01] V.S. Petrovic. Multisensor Pixel-level Image Fusion. PhD thesis, University of<br />

Manchester, 2001. 18<br />

[Pha01] T.D. Pham. An image restoration by fusion. Pattern Recognit., 34(12):2403–<br />

2411, 2001. 14<br />

[Pie04] G. Piella. New quality measures for image fusion. In Proceedings of the 7th<br />

International Conference on Information Fusion, FUSION ’04, pages 542–546,<br />

June 2004. 18


Bibliografie 23<br />

[PLTB07] S. Pop, O. Lavialle, R. Terebes, and M. Borda. Low-level fusion: a PDE-based<br />

approach. In Proceedings of the 10th International Conference on Information<br />

Fusion, FUSION ’07, pages 1–8, July 2007. 14<br />

[PM90] P. Perona and J. Malik. Scale-space and edge detection using anisotropic diffusion.<br />

IEEE Trans. Pattern Anal. Mach. Intell., 12(7):629–639, July 1990. 5,<br />

6<br />

[Pop08] S. Pop. Modèles de Fusion et Diffusion par Équations aux Dérivées Partielles:<br />

Application à la Sismique Azimutale (in French). PhD thesis, L’Université Bordeaux<br />

I - École Doctorale des Sciences Physiques et de L’Ingénieur en cotutelle<br />

avec L’Université Technique de Cluj-Napoca (Roumanie), November 2008. 14,<br />

17, 18<br />

[PTB + 07] S. Pop, R. Terebes, M. Borda, S. Guillon, N. Keskes, P. Baylou, and O. Lavialle.<br />

3D Seismic Data Fusion and Filtering using a PDE-Based Approach. In Proceedings<br />

of the 2007 IEEE International Conference on Image Processing, volume 4<br />

of ICIP ’07, pages 117–120, October 2007. 14<br />

[RC03] L. Remaki and M. Cheriet. Numerical Schemes of Shock Filter Models for Image<br />

Enhancement and Restoration. J. Math. Imaging Vis., 18:129–143, March 2003.<br />

vi, 10<br />

[RF98] O. Rockinger and T. Fechner. Pixel-level image fusion: the case of image sequences.<br />

In Proceedings SPIE, SPIE Conference 3374: Signal Processing, Sensor<br />

Fusion, and Target Recognition VII, pages 378–388, July 1998. 18<br />

[Roc97] O. Rockinger. Image Sequence Fusion Using a Shift-Invariant Wavelet Transform.<br />

In Proceedings of the 1997 IEEE International Conference on Image Processing,<br />

volume 3 of ICIP ’97, pages 288–291, Washington, DC, USA, 1997.<br />

IEEE Computer Society. 18<br />

[SB06] H.R. Sheikh and A.C. Bovik. Image information and visual quality. IEEE Trans.<br />

Image Process., 15(2):430–444, February 2006. 10<br />

[TBB + 04] R. Terebes, M. Borda, Y. Baozong, O. Lavialle, and P. Baylou. A new PDE<br />

based approach for image restoration and enhancement using robust diffusion<br />

directions and directional derivatives based diffusivities. In Proceedings of the<br />

7th International Conference on Signal Processing, volume 1 of ICSP ’04, pages<br />

707–712, August 2004. 16<br />

[Ter04] R. Terebes. Diffusion Directionnelle. Applications à la Restauration et<br />

à l’Amelioration d’Images de Documents Anciens (in French). PhD thesis,<br />

L’Université Bordeaux I - École Doctorale des Sciences Physiques et<br />

de L’Ingénieur en cotutelle avec L’Université Technique de Cluj-Napoca<br />

(Roumanie), May 2004. 17<br />

[TLBB02] R. Terebes, O. Lavialle, P. Baylou, and M. Borda. Mixed Anisotropic Diffusion.<br />

In Proceedings of the 16th International Conference on Pattern Recognition,<br />

volume 3 of ICPR ’02, pages 760–763, Washington, DC, USA, 2002. IEEE<br />

Computer Society. 16


24 Bibliografie<br />

[Uni11] University of Southern California. The USC-SIPI image database. http://<br />

sipi.usc.edu/database/index.php, 2011. 10<br />

[WBSS04] Z. Wang, A.C. Bovik, H.R. Sheikh, and E.P. Simoncelli. Image Quality Assessment:<br />

From Error Visibility to Structural Similarity. IEEE Trans. Image<br />

Process., 13(4):600–612, 2004. 10<br />

[Wei94] J. Weickert. Scale-Space Properties of Nonlinear Diffusion Filtering with a Diffusion<br />

Tensor. Report 110, Laboratory of Technomathematics, University of<br />

Kaiserslautern, October 1994. 5<br />

[Wei03] J. Weickert. Coherence-enhancing shock filters. In Lecture Notes in Computer<br />

Science, volume 2781 of Pattern Recognit., pages 1–8. Springer, 2003. 9<br />

[WP93] R. Whitaker and S. Pizer. A multi-scale approach to nonuniform diffusion.<br />

CVGIP: Image Underst., 57(1):99–110, January 1993. 5<br />

[WSB03] Z. Wang, E.P. Simoncelli, and A.C. Bovik. Multiscale structural similarity for<br />

image quality assessment. In Conference Record of the Thirty-Seventh Asilomar<br />

Conference on Signals, Systems and Computers, volume 2, pages 1398–1402,<br />

November 2003. 10<br />

[WSF08] W.-W. Wang, P.-L. Shui, and X.-C. Feng. Variational models for fusion and<br />

denoising of multifocus images. IEEE Signal Process. Lett., 15:65–68, January<br />

2008. 14, 15<br />

[XP00] C.S. Xydeas and V. Petrovic. Objective image fusion performance measure.<br />

Electron. Lett., 36(4):308–309, February 2000. 18<br />

[ZEHH07] Y. Zheng, E.A. Essock, B.C. Hansen, and A.M. Haun. A new metric based on<br />

extended spatial frequency and its application to DWT based fusion algorithms.<br />

Inform. Fusion, 8(2):177–192, April 2007. 18

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!