mozg objektumok sztere l t ssal t mogatott tartalom alap felismer se n.
Download
Skip this Video
Loading SlideShow in 5 Seconds..
Mozgó objektumok sztereólátással támogatott tartalom alapú felismerése PowerPoint Presentation
Download Presentation
Mozgó objektumok sztereólátással támogatott tartalom alapú felismerése

Loading in 2 Seconds...

play fullscreen
1 / 20

Mozgó objektumok sztereólátással támogatott tartalom alapú felismerése - PowerPoint PPT Presentation


  • 125 Views
  • Uploaded on

Mozgó objektumok sztereólátással támogatott tartalom alapú felismerése. Kiss Attila, Németh Tamás Budapesti Műszaki Főiskola Konzulensek: Sergyán Szabolcs, Vámossy Zoltán. A bemutató felépítése. Projekt ismertetés Rendszerfelépítés Használt technikák Sztereólátás Tartalom alapú felismerés

loader
I am the owner, or an agent authorized to act on behalf of the owner, of the copyrighted work described.
capcha
Download Presentation

Mozgó objektumok sztereólátással támogatott tartalom alapú felismerése


An Image/Link below is provided (as is) to download presentation

Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author.While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server.


- - - - - - - - - - - - - - - - - - - - - - - - - - E N D - - - - - - - - - - - - - - - - - - - - - - - - - -
Presentation Transcript
mozg objektumok sztere l t ssal t mogatott tartalom alap felismer se

Mozgó objektumok sztereólátással támogatott tartalom alapú felismerése

Kiss Attila, Németh Tamás

Budapesti Műszaki Főiskola

Konzulensek: Sergyán Szabolcs, Vámossy Zoltán

a bemutat fel p t se
A bemutató felépítése
  • Projekt ismertetés
  • Rendszerfelépítés
  • Használt technikák
    • Sztereólátás
    • Tartalom alapú felismerés
  • Elért eredmények
  • Összefoglalás, kitekintés

2005.03.22. BMF-NIK OTDK 2005 2/20

projekt ismertet se
Projekt ismertetése
  • Célunk egy olyan kétkamerás megfigyelőrendszer készítése, amely képes:
    • mozgó objektumokat észlelni

(Object Detecting)

    • térben modellezni

(Stereo Vision)

    • saját adatbázisában ahhoz hasonlókat keresni

(Content Based Image Retrival - CBIR)

2005.03.22. BMF-NIK OTDK 2005 3/20

rendszerfel p t s
Rendszerfelépítés
  • Kamerakezelő rendszer
    • Mozgásdetektálás
    • Modell előkészítés
  • Modellező rendszer
    • Modellkészítés
    • Megjelenítés
  • Tartalom-alapú képkinyerő rendszer (CBIR)
    • Tulajdonságkinyerés
    • Hasonlóságmérés
    • Visszacsatolás

2005.03.22. BMF-NIK OTDK 2005 4/20

kamerakezel rendszer
Kamerakezelő rendszer
  • Objektum detektálás
    • Változások észlelése a háttérképhez képest
    • A megváltozott terület jelölése
  • Kapcsolat a CBIR-rel
    • Kamerakép
    • A differenciakép legkisebb határoló téglalapja
    • A differenciakép konvex burka által meghatározott képrészlet elküldése
  • Modell előkészítés (Jel alapú sztereo módszer)
    • Jellemző pontok keresése a Harris-féle sarokdetektáló módszerrel

C. Harris, M. Stephens – „A Combined Corner and Edge Detector”, Fourth Alvey Vision Conference,pp. 147-151, 1988.

2005.03.22. BMF-NIK OTDK 2005 5/20

modellez rendszer
Modellező rendszer
  • Modellkészítő
    • Jellemző pontok megfeleltetése a bal és jobb oldali kameraképen intenzitás kereszt korreláció segítségével
    • Mélységinformáció kinyerése a megfeleltetett pontok diszparitásának számításával
  • Korreláció alapú sztereó módszer
  • Megjelenítés
    • Az elkészült modell megjelenítése OpenGL használatával

W.E. Snyder, H. Qi – “Machine Vision”, Cambridge University Press, 2004.

2005.03.22. BMF-NIK OTDK 2005 6/20

tartalom alap k pkinyer s 1
Tartalom alapú képkinyerés - 1

J. A. Lay, L. Guan – „Image Retrieval Based on Energy Histograms of the Low Frequency DCT Coefficients”, 2004.

http://debut.cis.nctu.edu.tw/pages/slides/jeffrey/present2.pdf

2005.03.22. BMF-NIK OTDK 2005 7/20

tartalom alap k pkinyer s 2
Tartalom alapú képkinyerés - 2
  • Előfeldolgozás, zajszűrés
    • Medián szűrő
    • Gauss szűrő
  • Színnormalizáció (Finlayson módszere alapján)
  • Alacsonyszintű tulajdonságok
    • DCT együtthatók
    • Színhisztogramok 6 színtérben (RGB, HSV, YIQ, XYZ, L*u*v*, L*a*b*)
    • Textúrázottság (sarkosság), horizontális és vertikális maszk
    • Diszparitás térkép

B. V. Funt, G. D. Finlayson– “Color Constant Color Indexing” IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 17, No. 5, pp. 522-529, 1995.

2005.03.22. BMF-NIK OTDK 2005 8/20

tartalom alap k pkinyer s 3
Tartalom alapú képkinyerés - 3
  • Hasonlóságmérés
    • Minkowski-féle távolságok
    • Hisztogram metszet (Histogram Intersection)
  • Hierarchikus keresés (könyvtárszerkezet mintájára)
  • Több dimenziós hasonlóság vizsgálat
  • Visszacsatolás, Yong Rui technikája

Y. Rui, T.S. Huang, M. Ortega, S. Mehrotra - Relevance Feedback - „A Power Tool for Interactive Content-Based Image Retrieval” IEEE Transactions on Circuits and Video Technology, Vol. 8, No. 5, pp. 644-655, 1998.

2005.03.22. BMF-NIK OTDK 2005 9/20

pontok megfeleltet se
Pontok megfeleltetése
  • Jellemző pontok keresése
  • Jellemző pontok megfeleltetése

2005.03.22. BMF-NIK OTDK 2005 10/20

korrel ci alap sztere
Pentagon műholdas sztereóképei és diszparitástérképeKorreláció alapú sztereó
  • Saját képek és diszparitástérképe

2005.03.22. BMF-NIK OTDK 2005 11/20

saj t adatb zis elemei
Saját adatbázis elemei

2005.03.22. BMF-NIK OTDK 2005 12/20

slide13
Demo

2005.03.22. BMF-NIK OTDK 2005 13/20

teszt eredm nyek cbir
Teszt eredmények(CBIR)
  • Néhány eredmény csoport teszteléssel

2005.03.22. BMF-NIK OTDK 2005 14/20

tesztel s az uw kollekci val
Pontosság a University of

Washington kollekció alapján

H. Müller, W. Müller, S. Marchand-Maillet, T. Pun –“A Web-Based Evaluation System for CBIR”, 2004.,http://woodworm.cs.uml.edu/~rprice/ep/mueller/

UW kollekció képei

Tesztelés az UW kollekcióval

2005.03.22. BMF-NIK OTDK 2005 15/20

sszefoglal s 1
Összefoglalás – 1
  • Két kamerás sztereó rendszer
    • Mozgásészlelés
    • Modellezés
    • Diszparitás térkép továbbítása CBIR felé
  • Tartalom alapú képkinyerés
    • Indexelési technikákkal plugin-ezhető
    • Automatikusan elkészíti az indexeket
      • Szín alapú
      • Textúra alapú
      • Mélység alapú

2005.03.22. BMF-NIK OTDK 2005 16/20

sszefoglal s 2
Összefoglalás – 2
  • Szemantikus interpretáció
    • Szöveges leírás
    • Hierarchikus adatbázis kiépítés
  • Lekérdezések típusa
    • NN – legközelebbi szomszédok
  • Visszacsatolás
  • Automatikus tesztelés és kiértékelés
    • Tárolás
    • Összehasonlítás

2005.03.22. BMF-NIK OTDK 2005 17/20

kitekint s
Kitekintés
  • Új tulajdonságkinyerési technikák implementálása
  • Alkalmazott modellező algoritmusok gyorsítása és javítása
  • OODB használata

2005.03.22. BMF-NIK OTDK 2005 18/20

hivatkoz sok
Hivatkozások
  • M.J. Swain, B.H. Ballard - Color Indexing”

Int’l J. Computer Vision, Vol. 7, No. 1, pp. 11-32, 1991.

  • B. V. Funt, G. D. Finlayson- “Color Constant Color Indexing” IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 17, No. 5, pp. 522-529, 1995.
  • Y. Rui, T. S. Huang, M. Ortega, S. Mehrotra - Relevance Feedback - „A Power Tool for Interactive Content-Based Image Retrieval” IEEE Transactions on Circuits and Video Technology, Vol 8, No. 5, pp. 644-655, 1998.
  • J. Owens, A. Hunter, E. Fletcher - „A Fast Model-Free Morphology-Based Object Tracking Algorithm”

http://www.bmva.ac.uk/bmvc/2002/papers/99/full_99.pdf

  • M. Pollefeys - „3D Modelling from Images” http://www.esat.kuleuven.ac.be/~pollefey/tutorial/
  • C. Harris, M. Stephens – „A Combined Corner and Edge Detector” Fourth Alvey Vision Conference, pp.147-151, 1988.
  • H. Müller, W. Müller, Stephane Marchand-Maillet, Thierry Pun –“A Web-Based Evaluation System for CBIR”

http://woodworm.cs.uml.edu/~rprice/ep/mueller/

  • W.E. Snyder, H. Qi – “Machine Vision”, Cambridge University Press, 2004.

2005.03.22. BMF-NIK OTDK 2005 19/20

k sz n m a figyelmet
Köszönöm a figyelmet!

Elérhetőségek:

Kiss Attila (wampy@freemail.hu)

Németh Tamás (pheenix@freemail.hu)

Honlap:

http://roberta.obuda.kando.hu/iar/2004_2005/FTT

2005.03.22. BMF-NIK OTDK 2005 20/20