1 / 16

My Eye Reflection

My Eye Reflection. Rana ALGAN Elif BONCUK Melike ÖZDEMİR ImagineCup2011. My Eye Reflection by rem.

huslu
Download Presentation

My Eye Reflection

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript


  1. MyEyeReflection Rana ALGAN Elif BONCUK Melike ÖZDEMİR ImagineCup2011

  2. MyEyeReflectionbyrem MyEyeReflection, bir göz takip sistemidir. Bu sistemle, felç ya da felç benzeri ALS, MS gibi hastalıklar sonucunda konuşma yetisini yerine getiremeyen ya da yeni ameliyattan çıkmış ve kendini ifade edemeyen hastaların iris hareketlerinden yararlanarak iletişim kurabilmelerini sağlamayı amaçlıyoruz.

  3. Neden Göz Takibi? • Göz sinirleri çok zor hasar alır, insan – bilgisayar sistemlerinde komut vermek adına göz kaslarını kullanmak mantıklı • Göz, sözsüz ve dolaylı iletişim kurmada en etkili yöntem • Konuşma dili, beden dili veya yazı dili kullanılamıyorsa, göz ile etkileşim kurmak gerek! • Gözün baktığı yer bilgisini girdi olarak alıp tasarlanan arayüzlerin ve geliştirilen uygulamaların sayısı gittikçe artmakta

  4. Hedef Kullanıcı Kitlesi • Engelli hastalar • Felçli hastalar • Konuşma becerisini yitirmiş hastalar • Gözü sağlıklı olan her insan!

  5. Amaç.. • Göz hareketlerinden yararlanarak kişinin ekran üzerinde nereye baktığını bulabilmek • Kendini ifade edemeyen hastaların göz hareketlerini bir arayüz yardımıyla takip ederek, söylemeye çalıştıklarını yazdırabilmesini sağlamak • Yani gözleriyle konuşabilmesine yardımcı olmak!

  6. Hedef.. • Engelli ve felçli hastaların, kendilerini daha rahat ve anlaşılır bir şekilde ifade edebilmelerini sağlamak • Bireysel yaşam kalitesinin ve toplumla ilişkilerinin arttırılması • Engelli hastaların eksik yönlerinin olduğunu düşünmemelerini sağlamak

  7. Ne Yapılacak? • Yüz tanıma • Göz tanıma • Göz takibi • Gözün baktığı yerin tespiti • Sanal Klavye – alfabe içeren arayüz tasarımı

  8. Kullanılacaklar • Donanım: • Monitör • USB kamera • Yazılım: • Microsoft VisualStudio • OpenCV görüntü işleme kütüphanesi • Microsoft Ürünleri

  9. Gelinen Nokta.. • Görüntü işleme için açık kaynak bir kütüphane olan OpenCV’nin kurulumu yapıldı • Varolan kütüphanelerin implementasyonuyla yüzün ve gözün konumunu bulan bir demo hazırlandı

  10. Demo..

  11. Literatür Araştırması Michael Chau ve MargritBetke’nin Boston Üniversitesi Bilgisayar Bilimleri Bölümünde yaptıkları “Real Time EyeTrackingandBlinkDetectionwith USB Cameras” adlı çalışma ile çeşitli sakatlıkları olan insanların kullanımı için bir insan - bilgisayar arayüzü tasarlanmıştır. Özellikle ALS ya da Multiple skleroz olan hastalar hedef kitlesi olarak alınmıştır. Sistem kullanıcının göz kırpmalarını tespit etmekte ve göz kırpmalarının örüntü ve süresi analiz etmektedir. Bu bilgiler kullanılarak ise bir fare tıklaması şeklinde veri kullanılmıştır. Sistem otomatik olarak ilklendirildikten sonra, kullanımın ilk birkaç saniyesinde kullanıcının istemsiz göz kırpmaları işlenir, online bir şablonla korelasyon kullanılarak gerçek zamanlı göz takip edilir. Eğer kullanıcının derinliği değişirse ya da hızlı yüz hareketi olursa sistem tekrar ilklendirilmektedir. Sistem pahalı olmayan bir usb kamerayla çalışır ve saniyede 30 frame alır.

  12. Literatür Araştırması devam.. DonghengLi ve Derrick J. Parkhurst’nin Iowa State Üniversitesi’ndeki “Starburst: A robustalgorithmfor video-basedeyetracking” adlı çalışması, video temelli göz takibi algoritması üzerinedir. Bu çalışmada, insan bilgisayar etkileşimini zenginleştirmek adına, kullanıcının odaklandığı noktaların takibi yapılmıştır. Bunun için, açık kaynak kodlu ve model tabanlı yaklaşımı temel alan karma bir göz takip algoritması geliştirilmiştir.

  13. Pazar Beklentileri.. Türkiye’deki özel hastanelerde ve devlet hastanelerinde, bu ya da benzeri bir sistem fiyatından ötürü kullanılamamaktadır. Aynı zamanda, maddi açıdan yetersiz olan hastalar göz önünde bulundurulduğunda, bireysel kullanıma yönelik olduğu söylenemez. Şimdiye kadar geliştirilmiş ürünler arasında, bizim geliştirecek olduğumuz ürün, maliyet açısından daha uygun olacağı için, öncelikle Türkiye pazarı olmak üzere, zamanla geliştirilmesi ve dünya pazarında yer edinmesinin sağlanması hedeflenmektedir. Bu sebeplerden dolayı, geliştireceğimiz sistemin pazarda talep edileceği düşünülmektedir.

  14. Eklenebilecek Özellikler • Microsoft Office programlarına eklentiler • Windows Live Messenger Bağlantısı • Multimedia araçları kullanımı – Windows MediaPlayer eklentisi • Seslendirme • Hastaneler İçin Ekstra Araçlar • İmla Kontrolü

  15. Teşekkürler..Sorular??

  16. İletişim • REM my_eye_reflection@windowslive.com • Rana ALGAN ranaalgan@gmail.com • Elif BONCUK elifboncuk88@gmail.com • Melike ÖZDEMİR cs.melikeozdemir@gmail.com • Web Site http://myeyereflection.wordpress.com

More Related