Dolov n informac z e i but speech @fit group
Download
1 / 17

Dolov ání informací z řeči – BUT Speech @FIT group - PowerPoint PPT Presentation


  • 99 Views
  • Uploaded on

Dolov ání informací z řeči – BUT Speech @FIT group. Honza Černocký BUT S [email protected], Brno University of Technology, Czech Republic 10.04.2013. Co d ěláme ?. „Co bylo řečeno“ – rozpoznávání řeči (speech recognition)

loader
I am the owner, or an agent authorized to act on behalf of the owner, of the copyrighted work described.
capcha
Download Presentation

PowerPoint Slideshow about ' Dolov ání informací z řeči – BUT Speech @FIT group' - stew


An Image/Link below is provided (as is) to download presentation

Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author.While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server.


- - - - - - - - - - - - - - - - - - - - - - - - - - E N D - - - - - - - - - - - - - - - - - - - - - - - - - -
Presentation Transcript
Dolov n informac z e i but speech @fit group

Dolování informací z řeči – BUT [email protected] group

Honza Černocký BUT [email protected], Brno University of Technology, Czech Republic

10.04.2013


Co d l me
Co děláme ?

  • „Co bylo řečeno“ – rozpoznávání řeči(speech recognition)

    • Celkový přepis – rozpoznávání plynulé řeči s velkým slovníkem (large vocabulary continuous speech recognition LVCSR)

    • Detekce klíčových slov nebo frází – keyword/keyphrase spotting

  • „Jakou řečí“ – rozpoznávání jazyka (language identification LID)

  • „Kdo to řekl“– rozpoznávání mluvčího

    • Výběr jednoho mluvčího z množiny – identifikace mluvčího – speaker identification

    • Ověření předpokládané identity – verifikace mluvčího– speaker verification.

BUT [email protected] group Honza Cernocky 7.4.2011




Jak to d l me
Jak to děláme

Klasifikace, rozpoznávání, machine learning

BUT [email protected] group Honza Cernocky 7.4.2011


Pot ebujeme data
Potřebujeme data

  • Stahujeme

  • Anotujeme

  • Kupujeme

  • Nahráváme

matylda1:/mnt/data 24T 22T 2.5T 90% /mnt/matylda1

matylda2:/speech 22T 13T 9.3T 57% /mnt/matylda2

matylda3:/speech 26T 24T 1.5T 95% /mnt/matylda3

matylda4:/speech 26T 18T 7.9T 70% /mnt/matylda4

matylda5:/speech 26T 15T 11T 57% /mnt/matylda5

matylda6:/speech 26T 16T 9.3T 64% /mnt/matylda6

scratch01:/mnt/data 3.0T 2.2T 829G 73% /mnt/scratch01

scratch02:/mnt/data 3.0T 2.0T 1.1T 66% /mnt/scratch02

scratch03:/mnt/data 1.9T 1.4T 487G 74% /mnt/scratch03

scratch04:/mnt/data 3.0T 2.5T 442G 86% /mnt/scratch04

scratch05:/mnt/data 3.0T 1.8T 1.2T 61% /mnt/scratch05

scratch06:/mnt/data 4.6T 3.5T 1.1T 77% /mnt/scratch06

BUT [email protected] group Honza Cernocky 7.4.2011


A rot
… a šrot

BUT [email protected] group Honza Cernocky 7.4.2011


A pot ebujeme v d t jak n m to jde
… a potřebujeme vědět, jak nám to jde

  • „Já jsem lepší než ti druzí“ – jen kecy, pokud nejsou stejná data a evaluační metriky

  • NIST – agentura vlády USA, http://www.nist.gov/speech

  • Její řečová skupina organizuje pravidelné evaluace řečových technologií (rozpoznávání řeči, řečníka, jazyka, …).

  • Všechny participující laboratoři obdrží stejná data a mají omezený čas na jejich analýzu a odeslání výsledků NISTu – objektivní srovnání výsledků.

  • Výsledky a detaily jednotlivých systémů se diskutují na následném workshopu.

  • [email protected] se evaluací účastní: Meeting recognition 2005, 2006, 2007, 2009, Language ID 2003, 2005, 2007, 2009, 2011, SpkVer 1998, 1999, 2006, 2008, 2010, 2012 Spoken term detection 2006, IARPA BEST 2011, DARPA RATS 2012, …

BUT [email protected] group Honza Cernocky 7.4.2011


Lidi

  • faculty

  • researchers

  • grad and pre-grad students

  • support staff

  • Bosses:

  • Research director:

  • Lukas Burget

  • Managing director:

  • Honza Cernocky

  • Guru:

  • Hynek Hermansky

  • Founded in 1997 (1 person)

  • grew to ~20 people in now

BUT [email protected] group Honza Cernocky 7.4.2011


Kdo to plat 1 7 m czk rok
Kdo to platí (~ 17 MCZK / rok) ?

  • Faculty(faculty members, research intent)research funds)

  • EU projects (FP[4567])

    • Past: SpeechDat, SpeeCon, M4, AMI, CareTaker, AMIDA, MOBIO, weKnowIt, DIRAC

    • Running: FP7 GLOCAL

  • US funding – Air Force EOARD, IARPA, DARPA

  • Local funding agencies - Grant Agency of CR, Ministries of Education, and Trade and Commerce

  • Czech “force” ministries – Defense, Interior

BUT [email protected] group Honza Cernocky 7.4.2011


Aplikace v sledk
Aplikace výsledků

Spin-offs

International

Local

BUT [email protected] group Honza Cernocky 7.4.2011


Internacionalisace a komunita
Internacionalisace a komunita

  • NIST evaluations, US-funded projects, EU projects, …

  • SW „tisíce děkovných dopisů“ – phnrec, RNNLM toolkit, TNet, …

  • Lidi odjinud (Indie, Irán, Německo, Rusko, Itálie)

    • Long term,

    • short term

  • Workshopy a komunity okolo nich

    • BOSARIS 2010, asi 2012

    • KALDI 2010, 2011, asi 2012

      => Working language is English

      => Cross-Atlantic teams

BUT [email protected] group Honza Cernocky 7.4.2011


Eho si nejv ce v m
Čeho si nejvíce vážím ?

  • U.S. IARPA program „BABEL“:

BUT [email protected] group Honza Cernocky 7.4.2011


Hot topics
Hot topics

  • Strašná data (DARPA RATS)

  • Multi-lingualita, málo a/nebo žádná a/nebo špatně popsaná trénovací data.

    • IARPA BABEL

    • MPO

BUT [email protected] group Honza Cernocky 7.4.2011


PhD ?

  • Požadujeme

    • Positivní vztah k matematice (ISS a ZRE jsou jen slabý odvar) a teoretické informatice

    • Slušné programování

    • Čtenou a mluvenou angličtinu

    • >100% úvazek

    • Dlouhou učící křivku („proč si na meetingu pořád připadám jako debil ?“)

    • SitzFleisch a samo-motivace !

BUT [email protected] group Honza Cernocky 7.4.2011


PhD !

    • Top research group

    • Okamžitá aplikace vybádaného v praxi.

    • Mezinárodní konference, projekty a evaluace – zajímaví lidé, zajímavá místa (i na déle) a skutečné srovnání se světem.

    • $ navíc ke stipendiu

  • Sociální aspekt

    • Pěkné vztahy

    • Kompetence v různých praktických oblastech života

      • RC modely

      • Lezení po kameni i ledu

      • Fun-carving

      • Kite-boarding

      • Stavba elektronkových kytarových zesilovačů

BUT [email protected] group Honza Cernocky 7.4.2011


Nen to zas tak slo it
Není to zas tak složitý…

Zdroj:S. Young et al.: The HTK Book (for HTK Version 3.4), Cambridge University Engineering Department, 2006

Zdroj:T. Černocký: poznámky z předmětu Matematika pro 1. ročník, ZŠ Krásného Brno, školní rok 2006/2007.

BUT [email protected] group Honza Cernocky 7.4.2011


ad