1 / 11

Projet Sample Orchestrator Réunion plénière, 10 octobre 2007

Projet Sample Orchestrator Réunion plénière, 10 octobre 2007. SP2 - Indexation audio et navigation par le contenu Application prototype de navigation et synthèse par corpus ( CataRT ) Interactions Musicales Temps-Réel Diemo Schwarz.

padma
Download Presentation

Projet Sample Orchestrator Réunion plénière, 10 octobre 2007

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Projet Sample OrchestratorRéunion plénière, 10 octobre 2007 SP2 - Indexation audio et navigation par le contenu Application prototype de navigation et synthèse par corpus (CataRT) Interactions Musicales Temps-Réel Diemo Schwarz

  2. Délivrable D-SP2-7-1 Application prototype de navigation et synthèse par corpus CataRT • Expérimentation de modes de recherche de sons et de jeu musical • par navigation interactive et graphique • dans un espace de descripteurs et de catégories de sons • Implémentation: • Ensemble de patchs et modules pour Max/MSP avec FTM&Co.

  3. Bilan des travaux effectués (1) • Traitement des fichiers stéréo • Segmentation d’un son • par notes (changement de pitch) • par pauses • sans segmentation: son entier

  4. Bilan des travaux effectués (2) • Amélioration de la gestion du corpus : • merge de plusieurs corpus • chargement de descripteurs externes • possibilité de définir des groupes de sons • Classes, données par le répertoire d’importation • activation/désactivation d’une unité, d’un fichier son, ou d’un groupe • possibilité de changer à la volée le corpus affiché dans l’interface, et joué par le module de synthèse

  5. Bilan des travaux effectués (3) • Création de séquences par navigation fondée sur les données, validée pour des boucles rhythmiques, cf. SP3(stage Sylvain Cadars) • utilisation d’un fichier son comme cible, séquençage de la cible • intégration d’une notion de contexte pour la définition d’une distance de continuation, qui structure la navigation musicale dans un corpus

  6. Video BeataRT

  7. Améliorations prévues (1) • Refonte de l’interface graphique • Zoom, loupe, valeurs sur axes et symboles affichés • Editeur pour la segmentation, les fichiers, les catégories et classes • Réduction de dimensions: multi-dimensional scaling (MDS) optimisé de type masses–ressorts • Intégration des descripteurs hiérarchiques (arborescence de catégories, taxonomie ou graphe sémantique) et morphologiques dans la représentation graphique de descripteurs multidimensionnels

  8. Améliorations prévues (2) • Descripteurs • Différent types : int, float, symbol, vector • Visibilité dans l’interface • Intégration de la bibliothèque d’indexation ircamDescriptors • Utilisation du format SDIF pour les descripteurs de bas-niveau par fichier son

  9. Améliorations prévues (3) • Scalabilité pour grands corpus • Restriction sur sous-ensemble de sons du corpus par bornes de descripteurs ou par catégories • Selection par nD-tree • Utilisation du format SDIF pour la persistence des corpus

  10. Planning prévisionnel • D-SP2-7-2 M18 (mai 2008) : • Application étendue de navigation et synthèse par corpus CataRT • Interface, descripteurs • D-SP2-7-3 M27 (fev 2009) : • Application finale de navigation et synthèse par corpus CataRT • Scalabilité

  11. Sujets de discussion pour la préparation des prochains travaux • Format de stockage de descripteurs: SDIF • Types SDIF à compléter • Format de représentation d’une hiérarchie • Semantic web ontologies RDF/OWL • WordNet • Format génomique Philippe (O. Houix)

More Related