Recherche & Innovation

Modéliser, simuler, créer, entre arts et sciences

Fred Voisin participe de longue date à divers projets de recherche, de l'ethnographie aux neurosciences et au design sonore. Chercheur associé au CNRS dès 1989, il rejoint l'équipe de Simha Arom pour l'étude des musiques traditionnelles de Centrafrique et de Java. Ces recherches, en partie financées par la Fondation Fyssen, ont suscité l'intérêt d'une large communauté des sciences humaines et de la cognition, ainsi que de compositeurs (voir A propos).

Fort de cette expérience, Fred développe en 1995, entre CNRS et Ircam, des outils pour l'analyse et la génération de formes musicales, en collaboration avec le compositeur Jacopo Baboni-Schilingi. Développés pour l'environnement OpenMusic, ces outils ont été salués par une communauté de jeunes compositeurs.

Devenu familier de la modélisation de processus cognitifs musicaux, dans le contexte d'une ethnomusicologie expérimentale, et de leur simulation au moyen de dispositifs informatiques spécialement dédiés, Fred initie, dès avant l'an 2000, le projet Neuromuse, « système de réseaux neuromimétiques pour la création musicale » — avant que l'IA générative ne devienne un sujet grand public. Il s'agit d'un projet précurseur en IA générative qui permet — toujours — d'instancier des agents neuromimétiques capables de communiquer en MIDI ou TCP/IP, en Lisp, dans les environnements multimédia Max, Puredata, et via d'autres adaptations en Python, Java, C++, ARM... Il donna lieu à des preuves de concept sous la forme de concerts-performances de musique expérimentale en co-production avec divers centres de recherche tels que Ircam, CIRM, Art Zoyd, mais aussi Telecom Valley, Inria, France Telecom R&D, Eurecom, Infineon, National Taiwan University, ...

Ces recherches trouvent aujourd'hui un prolongement dans les travaux menés autour du design sonore (voir projet SpeaK), de la santé mentale (voir Son & Santé) et de l'environnement (voir Fonocanal).

Cette recherche s'accompagne d'un engagement constant dans la transmission des savoirs, à travers l'enseignement.

• Développement de systèmes génératifs sur mesure, algorithmique, réseaux neuromimétiques, moteurs de synthèse audio adaptatifs, systèmes embarqués, autonomes, bio-inspirés
• R&D en intelligence artificielle appliquée à la création et à l'identité sonores
• Prototypage et conseil pour projets expérimentaux ou de recherche appliquée
• Accompagnement de laboratoires, studios ou équipes techniques souhaitant intégrer une brique sonore générative

Productions

Exemples d'applications Arts/Sciences issues de travaux de recherche musicale ou en design sonore, sous la forme d'outils informatiques et de productions artistiques.

Outils & logiciels

• SpeaK for Max — patch Max pour SpeaK, plateforme collaborative de lexiques sonores, développé avec Patrick Susini (conception graphique et ergonomie), Ircam - équipe Perception et Design Sonores (2022) — speak.ircam.fr
• Mimer c'est jouer ! — prototype d'exploration musicale par le mime du jeu d'instruments, reconnaissance de gestes par réseau neuromimétique (MoCap, MLP TDNN), avec Emmanuel Bigand, LEAD, CNRS - Université de Bourgogne, soutenu par Cochlear (2017) — PDF
• All Together — sonification musicale du geste par capteurs sans fils, jouer ensemble à plusieurs, avec Emmanuel Bigand & Philippe Lalitte, LEAD, CNRS - Université de Bourgogne, Fête de la Musique, campus Gérard-Mégie du CNRS, Paris (2017) — cnrs.fr
• Neuromuse — système de réseaux neuromimétiques pour la création musicale, depuis 1999 (dépôt de code) — github.com/FredVoisin/neuromuse
• LabanOnLisp (LOL) — environnement expérimental de composition chorégraphique en Lisp (1999-2012), développé notamment avec Myriam Gourfink — documentation
• Morphologie — bibliothèque pour OpenMusic (Ircam), inspirée de l'ethnomusicologie et de René Thom (1999-2012) — github.com/openmusic-project/Morphologie, page du projet

Œuvres & installations neuromimétiques

• Fonocanal — installation sonore permanente sur une berge du canal de Bourgogne, constituant une plateforme musicale d'observation et d'expérimentation, près de l'écluse n°92 (2021) — données de fréquentation (data.gouv.fr)
• Last Manœuvres in the Dark — « Masques de terre cuite et agents neuromimétiques », de Fabien Giraud, Raphaël Siboni & Robin Meier, Palais de Tokyo, Paris (2008) — sur le site de Robin Meier et autre article de Fred, et à propos de "La musique de LMD"
• Amplification / Synaptique — installation musicale interactive sur internet, avec Jean-Luc Hervé, un réseau de neurones formels apprenant en temps réel, au fil des saisons, la partition originale, Festival des Musiques Inventives d'Annecy (2008) — article
• Symphonie des machines — installation-concert pour agents neuromimétiques, Festival de la 4ème Dimension, Sophia Antipolis (2006), avec le soutien de Ville de Paris, SNCF, Sacem, Art Public Contemporain et CIRM — sur le site de Robin Meier et autre article de Fred
• L'écarlate — chorégraphie de Myriam Gourfink sur une musique de Kasper Toeplitz, associant réseaux neuromimétiques (Neuromuse) et écriture chorégraphique (LOL), Festival Agora, Ircam (2001) — article

Publications

La bibliographie complète (articles de revues, actes de conférences, ouvrages & chapitres, rapports de recherche) est tenue à jour sur la page A propos.