Fondation Phi pour l’art contemporain — Synthesthésie
Dans le cadre d’une installation présentée au Centre Phi pour l’art contemporain à Montréal, Alexandre Quessy d’Art Plus Code a réalisé le développement logiciel associé au dispositif Synthesthesie — une expérience qui explore le croisement des perceptions sensorielles et la synthèse de signaux en temps réel, au croisement du son, de l’image et de l’interaction.
Contexte
Le Centre Phi pour l’art contemporain accueille des projets d’art immersif et numérique. Synthesthésie s’inscrit dans cette lignée : faire dialoguer le public avec une œuvre dont le comportement dépend des entrées captées et traitées par le logiciel.
L’atelier Synthesthésie est offert aux groupes qui participent à une visite interactive de l’exposition Ryoji Ikeda animée par les éducateurs de DHC/ART.
DHC/ART-Éducation est très heureuse de collaborer avec le centre d’artistes Perte de signal pour la conception de son atelier interactif en relation avec l’exposition Ryoji Ikeda.
Pour l’occasion, Alexandre Quessy, Darsha Hewitt, Nelly-Ève Rajotte et Claudette Lemay de Perte de signal ont développé une activité tout à fait unique, ludique et novatrice intitulée SYNTHESTHÉSIE. Au cours de cet atelier, les participants réaliseront une composition sonore expérimentale à partir de collages en noir et blanc qu’ils seront invités à bricoler. Ces collages, qui serviront de « partitions visuelles », seront ensuite analysés par le logiciel libre SYNTHESTHESIA afin de générer des sons et d’en explorer les différentes propriétés.
Ce logiciel a été spécialement conçu par Alexandre Quessy pour notre atelier à DHC/ART. Il sera donc utilisé en grande première, tout au long de l’exposition de Ryoji Ikeda, par vous tous participants !
Objectifs
- Trouver le concept et faire le design UX d’un logiciel de médiation culturelle.
- Assurer un logiciel fiable pour l’exposition (sessions répétées, public varié).
- Permettre une réactivité adaptée à une installation artistique.
Déroulement de l’atelier:
- Les participants seront d’abord initiés aux différentes manières de représenter le son au moyen d’images, tels les ondes sonores et le diagramme spectral.
- Par la suite, les éducateurs vont présenter les 5 jouets sonores aux participants en expliquant comment différentes caractéristiques d’images influencent le son. Les 5 jouets sonores sont : 1. la ligne mélodique, 2. la forme d’onde, 3. l’amplitude, 4. la fréquence et 5. le spectre. Ces jouets sonores font partie du logiciel libre Synthesthesia.
- Les participants seront alors invités à créer leurs collages par petits groupes en découpant et en déchirant plusieurs formes dans du papier blanc, puis en assemblant et en collant ces formes blanches sur des cartons noirs, afin de créer différentes images. Ces collages et images, une fois terminés, deviendront des « partitions visuelles » prêtes à produire des sons.
- Tour à tour, chaque groupe pourra expérimenter l’interaction de sa partition visuelle avec le jouet sonore de son choix. Tous les jouets sonores de Synthesthésie fonctionnent à partir de l’analyse en temps réel de la partition visuelle par une caméra. Le logiciel d’ordinateur Synthesthesia se charge de transformer la partition visuelle en sons. Les participants pourront voir cette analyse de l’image et du son sur un écran d’ordinateur.
- En terminant, nous ferons un retour sur l’activité Synthesthésie en présentant les compositions visuelles et sonores de chaque groupe et en commentant chacune d’elles.
Venez tenter l’expérience SYNTHESTHÉSIE afin de vous familiariser avec certaines propriétés du son, de réfléchir aux différentes manières de représenter le son en images et de démystifier la création en direct et l’improvisation.
Solution technique
Conception et implémentation d’applications et de modules sur mesure pour la capture, le traitement et la restitution des données, en coordination avec les besoins artistiques et techniques du projet.
Technologies
- Détection des caméras vidéos.
- Analyse de l’image en temps réel.
- Synthèse audio musicale.
- Déploiement facile et s’assurant que l’installation fonctionne en tout temps.
Notes
Perte de Signal est un centre d’artistes montréalais dont le mandat est de promouvoir le rayonnement des arts numériques et l’innovation artistique liée aux nouvelles technologies. De la performance audio à la projection vidéo en passant par l’installation mécanique et l’intervention publique, le travail des membres de l’organisme se décline à travers différents médiums et à travers l’exploration d’une variété d’approches plastiques et formelles. Les activités de Perte de Signal favorisent principalement: 1) le rayonnement du travail de ses membres sur la scène nationale comme internationale; 2) le soutien à la recherche-création et à l’expérimentation artistique; 3) l’élaboration d’une réflexion critique sur les arts numériques; et 4) la médiation auprès de différents publics. Enfin et surtout, Perte de Signal se veut un lieu de rencontre qui favorise les initiatives, les collaborations, les échanges et la transmission des savoir-faire au sein de la communauté artistique dans son ensemble.
Pour la programmation générale du Centre Phi, voir le site officiel : phi.ca.