Interaction synthèses sonore et visuelle

J'ouvre un sujet pour des exemples de synthèses sons et images simultanées.
Puisque l'aspect modulaire (hard ou soft) fait qu'un système peut être suffisamment ouvert pour générer  autre chose que du son.
Par exemple :
- séquencer des événements sonores à partir d'un système de synthèse d'image
- créer ou séquencer des images/animations à partir de séquenceurs musicaux
- plus fou : avoir 2 systèmes de synthèses image et son qui interagissent l'un avec l'autre (le son modifie l'image, et l'image modifie le son simultanément)
Bref tout est possible.
Si vous faites ce genre de truc, postez des exemples et dites-nous en plus !

En voici 1 pour commencer :
Des sons génératifs à base de FM et de delays numériques : chaque son généré déclenche des boucles de création de motifs géométriques. Les paramètres de son changent légèrement les caractéristiques des motifs.

Moi je fais des trucs simples mais qui me plaisent et collent bien avec ma musique.

Au début, j'avais modifié un patch Max/MSP d'émulation de Rutt/Etra. Ça réagissait au son sur 4 sorties séparées. Malheureusement, la seule vidéo que j'ai a été tournée lors d'un live où la carte son n'a pas voulu fonctionner donc le patch fonctionnait avec l'entrée micro de l'ordi...


Maintenant je joue avec un simple Oscillatoscope1c de Gijs Gieskes qui a l'avantage d'avoir trois entrées CV pour contrôler les 3 paramètres. J'utilise donc des atténuateurs dans mon modulaire pour gérer l'image. Je n'ai que cette petite vidéo facebook pour voir ce que ça donne :
[Vous devez être inscrit et connecté pour voir ce lien]

Super Color Palunar!!

skid c'est fait avec supercollider ?

Merci  . Les sons oui, à 100%. Le séquenceur génère des messages OSC : certains sont destinés au moteur audio, d'autres à la génération graphique (qui se fait hors SC).

Chouettes vos exemples.
Je ne connaissais pas le Oscillatoscope1c.

Même si je suis un peu sceptique de mickey mousing, j'apprecie vos videos là dessus. Celle de skid me faisait penser à bandes dessinées avec leur palette de couleur limité et des contours simplifiés. Les expériments de Norman McLaren m'a beaucoup inspiré quand je me lançais dans l'animation.

Je crois que je faisais quelque sorte de translation du son aux trajectoires du movement dans une section de ma première animation, Leçons de Pythagore. Clairement les possibilités sont nombreuses, on peut créer des liaisons entre son et image plus ou moins perceptibles. Un truc potentiellement interéssante serait d'introduire un délai pour rendre la correspondence audio-visuelle un peu flou s'il on le souhaite.

un test que j'avais fait il y a quelque temps, 8 CV's du Serge contrôlent différents paramètres d'un sketch en Processing via Expert Sleepers et Max/MSP:

Norman McLaren, très étonnant (vu de quand ça date). Je vais creuser merci.

phisynth

Ces expérimentations ont commencé dès les années 20.
On trouve quelques noms importants (notamment Fischinger, Mac Laren et Pfenninger) sur cette page wikipedia : Graphical sound.
Un film de Fischinger :

Mac Laren


Il y a aussi les frères Whitney, Larry Cuba, Robert breer…

McLaren ce sont les premiers films que j'ai montré à mes filles lorsqu'elles étaient bébé !

John Whitney en particulier est une référence pour moi.
Il appliquait vraiment ce concept de composition à la fois sonore et visuelle. Le fait de composer en ayant toujours ces 2 aspects à l'esprit, comme s'ils étaient indissociables.
C'est vraiment une façon de faire intéressante.

Autre tentative : pour le moment même principe que dans l'exemple de phisynth. L'audio influence l'image via une demi douzaine de trigs et paramètres.

perso, je possiede un 3TrinsRGB1c de gieskes, et un petit bitvision de LZX.
je suis aussi en trains de modifier un kit, Pong, pour pouvoir laisser mon modulaire jouer tout seul a un jeux vidéo...