CISYNTH

Synthé multimédia d'après le capteur lumineux d'un scanner à plat

Analyse de signal autour des C.I.S (Contacts Image Sensor)

caracteristiques :

  • digital RVB to audio
  • digital to vidéo

Inspirations :

premiers tests

cahier des charges techniques

utopie de départ

A partir d'un scanner à plat et d'une partition graphique, obtenir une création temps réelle composée de l'image obtenue (sortie vidéo), et de la synthèse spectrale de cette image (sortie audio mono). Pouvoir “jouer” le son d'un objet graphique, lu depuis le capteur (CIS) d'un scanner à plat, lisant une partition graphique. (cf. jeu sur l'onde spectrographique d'un son dans le logiciel Audiosculpt).

Inspiré des logiciels d'analyse audio, cet instrument permettrait d’obtenir un table d'onde à partir de ce que l'on place au dessus du capteur, sur la vitre du scanner. La table d'onde est lue en permanence, variant (en amplitude?) sur chacune des fréquences de l'ensemble du spectre. Le top serait de pouvoir implémenter SuperVP de l'Ircam. A partir de l'analyse de chacun des senseurs du capteur CIS (10200?), produire une forme d'onde (synthèse spectrale?) résultant (de la somme?) de l'amplitude de l'ensemble des fréquences fixes (par bandes?).

objectif audio : Créer des analogies arbitraires entre les valeurs colorimétriques (niveau de gris pour commencer) de chacun des senseurs, et l'amplitude d'une plage de fréquence associée.

objectif graphique : Récupérer les valeurs colorimétriques et fabriquer de l'image avec (produirait un genre de slitscan, mais peut etre arbitraire aussi?)

Acquisition des données

Choix du sensor

CCD, inline CMOS, CIS… ?
L'idée serait de partir des capteurs CIS, des scanners à plat, (sensibilité de 24 bits par capteurs et un nombre de capteur de 10200 en général). Trouvable facilement en recup car rendu obsoletes par des drivers logiciels non compatibles aux OS actuels… si la procédure d'acquisition de ce type de sensor est assez rapide ?

stockage des données

Interprétation des données du capteur

Génération du signal audio

Génération du signal vidéo

Matériaux

  • vieux scanner a plat 5V, ici le canonscan LIDE25
  • micro controleur pour lire les CIS (STM 32)
  • motor stepperLien externe, arduino
  • la vitre du scanner
  • ici un soft capable de parler avec ces vieux scanners. type Vuescan
  • chassis cnc (voir comment conserver le chassis du scanner

test partitions graphiques Processing

Photos

V1