Synthonia

E' da un bel po di tempo che mi frulla per la testa la realizzazione di una interfaccia midi basata su motion detector!! Cioè una telecamera riprende un'area vicino la tastiera,via software impostare in questa area delle figure geometriche in base alla propria esigenza,ovviamente la telecamera va collegata ad un pc,assegnare un qualsiasi comando midi alla figura geometrica,aprire un vst,associarlo a questo midi virtuale!! Che ne pensate dell'idea? In teoria si potrebbe disegnare una tastiera e associare nota on/off! Provate ad immaginate di suonare una tastiera invisibile! Che dite...è una idea da cestinare o da realizzare!!!

Credo che la cosa più difficile sia far riconoscere le figure geometriche dal software che gestisce la telecamera, non è affatto un problema banale.
Forse è più facile basare l'attivazione di note on/off sulla variazione di colore dell'immagine, settando lo zero, ovvero il bianco, sulla superficie che riprendi.
Cioè, per esempio, riprendo un foglio bianco e lo setto come bianco (anche se per ombre, riflessi etc proprio bianco non sarà), ogni volta che ci passo la mano sopra il colore cambia e ogni volta che il colore cambia il software invia un comando note on.
Per fare una tastiera si potrebbe suddividere l'obbiettivo della telecamera in "zone" virtuali settate sempre secondo la zona che vado a riprendere e registrare le variazioni di colore in ognuna di queste zone indipendentemente.

Detto questo non ho la minima idea di come possa essere implementato.

Starscream wrote:Credo che la cosa più difficile sia far riconoscere le figure geometriche dal software che gestisce la telecamera, non è affatto un problema banale.
Forse è più facile basare l'attivazione di note on/off sulla variazione di colore dell'immagine, settando lo zero, ovvero il bianco, sulla superficie che riprendi.
Cioè, per esempio: riprendo un foglio bianco e lo setto come bianco (anche se per ombre, riflessi etc proprio bianco non sarà), ogni volta che ci passo la mano sopra il colore cambia e ogni volta che il colore cambia il software invia un comando note on.
Per fare una tastiera si potrebbe suddividere l'obbiettivo della telecamera in "zone" virtuali settate sempre secondo la zona che vado a riprendere e registrare le variazioni di colore in ognuna di queste zone indipendentemente.

Detto questo non ho la minima idea di come possa essere implementato.

Ci siamo quasi!! 1) crei la figura geometrica nelle coordinate x e y dello schermo. 2) programmi la figura geometrica la funzione midi. 3) La telecamera dovrà essere ip,il software deve riconoscere l'oscuramento tra le due immagini. Esempio: le telecamere speed dome sarebbero quelle che vediamo in città,sono motorizzate e hanno uno zoom da paura.Nelle tanti funzioni cè ne una chiamata Motion Detection,quando entri in programmazione con i cursori crei una o più retine che stabiliscono le parti sensibili al movimento.Se qualcosa si muove davanti la retina la telecamera genera un allarme dalle apposite uscite.Stessa cosa nella nostra interfaccia appena avvicini il dito nel quadratino il software in uscita da l'informazione midi.La telecamera fa da interruttore,il software riconosce un cambiamento tra xy dell'area virtuale delle figure geometriche paragonato co la xy della telecamera

In sostanza se nn mi sbaglio dovrebbe essere la stessa teoria di questo aggeggione qui
http://www.reactable.com/products/experience/

xfuturemind wrote:

Starscream wrote:Credo che la cosa più difficile sia far riconoscere le figure geometriche dal software che gestisce la telecamera, non è affatto un problema banale.
Forse è più facile basare l'attivazione di note on/off sulla variazione di colore dell'immagine, settando lo zero, ovvero il bianco, sulla superficie che riprendi.
Cioè, per esempio: riprendo un foglio bianco e lo setto come bianco (anche se per ombre, riflessi etc proprio bianco non sarà), ogni volta che ci passo la mano sopra il colore cambia e ogni volta che il colore cambia il software invia un comando note on.
Per fare una tastiera si potrebbe suddividere l'obbiettivo della telecamera in "zone" virtuali settate sempre secondo la zona che vado a riprendere e registrare le variazioni di colore in ognuna di queste zone indipendentemente.

Detto questo non ho la minima idea di come possa essere implementato.

Ci siamo quasi!! 1) crei la figura geometrica nelle coordinate x e y dello schermo. 2) programmi la figura geometrica la funzione midi. 3) La telecamera dovrà essere ip,il software deve riconoscere l'oscuramento tra le due immagini. Esempio: le telecamere speed dome sarebbero quelle che vediamo in città,sono motorizzate e hanno uno zoom da paura.Nelle tanti funzioni cè ne una chiamata Motion Detection,quando entri in programmazione con i cursori crei una o più retine che stabiliscono le parti sensibili al movimento.Se qualcosa si muove davanti la retina la telecamera genera un allarme dalle apposite uscite.Stessa cosa nella nostra interfaccia appena avvicini il dito nel quadratino il software in uscita da l'informazione midi.La telecamera fa da interruttore,il software riconosce un cambiamento tra xy dell'area virtuale delle figure geometriche paragonato co la xy della telecamera

Non ho capito bene però che ruolo dovranno avere le figure geometriche...
Comunque, sì, esistono software per lo shape from shading e per lo shape recognition ma non li ho mai usati, e di solito, dato per l'appunto il problema non facile, vengono modellati sulle necessità di utilizzo.

carlord wrote:In sostanza se nn mi sbaglio dovrebbe essere la stessa teoria di questo aggeggione qui
http://www.reactable.com/products/experience/

Questa sembra una tavola che interagisce con quei cubi,la mia idea possiamo definirla videomidi ! Interessante sarebbe programmare il pitch bend e comandarlo con il movimento della testa non occorre lasciare la tastiera con la mano sinistra,basta piegare la testra lato sx il pitch scende 2 semitoni,a dx sale di due,per il program change basta abbassarsi un po e scende, in punta di piedi sale poi esiste un programma che converte la voce in note midi,praticamente mani,testa e voce azionerebbero un sistema musicale da circo!!

Starscream wrote:

xfuturemind wrote:

Starscream wrote:Credo che la cosa più difficile sia far riconoscere le figure geometriche dal software che gestisce la telecamera, non è affatto un problema banale.
Forse è più facile basare l'attivazione di note on/off sulla variazione di colore dell'immagine, settando lo zero, ovvero il bianco, sulla superficie che riprendi.
Cioè, per esempio: riprendo un foglio bianco e lo setto come bianco (anche se per ombre, riflessi etc proprio bianco non sarà), ogni volta che ci passo la mano sopra il colore cambia e ogni volta che il colore cambia il software invia un comando note on.
Per fare una tastiera si potrebbe suddividere l'obbiettivo della telecamera in "zone" virtuali settate sempre secondo la zona che vado a riprendere e registrare le variazioni di colore in ognuna di queste zone indipendentemente.

Detto questo non ho la minima idea di come possa essere implementato.

Ci siamo quasi!! 1) crei la figura geometrica nelle coordinate x e y dello schermo. 2) programmi la figura geometrica la funzione midi. 3) La telecamera dovrà essere ip,il software deve riconoscere l'oscuramento tra le due immagini. Esempio: le telecamere speed dome sarebbero quelle che vediamo in città,sono motorizzate e hanno uno zoom da paura.Nelle tanti funzioni cè ne una chiamata Motion Detection,quando entri in programmazione con i cursori crei una o più retine che stabiliscono le parti sensibili al movimento.Se qualcosa si muove davanti la retina la telecamera genera un allarme dalle apposite uscite.Stessa cosa nella nostra interfaccia appena avvicini il dito nel quadratino il software in uscita da l'informazione midi.La telecamera fa da interruttore,il software riconosce un cambiamento tra xy dell'area virtuale delle figure geometriche paragonato co la xy della telecamera

Non ho capito bene però che ruolo dovranno avere le figure geometriche...
Comunque, sì, esistono software per lo shape from shading e per lo shape recognition ma non li ho mai usati, e di solito, dato per l'appunto il problema non facile, vengono modellati sulle necessità di utilizzo.

Le figure geometriche servono a stabilire il punto preciso per attivare i controlli midi,es: tu vedi nel monitor il tuo viso,a sinistra posizioni un quadrato,stessa cosa a destra.Programmi i quadrati program change del pitch bend da 0 a 64 quello di sinistra da 65 a 127 quello di destra.Appena la tua testa va nel quadrato di sinistra la tua ws scende di pitch a destra sale mentre le mani continuano a suonare!!

aaah ok, avevo capito invece che le telecamera dovesse inviare codici midi se avesse rilevato delle precise figure geomotriche!

....torcicollo a fine serata!!!...e guai se suoni heavy metal e cominci ad headbangare....a parte gli scherzi...il titolo dice tutto ma ammiro le idee di questo tipo,folli o geniali che siano

Idea curiosa, però non praticabile ovunque e per tutti. Alcuni musicisti sono dei pali quando suonano, altri sono abbastanza dinamici. Per quanto riguarda i comandi vocali la vedo molto dura in live a meno che non si utilizzi un microfono e si mascherino i "rumori di fondo".