SINEMUSE (lite) – Scheda tecnica

Scheda Tecnica 


Descrizione

SYNEMUSE (Lite) è un software avanzato che combina tecnologie di riconoscimento facciale e analisi audio per creare un’esperienza multisensoriale interattiva. Integra intelligenza artificiale per il rilevamento di emozioni, età, genere e movimenti del volto al fine di modulare effetti audio in tempo reale.


Funzionalità Principali

1. Riconoscimento Facciale e Analisi delle Espressioni

    • Espressioni facciali (felice, triste, arrabbiato, sorpreso, disgustato, neutrale, pauroso).
    • Direzione del capo e degli occhi.
    • Stima di età e genere.
  • Applicazione: Le informazioni rilevate vengono usate per modificare dinamicamente gli effetti audio.

2. Analisi Audio

    • RMS (Root Mean Square) – Intensità del suono.
    • ZCR (Zero Crossing Rate) – Ritmo e velocità.
    • Spectral Centroid – Brillantezza del suono.
    • Spectral Flatness – Tonalità o rumorosità.
    • Dati audio mostrati in tempo reale su un canvas grafico.

3. Modulo Audio Dinamico

  • Effetti Audio Supportati:
    • Reverb: Simula ambienti sonori (wet/dry mix configurabile).
    • Filtro Biquad: Modula la brillantezza del suono in base al movimento del capo.
    • Compressore: Gestisce dinamiche audio per espressioni negative.
    • Stereo Panning: Direziona l’audio in base alla posizione degli occhi e della testa.
    • Oscillatore: Genera suoni per stati di paura.
    • Distorsione: Effetto per emozioni forti come rabbia.

4. Riproduzione Musicale Intelligente

  • Selezione Automatica Brani:
    • Assegna brani dalla playlist MP3 in base a età, genere ed emozioni.
    • Algoritmo di punteggio dinamico per scegliere il brano più adatto.
  • Modalità Random Carousel:
    • Riproduce brani casuali quando nessun volto è rilevato per più di 5 secondi.
  • Fade Audio: Gestione fluida di inizio e fine della riproduzione.

5. Compatibilità

  • Webcam: Supporta webcam standard per acquisizione video.
  • Audio: Integra sorgenti audio HTML5 e tecnologie Web Audio API.

6. Interfaccia Grafica

  • Design Responsivo:
    • Layout ottimizzato per schermi di diverse dimensioni.
    • Modalità Fullscreen.
  • Debug Avanzato:
    • Canvas per tracciare movimenti oculari e analisi delle espressioni.

 


Modalità di Utilizzo

  1. Avvio del Sistema:
    • Caricamento automatico dei modelli
  2. Riconoscimento Facciale:
    • Analisi in tempo reale di emozioni e movimenti.
  3. Riproduzione Musicale:
    • Selezione dinamica del brano basata sul profilo dell’utente.
  4. Effetti Audio:
    • Applicazione degli effetti configurati in tempo reale.

Note sulla Privacy

  • Conformità GDPR:
    • Il software non salva né condivide immagini o video.
    • Analisi effettuata localmente senza trasferimento di dati a server esterni.

Autore


Se hai bisogno di ulteriori dettagli, fammi sapere! 😊

ULTIME OPERE

Unable to Love

Descrizione:Il video contiene immagini immagini generate da l’Intelligenza Artificiale catturando i titoli di oggi delle testate giornalistiche russe, ucraine e statunitensi sulla guerra in Ucraina.

Laminina sound

Descrizione:Eseguita sonificazione delle prime 10 righe catena ACTG della LAMININA, attraverso algoritmo di BIO sonificazione. Illustrazioni e video di pubblico dominio in rete.