Picmoods: une expérience de synesthésie AI

Ceci est une soumission pour le défi multimodal Google Studio

Ce que j'ai construit

PicMoods est une application Web qui explore le concept de synesthésie numérique, traduisant l'ambiance et l'esthétique d'une image visuelle en une expérience audiovisuelle complètement originale.

Les utilisateurs téléchargent une image qui les inspire, et PicMoods orchestre un pipeline AI en plusieurs étapes pour composer un morceau de musique unique et une vidéo correspondante. C'est un outil pour l'exploration créative, permettant à quiconque de découvrir la mélodie cachée dans une photographie ou une œuvre d'art.

L'ensemble du processus créatif est propulsé par l'API Gemini, avec tous les sites audio et vidéo gérés par le client à l'aide de Tone.js et Ffmpeg.Wasm. L'application propose égale...
[Courte citation de 8% de l'article original]