J'ai fait jouer de la musique à une mouche à fruits 🎶 Voici ce qui s'est passé.
Avec la récente numérisation du connectome de la drosophile (mouche du vinaigre), vous avez peut-être vu des expériences dans lesquelles ce réseau neuronal biologique est utilisé pour effectuer diverses tâches. J'ai appliqué ce même principe fondamental à la musique : j'ai intégré le connectome réel d'une mouche à fruits dans un système de composition musicale générative développé sur mesure. 🔗 En savoir plus : https://ozgymusic.com/articles/i-made-a-fruit-fly-compose-music-heres-what-happened 🚫 Ce qu'il ne fait pas Il ne s'agit pas d'un projet de bio-sonification. En d'autres termes, je ne traduis pas directement l'activité neuronale de la mouche en sons, en fréquences de notes ou en rythme. Il n'existe pas de correspondance simple du type « un neurone = une note » ou « un signal = un son ». ⚙️ Comment ça marche ? Au cœur du système se trouve le connectome FlyWire proprement dit. La structure que j'utilise se compose de 8 192 neurones sélectionnés dans le jeu de données FAFB v783 et des connexions synaptiques enregistrées entre eux. Cependant, le connectome à lui seul ne permet pas de comprendre la théorie musicale. C'est pourquoi j'ai intégré des connaissances musicales et un mécanisme de composition dans le système sous la forme d'une couche distincte. - FlyWire Connectome : le réseau neuronal biologique fait office de substrat computationnel neuronal au cours du processus de composition, influençant la manière dont les choix musicaux sont explorés et sélectionnés. - Connaissances musicales : le système exploite des informations telles que la hauteur, les intervalles, la durée des notes, le rythme, la vélocité, le tempo, la tonalité, les accords, les motifs et les schémas musicaux. Ces connaissances fournissent une structure musicale et un espace de probabilité pour le processus de composition. - Composition et recherche : le système ne se contente pas de générer une seule composition puis de s'arrêter là. Il crée plusieurs propositions musicales, les évalue, puis reprend les résultats les plus prometteurs pour les intégrer aux générations suivantes afin d'explorer de nouvelles variations. - MasterCritic : Les propositions générées… Elles sont évaluées en fonction de divers critères tels que l’harmonie, la mélodie, le rythme, la forme, le style, l’originalité, la tension, la conduite des voix et la cohérence musicale acquise. Ainsi, le résultat ne se résume pas à la simple conversion d'une activité neuronale aléatoire en son. Un véritable connectome biologique fonctionne au sein du même système que les connaissances musicales existantes et le mécanisme de composition ; des candidats sont générés, évalués et affinés au fil des générations successives. En d'autres termes, l'expression « une mouche à fruits a composé de la musique » figurant dans le titre ne signifie pas, d'un point de vue scientifique, que la mouche ait consciemment écrit de la musique. Cela signifie toutefois qu'un véritable connectome biologique peut être utilisé dans le cadre d'un processus de calcul créatif. Et c'est précisément là que commence véritablement l'expérience. #fruitfly #fruitflyexperiment #fruitflymusic #fruitflyai #fruitflygame
Utilisez les commandes du lecteur pour lancer la vidéo.