Regardez ce que les gens du Projet Magenta ont fait. Après avoir créé l'algorithme NSynth, ils ont mis au point une machine pour servir d'instrument, agissant comme interface physique pour l'algorithme NSynth.

De quoi s'agit-il donc avec la machine et l'algorithme ?

Tout d'abord, Magenta est un projet dans Google. Il se concentre sur les outils d'apprentissage automatique, aider les artistes à créer de l'art et de la musique de nouvelles façons. Ils se sont occupés de Google Creative Labs pour créer l'instrument NSynth Super. Désormais, les musiciens peuvent faire de la musique en utilisant des sons générés par l'algorithme NSynth à partir de quatre sources sonores différentes.

NSynth Super a un écran tactile :vous pouvez faire glisser vos doigts pour jouer des sons.

(NSynth est l'abréviation de "Neural Synthesizer". NSynth utilise un réseau neuronal profond pour apprendre les caractéristiques des sons, et créer de nouveaux sons en fonction des caractéristiques.)

Google a posté une vidéo mardi et vous pouvez voir, et entendre, l'instrument en action. Le producteur londonien Hector Plimmer a exploré les sons générés par l'algorithme d'apprentissage automatique NSynth. je

NSynth Super peut être joué via n'importe quelle source MIDI, comme un DAW, séquenceur ou clavier. (DAW est une station de travail audio numérique. MIDI signifie Musical Instrument Digital Interface.)

Alors, comment fonctionne réellement cet instrument ? Dans une expérience, 16 sons sources originaux sur une gamme de 15 hauteurs ont été enregistrés dans un studio puis entrés dans l'algorithme NSynth, pour précalculer les sons. Les sorties, plus de 100, 000 nouveaux sons, ont été chargés dans le prototype d'expérience. Chaque cadran s'est vu attribuer 4 sons sources. A l'aide des cadrans, les musiciens peuvent sélectionner les sons sources qu'ils aimeraient explorer entre, et faites glisser leur doigt sur l'écran tactile pour parcourir les sons qui combinent les qualités acoustiques des 4 sons sources.

À DJ Mag , la nouvelle a été traduite en un "nouveau synthétiseur matériel à écran tactile basé sur l'IA". Les téléspectateurs ont appris que le "NSynth Super utilise une nouvelle technologie pour combiner les sons et les textures".

Declan McGlynn dans DJ Mag examiné ce qui rend cette approche spéciale. "NSynth interprète les sons comme des nombres et génère mathématiquement une nouvelle série de 'nombres' qui sont ensuite reconvertis en sons."

On pourrait se tromper en supposant que cette approche ne fait que mélanger les sons. Chris Davies dans SlashGear expliqué ce qu'il y a de "nouveau" dans les sons :"En bref, il prend les aspects fondamentaux de différents sons et génère ensuite de nouveaux timbres et dynamiques qui seraient difficiles - voire impossibles - à générer avec un synthétiseur analogique ou numérique traditionnel. "

Quels sont quelques exemples de la façon dont cela se déroule? McGlynn : « Les sons incluent le moteur d'une voiture combiné à un sitar, un son de basse morphing avec du tonnerre et bien plus encore. Le résultat est une sortie vraiment unique, avec le nouveau matériel permettant aux utilisateurs de se déplacer entre quatre sons sur un pad X/Y coloré."

Et après? Ce n'est pas comme si vous pouviez entrer dans un magasin et le trouver sur une étagère. Néanmoins, le code et les fichiers de conception sont sur GitHub. Chris Davies a dit, "Google publie également NSynth Super en tant que projet open source. Cela inclut non seulement le côté logiciel - qui utilise TensorFlow et openFrameworks - mais les schémas et les modèles de conception pour le matériel, trop."

Davies a ajouté, votre NSynth Super doit être fonctionnellement identique même s'il n'a peut-être pas l'air aussi élégant que celui de Google, selon combien vous avez à dépenser sur les matériaux, et ce que vous utilisez pour faire le boîtier.

Donc, la version open source du prototype NSynth Super incluant tout le code source, schémas, et des modèles de conception sont disponibles en téléchargement sur GitHub.

La page de GitHub indique que l'interface tactile est un capteur capacitif, comme le tapis de souris d'un ordinateur portable, pour explorer les nouveaux sons générés par NSynth entre la source audio que vous avez choisie.

La page de GitHub a déclaré que le boîtier de l'électronique peut être fabriqué avec un cutter laser, et maintenus ensemble avec des vis et des raccords standard. Cette conception est personnalisable en utilisant différents matériaux, couleurs, cadrans, et des formes.

© 2018 Tech Xplore