Harmonai

Laboratoire de Stability AI qui publie des outils open source de génération audio, dont Dance Diffusion, pour entraîner un modèle sur ses propres samples

Music & audio

Overview

Harmonai se présente comme un laboratoire de Stability AI qui publie des outils open source de génération audio destinés à rendre la production musicale plus accessible, avec pour idée de générer ses propres bibliothèques de sons. Concrètement, il ne s'agit pas d'une application à abonnement : les outils sont des dépôts de code sur GitHub, notamment un générateur de samples, qui permet d'entraîner un modèle sur des sons arbitraires, avec des notebooks Dance Diffusion pour l'inférence et l'ajustement fin exécutables dans Google Colab, ainsi qu'un codec audio et une bibliothèque de diffusion audio. Les dépôts sont sous licence MIT. Il n'y a donc aucune grille tarifaire : l'usage est gratuit, le coût réel étant celui de la puissance de calcul nécessaire à l'entraînement.

Le site officiel est minimal, en anglais, et n'offre ni interface de création, ni documentation utilisateur complète, ni version française. L'usage suppose de savoir lire du code Python et de lancer des notebooks, ce qui le réserve aux développeurs et aux musiciens techniques. Aucune API hébergée ni intégration tierce n'est proposée, et le site ne documente ni hébergement ni RGPD, puisqu'on exécute le code soi-même. Les limites sont nettes : les dépôts publics de l'organisation n'ont reçu que peu de mises à jour récentes, le dernier envoi visible datant d'avril 2024, et les modèles ne rivalisent pas avec les générateurs musicaux commerciaux en qualité de rendu. C'est un outil d'expérimentation, pas une solution de production prête à l'emploi.

Our verdict

À recommander aux développeurs, chercheurs et musiciens techniques qui veulent expérimenter la génération audio open source et entraîner un modèle sur leurs propres sons, sans frais de licence. À éviter si vous cherchez une application prête à l'emploi pour composer un morceau : il faut coder, disposer de puissance de calcul et accepter un projet peu actif récemment.

← Back to all tools