Adobe Firefly peut désormais créer la musique, la voix off et les effets sonores
Adobe a retiré Generate Music, Generate Speech et Generate Sound Effects de la version bêta le 20 août. Tous les trois sont autorisés pour un usage commercial, ce qui est la partie qui compte vraiment.
Adobe a rendu trois outils audio IA généralement disponibles dans Firefly le 20 août, ce qui signifie que n’importe qui sur le Web et les applications mobiles peut désormais les utiliser plutôt que d’attendre l’accès à la version bêta. Generate Music produit des pistes originales adaptées à la durée et à l’ambiance de votre vidéo. Generate Speech transforme un script en voix off avec contrôle de la voix, du rythme et des émotions. Générer des effets sonores crée des effets individuels à partir d’une invite de texte, synchronisés avec ce qui se passe à l’écran.
Les détails valent la peine d’être connus. Generate Music fonctionne sur le modèle Firefly Music d’Adobe. Generate Speech vous donne le choix entre le modèle Firefly Speech d’Adobe et celui d’ElevenLabs, le spécialiste de la voix. Adobe affirme que les trois sont autorisés à être utilisés à des fins commerciales, ce qui signifie en pratique qu’il vous indique que les données d’entraînement ne reviendront pas vous mordre. Parallèlement aux outils audio, Adobe a ouvert un niveau gratuit de sa version bêta de Firefly AI Assistant avec une allocation quotidienne de générations, et a ajouté Gemini Omni Flash de Google aux modèles tiers déjà disponibles dans Firefly, rejoignant ainsi Kling AI, Luma AI et Runway. Gemini Omni Flash accepte les entrées vidéo, audio et image à côté du texte.
La revendication de licence concerne ici le produit réel, et non la qualité audio. De nombreux outils peuvent générer une piste de fond passable. Ce que la plupart d’entre eux ne peuvent pas faire, c’est dire à un service marketing, soutenu par une entreprise de la taille d’Adobe, que le résultat peut être intégré en toute sécurité dans une campagne payante. C’est pourquoi Adobe ne cesse de répéter l’expression « commercialement sûr » dans ses propres documents, et c’est aussi pourquoi Firefly est progressivement devenu un frontal multimodèle plutôt qu’un modèle unique. Adobe parie que les professionnels veulent un endroit unique avec des droits clairs et un choix de moteurs, plutôt que le meilleur moteur avec des droits obscurs. Une mise en garde juste : « autorisé pour un usage commercial » est la propre évaluation par Adobe de ses propres données de formation, et aucun tribunal ne l’a testée.
Ce que cela signifie pour vous : si vous réalisez des vidéos pour une petite entreprise, un club ou une chaîne, cela regroupe trois abonnements distincts en un seul et supprime la recherche fastidieuse de musique libre de droits qui ne ressemble pas à de la musique d’attente. Essayez d’abord Générer des effets sonores, car c’est là que l’audio de l’IA est le plus fiable et que les bibliothèques de stock sont les plus ennuyeuses. Si vous êtes curieux plutôt que engagé, le niveau gratuit Firefly AI Assistant est un moyen peu coûteux d’entendre à quoi ressemblent réellement ces modèles. Et si vous travaillez avec des talents vocaux, la lecture honnête est que le discours de qualité ElevenLabs dans un produit Adobe grand public change l’économie de la narration scénarisée courte, mais pas encore de tout ce qui nécessite un véritable jeu d’acteur.
##Sources
-Adobe Firefly étend son studio d’IA créative, Adobe -Adobe Firefly ajoute des outils audio IA et Gemini Omni Flash de Google, The Decoder
Ce robot apprend une nouvelle tâche à partir d'une courte vidéo, aucune formation requise
Le GEN-1.5 de Generalist AI prend une démonstration de trois à douze secondes comme invite et exécute la tâche avec un taux de réussite de 59 %, atteignant 83 % après cinq minutes de données. Tous les chiffres proviennent de l'entreprise.
