Adobe a récemment dévoilé sa prochaine génération de fonctionnalités d’IA, une collection de modèles génératifs appelée Firefly. Ce sont les premières fonctionnalités à générer à la fois des images et des effets de police.
En les utilisant, les artistes numériques pourront créer des illustrations de qualité professionnelle à l’aide d’invites de texte. De plus, la nature multimodale de Firefly signifie que l’audio, la vidéo, les illustrations et les modèles 3D peuvent tous être générés via le système à travers des mots.
Les modèles d’IA génératifs de Firefly peuvent à la fois créer et transformer des modèles audio, vidéo, illustrations et 3D à l’aide d’invites textuelles similaires à celles utilisées dans Dall-E et ChatGPT, a déclaré la société. Adobe Firefly fera partie d’une série de nouveaux services d’IA générative d’Adobe Sensei sur les clouds d’Adobe.
Firefly est actuellement disponible en version bêta dans la suite Adobe sur des programmes tels que Premiere Pro, Illustrator, After Effects et Photoshop. Les créateurs peuvent s’inscrire ici pour rejoindre la version bêta et demander l’accès à Firefly. Ils seront accessibles via un programme bêta fermé plus tard cette année.
Le premier modèle de la famille Firefly est formé sur des images du catalogue de photos Adobe Stock, a indiqué la société. Il s’agit de contenu et de médias sous licence ouverte du domaine public, ce qui garantit que le modèle n’entraînera pas de poursuites. Il indique également que les photographes et artistes de stock seront rémunérés pour l’utilisation de leurs œuvres dans la formation de ces IA.
Voici quelques-unes des fonctionnalités initiales de Firefly :
- Texte à l’image : Les créateurs peuvent saisir leur vision dans une boîte et en générer une image en quelques secondes.
- Générez des styles de texte et des textures : Utilisant un autre style de génération de texte en image, cette fonctionnalité stylise le texte. Il peut ajouter des textures et des styles au texte en interprétant une invite et en l’appliquant aux mots. Les créateurs peuvent transformer le texte en pratiquement n’importe quel style qu’ils souhaitent avec une simple description.
Maintenant, juste un mois après son annonce initiale, Adobe a annoncé aujourd’hui qu’il travaillait déjà sur une multitude de mises à niveau pour la vidéo Creative Cloud et pour les applications audio telles que Premiere Pro et Adobe After Effects. Les ajouts devraient arriver au programme bêta de Firefly plus tard en 2023.
Les nouvelles fonctionnalités annoncées cette semaine sont conçues pour aider les éditeurs professionnels à réduire leur travail et à gagner du temps sur des tâches telles que l’augmentation des niveaux de couleur, l’insertion d’images d’espace réservé, l’ajout d’effets et la recommandation autonome de b-roll pour un projet donné. Les créateurs peuvent simplement saisir leurs idées dans l’invite de texte AI de Firefly et laisser l’algorithme fonctionner.
Cela inclut les “améliorations du texte en couleur”, une capacité qui peut ajuster les niveaux de luminosité et de saturation et changer l’heure de la journée dans une image à l’aide d’invites en langage naturel, explique Adobe.
Certaines fonctionnalités récemment annoncées incluent :
- Musique et effets sonores avancés : À l’aide d’invites de texte, les utilisateurs peuvent demander à Firefly de générer des sons et de la musique personnalisés pour s’adapter à une ambiance et à une scène spécifiques, sous forme de pistes temporaires ou finales.
- Polices animées, graphiques et logos : Les sous-titres, les logos et les cartes de titre peuvent être générés rapidement avec des animations personnalisées basées sur les préférences du créateur décrites en mots.
- Capacités de script et de rouleau B : Firefly accélérera les flux de travail de pré-production, de production et de post-production, en utilisant l’analyse par IA du texte du script pour créer automatiquement des storyboards et des prévisualisations tout en recommandant des clips b-roll pour les montages bruts et finaux.
Adobe indique qu’il y aura des guides pratiques pour guider les nouveaux utilisateurs tout au long du processus d’utilisation de ces fonctionnalités.
