Entraîner un style d’une qualité folle
Si vous utilisez Krea, vous êtes déjà un as du prompt textuel. Vous avez sans doute aussi déjà entraîné des LoRA. Mais qu’est-ce qui fait un excellent modèle personnalisé ? Les 3 étapes clés de Krea pour l’entraînement :- Curation
- Il vous faut des images de premier ordre : haute qualité, grande cohérence. Vous êtes le curateur, et Krea est votre galerie.
- Affinage
- Krea rend super simple le réglage de tous les paramètres techniques : modèles de base, étapes d’entraînement, etc. Peaufinez autant que vous le voulez.
- Alchimie
- Soyons clairs : l’entraînement de style est un art à part entière, pas une science exacte. Si votre entraînement ne répond pas à vos attentes, pas de panique. C’est un processus d’essais et d’erreurs pour créer quelque chose de magique. Itérez, itérez, itérez !
Prompt : Un alchimiste dans son laboratoire en train de distiller un élixir, abstrait. Réalisé avec un style personnalisé et le modèle Krea 1.
1. Curation
Téléversement
Depuis Krea.ai, cliquez sur l’icône Home, puis sous les ressources, cliquez sur Train. Ou faites simplement défiler vers le bas.
Types de jeux de données
Personnage- Vous pouvez entraîner un modèle à comprendre un personnage dessiné ou modélisé spécifique (illustration, concept art, animation, jeux vidéo, etc.). Cela fonctionne aussi pour le visage d’une personne réelle (avec son consentement, bien sûr).
Les données du personnage (à droite) et le personnage généré avec le style (à gauche) présentent des détails cohérents.
- Utilisez autant d’images que possible de votre personnage dans exactement la même tenue pour plus de cohérence. Idéalement, variez les poses, les angles et les actions.
- Animateurs et concept artists : c’est un workflow très proche de la création de model sheets de personnages.
- Mêmes principes que pour l’entraînement de personnage : l’objet exact, plusieurs angles, des gros plans pour les détails et des plans larges pour le contexte.
- Si vous êtes designer produit ou travaillez dans l’e-commerce, téléversez simplement autant de photos produit uniques que vous en avez.
- Les arrière-plans vides ou transparents peuvent aider, mais ne sont pas indispensables, tant que l’objet reste le sujet central de l’image.
Même objet, angles différents, arrière-plan vide. Ce sont d’excellentes données d’entraînement.
- Si UNE SEULE de vos images montre un objet ou un produit légèrement différent, cela embrouillera le modèle et brouillera les résultats.
Si le produit comporte du texte, le style risque de ne pas pouvoir le reproduire, sauf si vous avez énormément d’images d’entraînement avec des gros plans sur ce texte. Sinon, attendez-vous à des artefacts.
- Ici, vous pouvez avoir un jeu de données plus libre et créatif. L’esthétique ou la matière des œuvres doit être exactement la même, mais les sujets peuvent, et doivent, être très variés.
- Peinture à l’huile, anime, chrome liquide, marbre, low poly : n’importe quel look ou médium bien défini.
Cet échantillon d’un jeu de données Low Poly contient des personnages et des arrière-plans uniques.
Cette image générée avec le style Low Poly a créé un sujet et une composition entièrement nouveaux.
- Une grande diversité empêche le style de faire de l’overfitting sur un sujet précis, ce qui lui permet d’être vraiment inventif.
2. Affinage
C’est le moment d’ajuster les paramètres techniques. Krea donnera un nom à votre Custom Style et lui attribuera un mot déclencheur à utiliser dans vos prompts (modifiable si besoin).Vous pouvez aussi consulter les jauges du nombre d’images et de la résolution moyenne. Jusqu’ici, tout va bien.
Modèle
- Le super-pouvoir de Krea, c’est de faire tourner un large éventail des meilleurs modèles de génération d’images et de vidéos.
- Chaque modèle a ses propres spécialités, mais ça vaut le coup de tous les tester. Petit récapitulatif :
Étapes
- Plus d’étapes = plus de temps passé à étudier les données. Cela peut aussi coûter beaucoup en calcul et provoquer de l’overfitting, quand le style se contente de recracher les images d’entraînement. Une bonne valeur de départ est nombre d’images x 20.
Par défaut : 250.
Taux d’apprentissage
- Un taux d’apprentissage plus élevé peut accélérer l’entraînement, mais aussi pousser le style à faire de l’overfitting sur les données. Un taux d’apprentissage faible demandera plus de temps d’entraînement.
Par défaut : 0.004 (4e-3)
Taille de lot
- Des tailles de lot (Batch Size) plus élevées peuvent accélérer l’entraînement, mais aussi donner des résultats génériques. Il est recommandé d’ajuster la Batch Size et le Learning Rate de façon proportionnelle. Pour les petits jeux de données, gardez notre valeur par défaut.
Par défaut : 1
3. Alchimie
Une fois le style entraîné, place à l’expérimentation. Dieux du prompt, c’est là que vous allez tout casser.Poussez le style dans ses retranchements :
- Allez toujours plus loin. Trouvez ses forces et ses faiblesses. Découvrez et notez quand le style donne d’excellents résultats, et quand ce n’est pas le cas.
- Si les résultats font de l’overfitting sur le style, envisagez de :
- Diversifier les données d’entraînement
- Réduire le taux d’apprentissage
- Si les résultats sont trop variés, envisagez de :
- Ajouter plus d’images au jeu de données
- Retirer les images faibles ou trop disparates du jeu de données
- Augmenter le taux d’apprentissage
- Si les résultats font de l’overfitting sur le style, envisagez de :
Vu ces générations d’exemple très similaires, ce style fait peut-être de l’overfitting. Réessayez.
Réentraînement
- Essayez un autre modèle
- Un modèle peut être meilleur qu’un autre pour capturer votre style. Faites le tour, c’est à ça que sert Krea. Reportez-vous au tableau des modèles ci-dessus en cas de doute.
- Fusionnez des jeux de données
- Combiner deux jeux de données ou plus peut créer des esthétiques vraiment uniques. Si vous êtes bloqué ou frustré par les limites d’un style, insufflez-lui une nouvelle vie.
- Continuez à expérimenter
- Augmentez ou réduisez le nombre d’images.
- Assurez-vous que toutes vos images sont en haute résolution.
- Bidouillez les paramètres de fine-tuning de Krea.