DALL-E mini, récemment rebaptisé Craiyon, est un modèle d’IA, ou un réseau neuronal, qui génère des images à partir d’un texte. D’un portrait de Dark Vador par Picasso à un chien faisant du surf en pixel art, les possibilités de création d’images par l’IA sont infinies.
Craiyon est gratuit et il n’y a pas de limite au nombre d’images que vous pouvez générer. Bien sûr, il est loin d’égaler DALL-E 2 d’OpenAI qui est entièrement photoréaliste et incroyablement surprenant, ou d’autres générateurs d’images populaires comme Jasper Art ou Midjourney.
Cependant, Craiyon est facile et amusant à utiliser et suffisamment bon pour illustrer des articles de blog ou des messages sur les réseaux sociaux. Et, si vous êtes malin, un peu plus.
Dans cet article, découvrez ce qu’est Craiyon, le nouveau DALL-E mini, ce qu’il vaut ainsi que plusieurs conseils pour vous aider à générer les plus belles créations possibles.
Qu’est ce que Craiyon?
Craiyon, anciennement connu sous le nom de DALL-E mini, est un générateur d’images à partir de texte créé par Boris Dayma. Il s’est inspiré de la même technologie qu’OpenAI (le créateur entre autres de ChatGPT et DALL-E), dans laquelle le logiciel a été créé grâce à un algorithme d’apprentissage automatique qui a été formé sur des images existantes.
Cela signifie que l’algorithme de Craiyon a été entraîné à partir d’une série d’images et qu’on lui a appris à en discerner les éléments à l’aide de textes. L’IA est formée à une immense quantité de matériel visuel ainsi qu’au traitement du langage naturel, ce qui signifie qu’elle peut discerner et relier le langage et ses suggestions visuelles.
Grâce au travail de Dayma et des communautés d’IA sur Twitter et GitHub, la technologie s’est suffisamment affinée pour produire des images reconnaissables qui ont gagné en popularité sur internet.
Les développeurs peuvent télécharger le modèle et tout le monde peut utiliser gratuitement Craiyon depuis leur site internet.
L’histoire de DALL-E mini (Craiyon)
Consultant en apprentissage automatique et créateur de DALL-E mini, Boris Dayma s’est inspiré de l’article DALL-E d’OpenAI.
Après avoir lu l’article, Boris a attendu six mois avant de commencer à construire le projet. L’élément déclencheur a été un concours de codage organisé par Hugging Face et Google, où il a eu accès aux TPU (Tensor Processing Unit). Cet événement est à l’origine de la création du programme DALL-E mini, qui sera ensuite connu sous le nom de Craiyon.
La première version de DALL-E mini a été entraînée sur 400 millions d’images associées à un texte, récupérées sur le web et gérées par Boris Dayama.
La technologie de DALL-E mini est similaire à l’approche originale de DALL-E, qui utilise la méthode Zero-Shot texte/image qui est plus efficace en termes de calcul que la méthode Diffusion puisqu’elle tente de prédire l’ensemble de l’image simultanément. Cependant, des avancées récentes montrent que les modèles Diffusion peuvent créer des images générées par l’IA de meilleure qualité.
Le modèle DALL-E mini a connu un tel succès que son créateur a obtenu les ressources nécessaires pour former un nouveau modèle plus grand appelé DALL-E mega. C’est ce dernier modèle qui alimente le site de Craiyon, mais vous le verrez toujours référencé comme DALL-E mini.
Qui peut utiliser Craiyon?
DALL-E mini est un logiciel libre sous licence Apache 2004, ce qui rend son utilisation gratuite. Le code et le modèle sont accessibles à partir d’un fichier Hugging Face ou Git Hub.
Si vous n’êtes pas développeur et que vous souhaitez tester le modèle directement en ligne, vous pouvez essayer une version hébergée dans le Cloud sur le site internet de Craiyon (craiyon.com).
Craiyon est un service gratuit et financé par la publicité. Une grande communauté utilise le service, il peut donc falloir un certain temps pour générer des résultats, mais il n’y a pas de limites sur le nombre d’images que vous pouvez générer.
Comment utiliser Craiyon?
Commencer à utiliser Craiyon est relativement facile. Il vous suffit de suivre les étapes suivantes:
- Rendez-vous sur le site de Craiyon.
- Ecrivez une description de l’image que vous souhaitez générer dans la fenêtre de texte.
- Cliquez sur le bouton Draw.
- Attendez une minute environ.
- Craiyon va générer 9 images correspondant à votre demande.
- Cliquez sur une des images pour l’agrandir et l’enregistrer.
La différence entre DALL-E 2 et DALL-E mini (Craiyon)
Bien qu’ils portent un nom similaire, ces deux générateurs d’images IA ne sont pas identiques.
OpenAI a développé DALL-E 2, en s’appuyant sur des travaux antérieurs sur GPT3, qui utilise un modèle Diffusion et dispose de beaucoup plus de paramètres.
Quant à lui, DALL-E mini s’inspire de l’article sur DALL-E et d’un projet de recherche développé par Boris Dayma. C’est un programme open-source qui bénéficie du financement TPU Research Cloud de Google.
Plus important encore, les résultats obtenus avec chaque modèle sont très différents.
En effet, DALL-E 2 génère des images plus fidèles qui reflètent avec précision la description donnée, surpassant de loin les résultats de Craiyon. Ce dernier a une bonne compréhension du texte et, dans la plupart des cas, fournit une image qui correspond mais qui n’a pas la fidélité de DALL-E 2.
Toutefois, nous pouvons tout de même saluer la qualité du service pour un outil entièrement gratuit et sachant qu’il a été développé par un seul individu disposant de fonds et de ressources limités.
Bien qu’il y ait des limitations au niveau du contenu, les résultats de DALL-E 2 sont étonnants, surtout si vous savez guider correctement l’IA en rédigeant de bonnes descriptions textuelles et en utilisant avec précision les outils d’édition d’image. C’est un des meilleurs outils de génération d’images par IA aujourd’hui.
Intéressé par les outils de génération d'images IA?
6 conseils pour bien utiliser Craiyon
Contrairement à Jasper Art, Midjourney ou DALL-E 2, Craiyon n’est pas encore assez performant pour un travail de niveau professionnel.
Cependant, Craiyon est facile et amusant à utiliser et suffisamment bon pour illustrer différents types de contenu web, comme des articles de blog ou des publications sur les réseaux sociaux. Et, si vous êtes malin, un peu plus.
Depuis que le site est devenu viral, les utilisateurs ont commencé à comprendre le fonctionnement de ce petit programme amusant, et il existe aujourd’hui de nombreux conseils pour vous aider à créer les plus belles images grâce à Craiyon.
1. Essayer encore et encore
Craiyon est gratuit et il n’y a pas de limites de génération d’images IA. Il vous donne neuf résultats pour chaque demande, vous pouvez donc continuer à essayer jusqu’à ce que vous obteniez quelque chose d’utilisable.
Si les résultats ne correspondent pas à ce que vous attendez, modifiez votre description, ajoutez plus de détails et réessayez.
Il est vrai que chaque génération d’image prend environ une minute, alors prévoyez quelque chose d’autre sur lequel vous pouvez travailler pendant ce temps-là. Personnellement, j’utilise Craiyon pendant que je rédige des articles de blog.
2. Recréer un style artistique connu
L’une des façons les plus simples de faire faire à Craiyon ce que vous voulez est de lui demander de générer une image dans le style d’un artiste ou d’un style artistique spécifique.
Vous pouvez par exemple indiquer un style artistique tel que cubisme, expressionnisme, art digital, dessin au crayon, art steampunk, peinture à l’huile, pixel art, etc. Craiyon ne les connaît peut-être pas tous, mais il reconnaîtra les plus célèbres.
Vous pouvez utiliser le nom de n’importe quel artiste ou photographe célèbre. Tant qu’il est suffisamment célèbre, vous devriez obtenir des résultats intéressants. Par exemple, vous pouvez ajouter « dans le style de Pablo Picasso ».
Ces requêtes sont généralement réussies, mais il arrive que l’IA se contente de recréer une peinture bien connue de l’artiste ou du style que vous avez indiqué dans la zone de texte.
Vous pouvez également ajouter des descriptions de matériaux comme tissu, feutre, bijoux, diamant, ballon, sculpture de glace, papier mâché ou origami.
La construction des descriptions textuelles étant un peu plus variée, vous devrez être attentif aux sens alternatifs des mots pour obtenir le résultat souhaité. De plus, la combinaison de différents styles ne donne généralement pas de bons résultats. Un style semble se substituer à l’autre.
3. Placer des objets ou décrire des actions
Vous pouvez élargir votre champ d’action en demandant à Craiyon de placer des objets à des endroits précis. Dans vos descriptions textuelles, vous pouvez essayer d’utiliser des prépositions comme dans, sur, à côté de, entre, etc. pour mettre en place plusieurs objets ou personnes dans leur contexte.
Par exemple, un chat à l’intérieur d’un vaisseau spatial ou un chien couché sur un canapé.
Il en va de même pour les descriptions qui impliquent un objet ou une personne en train de faire quelque chose, bien qu’elles aient eu un peu moins de succès d’après notre expérience.
4. Modifier la vue générale de l’image
La plupart des images que nous créons sont en général des gros plans. Mais vous pouvez jouer avec les angles de caméra et les descriptions de composition pour obtenir des vues différentes.
Vous pouvez demander une vue aérienne, une vue éloignée, un portrait, un grand angle, un gros plan, une macro ou autre chose.
Vous pouvez également ajouter des descriptions de lieux et d’environnement. Par exemple comme « au milieu d’un champ », « dans le désert », « sur un toit » ou « dans un tunnel ».
5. Être précis dans sa description
Votre image générée par Craiyon n’est pas satisfaisante? C’est peut-être la conséquence d’un manque de précision dans votre description textuelle.
Lorsque vous générez des images avec l’IA, vous devez faire attention à vos données d’entrées. Si vous écrivez une description telle que « un chat » ou « des chats qui jouent », vous laissez trop de libertés et d’improvisations à l’IA pour qu’il puisse générer une image précise.
Une meilleure description serait quelque chose comme « un chat gris debout dans un champ, au clair de lune, image digitale, vue éloignée ».
Plus les données d’entrées sont détaillées, plus les résultats sont précis et de qualité. Cependant, n’oubliez pas que ce n’est pas toujours le cas. Il arrive que l’IA produise une image remarquable à partir d’un simple mot.
6. Editer les images avec un logiciel
J’aime utiliser Canva pour optimiser mes images, et c’est la solution que je recommande aux personnes qui débutent dans l’édition d’images numériques. Canva est gratuit est très simple à utiliser, donc parfait pour les débutants. Toutefois vous pouvez très bien utiliser le logiciel de conception graphique de votre choix, comme Photoshop par exemple, qui offre bien plus de fonctionnalités.
Bref, vous pouvez facilement importer vos images Craiyon sur Canva et les utiliser dans le cadre de vos projets. Par exemple, vous pouvez utiliser les images générées avec Craiyon pour vos articles de blog, sur les réseaux sociaux, pour des publicités, et même pour des couvertures de livres.
Avec un logiciel de conception graphique, vous pouvez modifier et améliorer vos images IA comme vous le souhaitez. Vous pouvez modifier les couleurs, les formes, ajouter des éléments, du texte, changer les dimensions de l’image, etc. Si vous avez un peu d’expérience dans la conception graphique, il n’y a pas de limites à ce que vous pouvez créer.
Cela vous prend littéralement que quelques minutes pour générer une image sur Craiyon, puis la transformer dans le graphique de votre choix avec un outil comme Canva. Certes, la qualité des images n’est pas toujours exceptionnelle, mais vous pouvez facilement et rapidement créer toutes sortes d’images uniques et libres de droit pour de nombreux usages différents.
Pour conclure
DALL-E mini, récemment rebaptisé Craiyon en raison de sa ressemblance avec le DALL-E non apparenté créé par OpenAI, est rapidement devenu un phénomène Internet pour sa génération d’images.
Craiyon est une excellente démonstration de la puissance de l’IA dans la génération d’images. Mais comme l’outil est gratuit et n’utilise pas les dernières avancées en matière d’IA, il est moins impressionnant que d’autres outils, comme Jasper Art ou Midjourney.
En effet, même les demandes les plus simples n’aboutissent pas toujours à des images réalistes. D’après mes expériences, l’algorithme a du mal à discerner les requêtes abstraites mais spécifiques. En outre, plus la requête est complexe, moins l’image est fidèle à la réalité.
Sachant qu’il est gratuit et qu’il a été développé par une seule personne avec un budget et des ressources limités, Craiyon reste un logiciel de génération d’image IA impressionnant et un passe-temps amusant pour les utilisateurs occasionnels.