Dans les pipelines de préproduction pour le jeu vidéo, les effets visuels et la conception d'environnements, le passage de la géométrie 3D brute au concept art final a longtemps constitué un goulot d'étranglement majeur. Les concept artists et designers d'environnements passent des heures à bloquer des scènes en volumes simples (greybox / blockout) ou à sculpter des silhouettes préliminaires dans Blender ou ZBrush, avant de devoir attendre de longs calculs de rendu hors ligne ou de passer des journées entières en repeinte 2D manuelle (paint-over) pour évaluer l'éclairage, l'ambiance et le rendu des matières.
La fonctionnalité de capture d'écran en temps réel de Krea (Krea Realtime Screen) transforme radicalement cette dynamique. En capturant la fenêtre active (viewport) d'outils 3D comme Blender ou ZBrush comme surface de saisie interactive, Krea convertit en quelques millisecondes les mouvements de caméra, les ajustements de volumes et les coups de pinceaux de sculpture numérique en illustrations de concept art stylisées et texturées, sans file d'attente ni bouton de calcul.
Ce guide examine le fonctionnement technique de Krea Realtime Screen et fournit une méthode étape par étape pour configurer les viewports de Blender et ZBrush, doser le curseur AI Strength et structurer des prompts efficaces pour un flux de travail dynamique.
Le défi initial : le goulot d'étranglement de la phase greybox
Les pipelines classiques de conception visuelle se heurtent à trois frictions structurelles lors des phases initiales :
- Dérive spatiale et perspectivale de l'IA générative 2D pure : Générer du concept art uniquement à partir de descriptions textuelles produit des images spectaculaires, mais dépourvues d'ancrage dans l'espace. Les directeurs artistiques et concepteurs de niveaux peinent à convertir ces images bidimensionnelles aux focales arbitraires en espaces 3D jouables et cohérents.
- Latence du rendu 3D traditionnel hors ligne : Même avec un modèle proxy précis dans Blender ou Maya, visualiser des matériaux réalistes, des rebonds lumineux et de la brume atmosphérique nécessite de bâtir des réseaux de shaders complexes et de subir les temps de calcul de moteurs de lancer de rayons comme Cycles ou Arnold.
- Coût élevé de la repeinte 2D manuelle : Les artistes capturent traditionnellement un rendu plat du viewport pour peindre manuellement des textures et des ombres dans Photoshop. Dès que la direction demande un changement d'angle de caméra, tout ce travail de dessin doit être recommencé.
L'interconnexion en streaming direct du viewport 3D avec Krea Realtime associe la précision spatiale tridimensionnelle à la vitesse de l'IA générative : le logiciel 3D verrouille la perspective exacte, l'échelle, le cadrage et la silhouette, tandis que l'IA applique instantanément les matériaux, l'usure de surface et l'éclairage cinématique.
Architecture technique : fonctionnement de Krea Realtime Screen
L'interface de Krea Realtime est divisée en deux panneaux interactifs :
- Panneau d'entrée (à gauche) : La zone recevant les signaux visuels. En mode standard, il accueille des tracés de pinceau vectoriels ou des images ; en mode streaming, il capte le flux vidéo d'une fenêtre d'application tierce.
- Panneau de sortie en direct (à droite) : Un flux génératif propulsé par des modèles autorégressifs et de diffusion distillés à très faible latence, actualisant le rendu en millisecondes dès qu'un élément visuel ou textuel est modifié.
En activant le mode Screen Record, Krea utilise les interfaces standard de partage d'écran du navigateur pour se brancher directement sur la fenêtre de Blender ou de ZBrush. Chaque image reçue est transmise comme tenseur de conditionnement structurel (Conditioning) au réseau neuronal, qui l'interprète conjointement avec le prompt textuel et les réglages de force.
+--------------------------+ Streaming d'écran +-------------------------+
| Logiciel 3D local | --------------------------------> | Entrée Krea Realtime |
| (Blender Workbench / | (Capture de fenêtre/viewport) | (Panneau gauche) |
| Sculpture dans ZBrush) | +-------------------------+
+--------------------------+ |
^ v
| Les mouvements de caméra et les +-------------------------+
| retouches de volumes se font en direct | Prompts & Paramètres |
| | - Curseur AI Strength |
v | - Concept Fast / CGI |
+--------------------------+ +-------------------------+
| |
+--------------------------+ v
| Lecture visuelle directe| <-------------------------------- +-------------------------+
| (Matériaux, lumière, | Flux continu sans file | Rendu IA en direct |
| ambiance, patine) | en millisecondes | (Panneau droit) |
+--------------------------+ +-------------------------+
Lorsque l'artiste fait pivoter la caméra dans Blender ou élargit les volumes d'une créature dans ZBrush, le concept art affiché à droite s'ajuste immédiatement en conservant l'alignement perspectival.
Optimisation du viewport 3D : réglages recommandés dans Blender et ZBrush
Transmettre un viewport encombré d'icônes d'interface, de gizmos de manipulation et de grilles au sol perturbe l'IA, qui tend à interpréter ces éléments d'interface comme des structures physiques réelles. Un nettoyage rigoureux de la vue est indispensable.
1. Configuration du viewport dans Blender (Modes Solid et Workbench)
Le mode Solid ou le moteur Workbench de Blender constituent une base géométrique idéale :
- Nettoyer l'affichage : Utilisez le raccourci
Ctrl + Alt + Espacepour passer le viewport en plein écran sans bordure, ou décochez les Viewport Overlays dans le coin supérieur droit (masquant la grille au sol, le curseur 3D, les axes et les contours de sélection). - Activer le mode Cavity (arêtes et creux) : Dans le menu Viewport Shading, réglez Cavity sur Both (World et Screen) et augmentez le contraste des crêtes (Ridge) et des creux (Valley). Cela met en valeur les chanfreins, les biseaux et les rainures, permettant à Krea d'insérer avec précision des lignes de jointure, des rivets ou de la rouille.
- Activer les ombres du viewport (Shadow) : Cochez l'option Shadow dans Viewport Shading et orientez la source lumineuse virtuelle. La présence d'ombres portées indique précisément à l'IA la provenance des lumières principales et secondaires.
- Sélection du MatCap : Pour les personnages ou les créatures, optez pour un MatCap d'argile grise (Clay) ou de cire rouge. Pour les véhicules de science-fiction ou les architectures mécaniques, un MatCap métallique à fort contraste favorise les reflets spéculaires.
- Couleurs aléatoires par objet (Random Color) : Dans une scène complexe comprenant de nombreux modules, passez Color sur Random. Murs, véhicules et éléments de décor s'afficheront sous forme de blocs de couleurs distinctes, agissant comme un masque de segmentation sémantique pour guider l'IA dans l'attribution des textures.
2. Configuration du viewport dans ZBrush
Pour concevoir des silhouettes organiques ou des créatures dans ZBrush :
- Choix du matériau : Évitez les matériaux chromés ou trop réfléchissants. Préférez BasicMaterial, MatCap Gray ou Clay.
- Masquer la grille et le manipulateur : Utilisez
Shift + Ppour désactiver la grille de sol et masquez le Gizmo 3D lors de l'évaluation du rendu. - Vérification de la silhouette en Flat Color : Passer le matériau en Flat Color sombre permet d'isoler la silhouette graphique pure. Combinée à un prompt d'arrière-plan, cette méthode produit instantanément des plans cinématographiques en contre-jour.
Guide pratique pas à pas
Suivez ces étapes pour synchroniser votre logiciel 3D avec l'interface de Krea Realtime :
Étape 1 : Initialiser Krea Realtime et la capture d'écran
- Ouvrez votre navigateur et accédez à l'outil Realtime sur la plateforme Krea.
- Sous le champ de saisie du prompt, repérez le sélecteur Draw Modes (qui démarre par défaut sur Draw).
- Choisissez Screen Record.
- Lorsque le navigateur sollicite l'autorisation de capture, sélectionnez l'onglet Fenêtre et cliquez sur votre fenêtre active de Blender ou de ZBrush (ou partagez votre second écran en configuration multi-moniteurs).
- Réglez le ratio d'aspect (
1:1,3:2pour une composition horizontale ou2:3pour un cadrage vertical).
(Note : Krea propose également un plugin officiel Krea for Blender, installable via Édition > Préférences > Extensions/Add-ons > Installer depuis le disque, intégrant l'interface directement dans le panneau latéral N du viewport 3D. Toutefois, le mode Screen Record via navigateur reste universel et fonctionne à l'identique avec ZBrush, 3ds Max, Maya et Unreal Engine).
Étape 2 : Sélectionner le modèle de génération
Cliquez sur le sélecteur Model en bas à gauche de l'interface :
| Catégorie | Modèle | Résolution | Cas d'usage recommandé |
|---|---|---|---|
| Faible latence | Concept Fast | 512px | Ébauche rapide de silhouettes ; style pictural de concept art ; fluidité instantanée lors de la rotation de caméra. |
| Faible latence | CGI Fast | 512px | Mechas et véhicules sci-fi ; surfaces dures ; validation de géométrie de jeux vidéo. |
| Faible latence | Photo Fast | 512px | Rendu photoréaliste ; tests de matériaux sur volumes d'architecture greybox. |
| Haute fidélité | HD Quality | 1024px | Caméra verrouillée ; validation des micro-détails avant l'exportation finale. |
| Haute fidélité | Flux Realtime Quality | 1024px | Application de styles personnalisés de studio avec un contrôle textuel rigoureux. |
En phase de recherche et d'exploration de caméra, privilégiez impérativement Concept Fast ou CGI Fast. Leur temps de réponse inférieur à la seconde garantit une maniabilité immédiate.
Étape 3 : Rédiger le prompt de conditionnement
Comme le viewport 3D contrôle déjà l'angle de vue, les proportions et l'échelle de la scène, votre prompt ne doit pas comporter d'instructions de cadrage. Concentrez-vous exclusivement sur les matières, la météo lumineuse, les textures et la direction artistique.
- À éviter : Des descriptions redondantes telles que "un char blindé au centre de l'image en plongée" (le viewport 3D s'en charge déjà).
- À adopter : Des descriptions matérielles et atmosphériques :
- Exemple véhicule sci-fi :
Heavy sci-fi exploration rover, weathered matte olive armor, oxidized steel plates, mud splatters on tracks, volumetric dust atmosphere, dynamic sunset rim light, Unreal Engine 5 render, cinematic concept art. - Exemple architecture en greybox :
Ancient overgrown stone temple ruins, dark weathered granite, vivid green moss, morning sunrays piercing through fog, volumetric god rays, hyper-detailed fantasy matte painting.
- Exemple véhicule sci-fi :
Étape 4 : Calibrer le curseur AI Strength
Le paramètre AI Strength régule l'équilibre entre la stricte adhésion aux formes du viewport et l'inventivité générative du modèle :
Faible intensité (0.2 - 0.4) <======================> Forte intensité (0.7 - 0.9)
Adhérence stricte au maillage Interprétation libre et décorative
Conserve les cubes et les arêtes bruts Ajoute végétation, câblages et ornements
Aspect parfois trop dépouillé ou rigide Risque de déformation de la perspective
- 0.20 – 0.35 (Verrouillage géométrique) : Adapté lorsque le modèle 3D est déjà détaillé et qu'il s'agit uniquement de tester des reflets réalistes et des ombres douces.
- 0.45 – 0.60 (Zone idéale pour le Greybox) : Recommandé pour les volumes primaires (cubes, cylindres). L'IA respecte la perspective et la ligne d'horizon, tout en générant des panneaux métalliques, de la végétation et de l'usure de matière.
- 0.70 – 0.85 (Exploration conceptuelle libre) : Utile lorsqu'on manipule des masses de glaise sommaires dans ZBrush pour découvrir des designs inattendus de créatures ou de paysages rocheux.
Étape 5 : Direction de scène interactive en temps réel
Sur une configuration à double écran ou avec fenêtres juxtaposées :
- Cadrage et navigation : Déplacez la caméra dans le logiciel 3D. Le rendu Krea ajuste la lumière et la perspective de manière parfaitement synchrone.
- Déplacement des lumières : Modifiez l'angle d'éclairage dans Blender Workbench pour observer le déplacement immédiat des ombres sur l'illustration.
- Sculpture en direct : Utilisez le pinceau
Movedans ZBrush pour modifier la silhouette d'un personnage ; Krea répercute instantanément ce nouvel équilibre anatomique. - Génération de variations (Seed) : Si un cadrage vous convient, cliquez sur le bouton Seed pour explorer d'autres déclinaisons de textures et de teintes sans modifier la géométrie 3D d'origine.
Finalisation pour la production : de l'ébauche temps réel au master 4K
Les visuels de 512px ou 1024px issus de Realtime constituent des études de recherche. Dès qu'un plan clé est validé, il convient de le finaliser :
- Capturer l'image clé : Cliquez sur le bouton Upscale ou sur l'icône de téléchargement sous le panneau de sortie de Krea Realtime.
- Ouvrir dans Krea Enhancer : Chargez l'image dans l'outil Krea Enhancer.
- Paramétrer l'amélioration :
- Facteur de grossissement (Upscale Factor) : Choisissez 2x ou 4x (pour atteindre des résolutions 2K ou 4K).
- Strength : Réglez entre 0.3 et 0.5 pour ajouter des micro-détails de surface (rayures, trames de tissus, pores) sans altérer la silhouette établie par la 3D.
- Resemblance : Maintenez un niveau élevé (0.60 à 0.75) afin d'assurer une fidélité rigoureuse avec les volumes du greybox initial.
- Clarity : Augmentez modérément pour rehausser la netteté des arêtes et des points d'impact lumineux.
- Exportation finale : Téléchargez l'illustration haute résolution pour les présentations de validation ou pour servir de base de peinture finale sous Photoshop.
Comparatif des flux de travail
| Critère | Rendu 3D hors ligne classique | IA Text-to-Image pure | Krea Realtime avec viewport 3D |
|---|---|---|---|
| Temps de réaction | Minutes à heures par image ; configuration lourde de shaders | 5 à 30 secondes par lot ; aucun processus interactif | Moins de 500 ms ; réponse instantanée aux mouvements de souris |
| Contrôle de perspective | Total, mais très coûteux pour tester de multiples angles | Très faible ; déformation fréquente des focales | Contrôle total du viewport 3D avec retour direct |
| Exploration des matières | Nécessite des arbres de nodes et le dépliage UV | Rapide, mais difficile à cibler sur des zones précises | Immédiate grâce au langage naturel du prompt |
| Intégration en production | Fournit des assets 3D exploitables, mais lente en amont | Image 2D isolée difficile à adapter en 3D | Relie directement le blockout 3D au concept final |
| Charge matérielle locale | Consommation massive de ressources GPU/CPU | Nécessite des cartes graphiques pourvues de forte VRAM | Inférence dans le cloud ; impact local négligeable |
Bonnes pratiques et pièges à éviter
Lors de l'intégration de Krea Realtime dans vos productions quotidiennes, veillez aux points suivants :
- Éliminer les éléments parasites du viewport : Ne laissez jamais affichés les modes fil de fer (PolyFrame dans ZBrush) ou les axes de manipulation dans Blender. L'IA les interprétera comme des structures métalliques ou des découpes de carrosserie réelles.
- Accélération matérielle : Assurez-vous que l'accélération matérielle est active dans votre navigateur afin de maintenir un taux de rafraîchissement élevé lors de la capture d'écran.
- Fluctuations de détails lors des rotations rapides : Lors de mouvements rapides de caméra, les micro-textures scintillent d'une image à l'autre. Utilisez le mouvement pour valider la silhouette et les lumières ; immobilisez la caméra une seconde pour stabiliser les détails avant d'enregistrer l'image.
En transformant le viewport 3D en contrôleur visuel direct pour Krea Realtime, les concept artists et modélisateurs conservent la maîtrise rigoureuse de la géométrie et de l'espace, tout en éliminant les temps morts du rendu traditionnel.