Draw This First
Di cosa parla
L'idea concreta è invertire il modo di costruire uno schizzo: invece di tracciare le linee una dopo l'altra, il sistema crea una mappa bidimensionale che indica l'ordine in cui i punti dell'immagine vengono disegnati. Partendo da un'immagine ottenuta con un modello già addestrato, il metodo impara a prevedere questa mappa, isolare e segmentare le linee, trasformare i segmenti in polilinee e ordinarle secondo la mappa per ottenere un disegno vettoriale che rispetta un ordine di tratto; può lavorare da testo o da immagine e seguire istruzioni testuali sull'ordine.
Cosa permette di osservare
Consente di esplorare se è più efficace controllare l'ordine di disegno tramite una mappa visiva anziché specificare direttamente la sequenza di tratti, e come far sì che un modello segua istruzioni testuali sull'ordine di esecuzione.
Dalla fonte
We invert the typical formulation of sketch generation: instead of drawing strokes in order, we predict a 2D field that defines the order in which strokes are drawn. We use a pretrained latent flow-matching transformer to supply the image prior to predict an intermediate representation, while training the VAE's decoder to predict the order field, stroke mask, and stroke segmentation. We vectorize the predicted segmentation into polylines and sort them by the field, producing an ordered vector sketch. Our model can predict an ordered vector sketch from a text description or derender an image into ordered vectors; for either, it follows text instructions specifying the order of drawing.