Il y a déjà 
une image publiée, qui sert pour la calibration du télescope. Elle est à côté d'une image de la même zone de l'espace fournie par un autre télescope spatial, Spitzer, qui fonctionnait dans la même gamme de spectre lumineux (les infrarouges) et vent d'être mis hors service.
D'ailleurs oui, le JWST fera des images dans la gemmes infrarouge. Donc ces images seront re-colorisées (ou pas nécessairement), ce ne seront pas des vraies images de ce qu'on pourrait voir avec nos yeux.