Bloc
Étoiles/fond
- Ce qu’il fait
- Il sépare les étoiles du reste de l’image, pour que chacun soit étiré à part.
- Ce qu’on voit
- Deux images, l’image sans étoiles et les étoiles seules, qui arrivent dans Post comme un seul calque avec ses curseurs d’étoiles.
- Ce qui se règle
- Le bloc lui-même n’a aucun réglage ; dans Post, Étoiles rend les étoiles plus brillantes ou plus discrètes et Taille des étoiles les réduit ou les agrandit, et les valeurs par défaut les atténuent déjà un peu.
Le bloc Étoiles/fond sépare les étoiles du reste de l’image. Un réseau travaille sur l’image linéaire et rend deux images : l’image sans étoiles et les étoiles seules. Leur somme est l’image d’origine, pixel pour pixel. Post étire ensuite chacune à part et remet les étoiles dessus. Le bloc Étoiles de synthèse, placé après lui, redessine les étoiles détectées avec une seule forme : celle mesurée dans l’image, ou celle de l’instrument.
- Débruitage
- Couleur
- Étoiles/fond
- Post
- Rapport
1Ce qui entre, ce qui sort
Le bloc prend l’image linéaire produite par la chaîne jusqu’à Couleur : l’empilement dont le gradient de ciel est retiré, débruité, au blanc équilibré, son ciel ôté. Il écrit l’image sans étoiles, les étoiles seules et la carte des pixels couverts, avec les statistiques dont Post a besoin pour étirer les deux. Un aperçu avant et après montre les deux sur un même étirement.
Une image monochrome reste grise : l’image sans étoiles est la moyenne des trois canaux, répétée. Les pixels sans données restent tels quels.
2Le réseau
Le réseau est NAFNet,[1] un réseau de restauration d’image. Les réseaux utilisés pour le débruitage, la déconvolution et la séparation des étoiles sont livrés avec le programme, et le code qui les a entraînés est dans le dépôt. Le bloc n’a aucun réglage : le réseau est appliqué tel quel.
Il travaille sur l’image linéaire, chaque canal moins son fond et divisé par une unité de bruit. L’unité de bruit est le bruit des demi-empilements avant débruitage, passé par la matrice de couleur et moyenné sur les trois couleurs ; une image sans demi-empilements prend la dispersion de son propre ciel. Le réseau voit un étirement asinh fixe de cette image, défait exactement à la sortie.
L’image traverse le réseau par tuiles de 1024 pixels avec un recouvrement de 256, fondues par une fenêtre douce (une image plus petite qu’une tuile utilise des tuiles de 256 avec un recouvrement de 64). L’attention par canal du réseau fait sa moyenne sur une fenêtre de 256 pixels au lieu de toute la tuile, comme le fait le Test-time Local Converter,[2] si bien qu’une tuile plus grande voit ce que le réseau a appris. Sur une carte qui a peu de mémoire libre, les tuiles passent moins nombreuses à la fois, puis sont coupées plus petites.
Le réseau laisse une grille régulière, aux multiples de 1/16 de cycle par pixel. Là où elle ressort dans le spectre de l’image sans étoiles, elle est retirée par filtrage, et le nombre de pics retirés est noté. Le réseau tourne en quelques secondes sur une carte graphique et quelques minutes sur un processeur.
3Les deux images dans Post
Chaque image est étirée à part, puis les étoiles sont remises dessus.
- L’image sans étoiles reçoit l’étirement automatique de la Sortie avec les statistiques de l’image entière, pas les siennes : sans le grain des étoiles, elles l’étireraient bien plus fort, et recombinée elle ne ressemblerait pas à l’empilement.
- Les étoiles reçoivent le noir à 0, puisque leur fond est celui de l’image sans étoiles, et le blanc et le ton moyen de l’image entière. Le réglage Étoiles déplace le ton moyen.
Les étoiles étant à part, les étirer moins est la réduction d’étoiles : aucune réduction n’est nécessaire sur l’image recombinée. Trois autres réglages agissent sur les étoiles seules. Taille des étoiles les agrandit par une dilatation ronde en niveaux de gris ou les réduit par une érosion ronde, un pixel à la fois en alternant une croix et un carré, à travers un masque des étoiles quand elle réduit, pour que le grain entre les étoiles d’un champ dense ne soit pas érodé en filaments. Petites étoiles estompe les étoiles plus étroites qu’un certain nombre de fois l’étoile typique de l’image (leur largeur médiane à mi-hauteur) ; le support des étoiles est ouvert par reconstruction,[3] si bien que les étoiles plus larges restent exactement comme elles étaient. Couleur des étoiles règle leur saturation autour de la luminance.
La recombinaison est Écran, 1 − (1 − a)(1 − b) ; Densité linéaire − (ajout), a + b, écrêté ; ou Éclaircir, le plus grand des deux.
4Étoiles de synthèse
Le bloc Étoiles de synthèse vient après Étoiles/fond. Il lit les étoiles seules, détecte les étoiles à 8 unités de bruit au-dessus du ciel, et les redessine, chacune avec son flux, sa couleur et sa position, et une seule forme pour toutes. Il écrit une image d’étoiles seules dans la disposition du bloc Étoiles/fond, si bien que Post l’utilise de la même façon. Ajouter des étoiles ne peut que mettre de la lumière sur l’image sans étoiles, jamais en retirer. Deux méthodes donnent la forme.
Forme de l’image
La forme est la médiane des étoiles isolées et non saturées près du centre du champ (à moins de 35 % de la distance au coin), chacune centrée et normalisée, sur au moins 5 étoiles. Les étoiles les plus brillantes (les 0,2 % du haut) et les saturées, de pic supérieur à 60 % de la plus brillante, restent réelles, avec leur lumière et un bord très doux : leurs aigrettes ne sont pas à la portée de la forme. Dans Post, les étoiles dessinées remplacent les réelles, et le masque du calque dit où les réelles restent, le centre par exemple.
PSF instrument
Chaque étoile prend la forme théorique de l’instrument. Elle est calculée à partir de l’ouverture : le module au carré de la transformée de Fourier de la pupille,[4] avec l’obstruction centrale et l’araignée, pour chaque couleur, moyennée sur cinq longueurs d’onde de sa bande (590 à 680 nm pour le rouge, 500 à 570 pour le vert, 420 à 500 pour le bleu), puis floutée par la turbulence, un profil de Moffat[5] de la Largeur étoile. Les aigrettes sortent du calcul, et leur force suit le flux de chaque étoile. Les étoiles saturées prennent leur lumière du catalogue Gaia : le point zéro de l’image est ajusté sur les étoiles non saturées associées à Gaia, et les rapports de couleur sont ceux des 30 étoiles non saturées de couleur BP−RP la plus proche.
La forme ne dépend de la focale et de la taille du pixel que par leur rapport, l’échelle du champ. Elle vient du bloc Astrométrie, ou de la focale et de la taille du pixel connues pour la cible ; la taille du pixel est prise à 3,76 µm quand elle est inconnue. Sans échelle, le bloc s’arrête et demande le bloc Astrométrie.
5Réglages
| Réglage | Valeur | Plage | Ce qu’il fait |
|---|---|---|---|
| Étoiles | 0,6 | 0,2 – 5 | Force de l’étirement des étoiles : 1 est l’étirement de toute l’image ; moins les rend plus faibles et plus petites, plus les rend plus brillantes. |
| Taille des étoiles | −1 px | −3 – 3 px | En dessous de 0 les étoiles sont réduites de ce rayon (une érosion en niveaux de gris), au-dessus de 0 agrandies (une dilatation). |
| Petites étoiles | 0 | 0 – 2 | Les petites étoiles retirées : celles plus étroites que ce nombre de fois l’étoile typique de l’image. 0 les garde toutes. |
| Couleur des étoiles | 1,2 | 0 – 3 | Saturation des couleurs des étoiles autour de leur luminance, après leur étirement. |
| Mode de fusion | Écran | Écran, Densité linéaire − (ajout), Éclaircir | Comment les étoiles reviennent sur l’image sans étoiles. |
| Réglage | Valeur | Plage | Ce qu’il fait |
|---|---|---|---|
| Méthode | Forme de l’image | Forme de l’image, PSF instrument | Forme de l’image : les étoiles prennent la forme mesurée au centre du champ. PSF instrument : chaque étoile prend la forme théorique de l’instrument. |
| Type | Newton | Newton, Lunette, Schmidt-Cassegrain, Objectif photo | Le type d’optique : ce qui se trouve sur le trajet de la lumière. |
| Diamètre | 150 mm | plus de 10 – 2000 mm | Le diamètre de l’ouverture. |
| Obstruction | 33 % | 0 – 70 % | Le diamètre de l’obstruction centrale, en part de celui de l’ouverture. Utilisée par Newton et Schmidt-Cassegrain seulement. |
| Branches araignée | 4 | 0 – 6 | Les branches de l’araignée : 4 donnent une croix d’aigrettes. Utilisées par Newton seulement. |
| Largeur araignée | 1,5 mm | 0,1 – 20 mm | La largeur des branches : plus elles sont larges, plus les aigrettes sont brillantes. |
| Angle araignée | 0° | −180 – 180° | La direction des aigrettes sur l’image. |
| Largeur étoile | 2,5 px | 1 – 8 px | La largeur à mi-hauteur des étoiles dessinées : la turbulence ajoutée à la diffraction. |
6Limites, et ce qui a été essayé
- Des halos coupés par les tuiles. Avec des tuiles de la taille de l’entraînement, un grand halo était coupé le long d’une limite de tuile : la tuile qui tenait le cœur le retirait, sa voisine, qui ne voyait que du halo, le laissait. Les tuiles sont maintenant plus grandes que les plus grands halos rencontrés, 280 pixels autour de M45 (ticket 45).
- La grille propre au réseau. Il laisse un motif régulier dans l’image sans étoiles, retiré par filtrage là où il ressort.
- Une seule forme pour toutes les étoiles. Étoiles de synthèse donne à chaque étoile la même forme : une forme qui change dans le champ n’est pas reproduite ; avec Forme de l’image, c’est celle du centre.
- Les étoiles les plus brillantes et saturées restent réelles avec Forme de l’image. Leurs aigrettes et leurs halos ne sont pas redessinés.
- Étoiles saturées et catalogue. Avec PSF instrument, la lumière des étoiles saturées vient du catalogue Gaia ; sans lui, elles gardent le flux mesuré dans une ouverture.
- Aucune étoile trouvée, aucun changement. Sans étoile à mesurer, les étoiles sont laissées telles quelles et le bloc le dit.
Références
- Chen, L., Chu, X., Zhang, X. & Sun, J. 2022, Simple Baselines for Image Restoration (NAFNet), ECCV 2022. arXiv:2204.04676
- Chu, X., Chen, L., Chen, C. & Lu, X. 2022, Improving Image Restoration by Revisiting Global Information Aggregation (Test-time Local Converter), ECCV 2022. arXiv:2112.04491
- Vincent, L. 1993, Morphological grayscale reconstruction in image analysis: applications and efficient algorithms, IEEE Transactions on Image Processing 2, 176. doi:10.1109/83.217222
- Goodman, J. W. 2005, Introduction to Fourier Optics, 3e éd., Roberts & Company (l’image d’une source ponctuelle comme module au carré de la transformée de Fourier de la pupille).
- Moffat, A. F. J. 1969, A Theoretical Investigation of Focal Stellar Images in the Photographic Emulsion and Application to Photographic Photometry, A&A 3, 455. ADS:1969A&A.....3..455M