Une nouvelle méthode pour améliorer la résolution des images planétaires ?

[Nebulium 1 436]

Bonjour à toutes et à tous

 

Sur l'IPOL
https://www.ipol.im/
cet article vient de sortir:
https://www.ipol.im/pub/art/2023/460/

 

En voici le résumé en traduction automatique :

Aujourd'hui, les appareils photo des smartphones prennent des photos brutes en rafale dès que l'on appuie sur le déclencheur. Ces photos sont ensuite fusionnées pour produire une image unique de meilleure qualité. Cet article détaille la mise en œuvre de la méthode "Handheld Multi-Frame Super-Resolution algorithm" de Wronski et al. (utilisée dans l'appareil photo Google Pixel 3), qui effectue simultanément un démosaïquage et un débruitage de super-résolution multi-images à partir d'une rafale d'images. Les tremblements de la main pendant l'exposition provoquent des mouvements sous-pixels, qui, combinés au réseau de filtres colorés de Bayer du capteur, donnent une collection de photographies brutes aliasées et décalées de la même scène. L'algorithme aligne et fusionne efficacement ces signaux en un seul signal haute résolution en tirant parti du repliement pour reconstruire les hautes fréquences du signal jusqu'au taux de Nyquist du capteur. Cette approche permet d'obtenir des images numériques zoomées jusqu'à un facteur 2, qui est la limite naturellement fixée par l'intégration des pixels du capteur. Nous présentons une description approfondie de cet algorithme, ainsi que de nombreux détails d'implémentation que nous avons trouvés pour reproduire les résultats de l'article original, dont le code n'est pas accessible au public.

 

Traduit avec www.DeepL.com/Translator (version gratuite)

 

Bien que cette méthode soit destinée à compenser les tremblements des prises de vue à main levée, il m'a paru intéressant de l'évaluer en astrophoto planétaire.
Le traitement "en ligne" se fait sur des lots d'images brutes en DNG, un convertisseur depuis d'autres formats est disponible:
https://helpx.adobe.com/camera-raw/using/adobe-dng-converter.html

Une première évaluation directe est possible pour la Lune avec un APN.

Voici une image trouvée en p 12 des archives qu'il est préférable de télécharger directement :

 

Experiment #656292.

2023-06-01 08:14:19 UTC

(done in 110.197 s)

 

 

Pour les planètes on peut envisager un certain niveau de pré-traitement en convertissant ensuite les TIF en DNG :

https://www.converter365.com/image-converter/tiff/tiff-to-dng

 

Qui s'y colle ?
Merci 

 

Modifié 16 juillet 2023 par Nebulium

[ValereL 15 455]

Coucou Jean,

ça fait un bon moment que je t'ai vu par ici !

J'espère que tout roule pour toi !

J'ai pensé à toi y'a pas longtemps, j'utilise toujours le marque-page qui présente nos productions de l'époque avec Stéphane Guisard !

Salon du livre à Paris de 2008 il me semble...

 

 

 

[ValereL 15 455]

Pour le reste, je passe la main. 

[deep impact 6 260]

Il y a 2 heures, Nebulium a dit :

Qui s'y colle ?

 

Super...mais tu veut que l'on fasse quoi?

Tu veut quoi avec ton cliché?

Le traiter?

 

[Daniel B 3 972]

Je ne connais pas cet algorithme mais d'après le texte il semble combiner le Bayer drizzle (pour le démosaïquage ou debayering) et le drizzle tout court (pour le suréchantillonnage.). AutoStakkert!3 peut combiner ces opérations depuis longtemps. Donc quelle est la nouveauté?

 

Daniel

[Nebulium 1 436]

Le 16/07/2023 à 18:12, ValereL a dit :

ça fait un bon moment que je t'ai vu par ici !

J'espère que tout roule pour toi !

 

Hello Valère

A cause du poids des décennies, ça roule commen ça peut, avec tout ce qui va et ne va plus avec... 

 

Le 16/07/2023 à 18:12, ValereL a dit :

Salon du livre à Paris de 2008 il me semble..

 

Oui, je l'ai aussi, envoyé par la charmante personne qui tenait le stand de ? et qui avait beaucoup apprécié la vidéo "L'étoile et les trois rois" je crois me souvenir, au point de la faire tourner en boucle sur le stand 

 

J'ai retrouvé la page de présentation .

et un lien de téléchargement de la version "Export" en MP4

 

L'étoile qui apparaît avec la musique est notre Soleil

 

 

 

__________________________________________________________________

 

Le 16/07/2023 à 19:19, deep impact a dit :

Super...mais tu veut que l'on fasse quoi?

 

Bonjour @deep impact

Par exemple, tester la méthode sur tes prises, j'y reviens plus loin

____________________________________________________________

 

Le 16/07/2023 à 19:45, Daniel B a dit :

Donc quelle est la nouveauté?

 

Bonjour Daniel

Peut-être tout simplement la parution sur l'IPOL de la possible redécouverte d'une méthode  par des chercheurs ignorant tout des logiciels d'astronomie.

 

J'ai profité de l'occasion pour me remettre à la chose, avec un smartphone à 200€ et un ETX 70 (D = 70 mm, F=350mm) , une véritable affaire à l'époque  : 60€ chez L..l   plus maniable que mon Dobs de 15"

avec une cible en plein jour dont voici une prise unitaire en afocal au grossissement x87,5 (oculaire 4mm) :

 

 

 

Et une vidéo (70 images à 30 ips) des conditions de prise de vue  détourée, redimensionnée et "GiFée " avec VirtualDub :

 

 

J'utilise l'appli Android fort intéressante et  gratuite "Open Camera" qui permet de sortir du smartphone des DNG en pleine résolution pour essayer de tirer le maximum de jus du mode "Démo", mais la conversion  IPOL en JPG de l'image résultante est trop simpliste, l'affaire est loin d'être gagnée !

Modifié 23 juillet 2023 par Nebulium

[sebseacteam 12 200]

Tu peux faire tourner le programme Python sur windows ?

[polo0258 38 562]

 salut jean !

 polo

[Nebulium 1 436]

Le 19/07/2023 à 23:38, sebseacteam a dit :

Tu peux faire tourner le programme Python sur windows ?

 

Hello Seb

J'ai su faire ça dans le temps...

Dans l'immédiat, je rélucte à my remettre.

Dans cette évaluation rapide on line, je recherche l'amélioration de la résolution plus que la qualité du rendu . Sur l'IPOL les hautes lumières en fin de traitement sont massacrées comme d'ailleurs le font la plupart des logiciels de visualisation d'images Windows alimentés en RAW, qui utilisent très probablement la DLL "dcraw" alors que ceux du phone en montrent par défaut un rendu correct où les DNG et les JPG sont visuellement identiques :

 

 

De gauche à droite :

- Capture de l'écran du phone affichant le RAW

- Le JPG associé par  Open Camera dans le phone, réglages de conversion par défaut

- Le RAW  affiché  dans le PC avec IrfanView, rendu similaire à l'IPOL

 

Je vais de nouveau jouer avec l'IPOL, traitement d'une rafale de 100 prises.

 

A suivre...

 

 

 

 

 

 

Modifié 23 juillet 2023 par Nebulium

[Nebulium 1 436]

Il y a 7 heures, polo0258 a dit :

polo

Hello Paul

Merci pour ta visite

 

[Nebulium 1 436]

Hello

Je continue mes investigations :

Ci-dessous le rendu de base  par défaut de l'une des unitaires DNG, à gauche avec  IrfanView  (pratiquement identique aux sorties IPOL ) et à droite  avec  FitsWork (après téléchargement de la DLL "dcrawfw1477"  proposée sur le site.)

 

 

J'ai passé une rafale de100 prises dans la démo IPOL, paramètres par défaut, réduction des résultats en 25% pour un affichage réaliste :

 

 

De gauche à droite : 1 2 3

1 :  Prise unitaire, visualisée avec IrfanView

2 :  Image de référence "input_0", calculée en premier, je n'ai pas trouvé comment  ???

3 :  Image finale "output" , calculée je pense avec la séquence d'algorithmes indiquée dans l'article

 

Au premier coup d'oeil, au problème de l'écrasement des hautes lumières près, la 2 me semble la meilleure (de peu...)

 

Mesure des FFT2D :

 

 

Reste à faire un essai en réel sur la Lune, avec l'entraînement Alt azimutal de l'ETX, le principal problème restant  l'adaptateur idoine,  voir :

 

De mon côté, je vais tester un bidouillage personnel à partir de mes  gadjets, photo à venir si valable

Modifié 23 juillet 2023 par Nebulium

[Nebulium 1 436]

Hello

 

 

Le problème avec cet adaptateur pas cher :

 

 

est que le support du phone en presse les boutons en haut à droite, rédhibitoire !

 

J'ai finalement utilisé une barette porte-flash pour déporter les pinces ;

 

 

Ca donne aussi un peu plus de liberté pour le réglage, qui reste toujours bien pénible !

 

 

[Nebulium 1 436]

Hello

Je m'apprête à conclure sur l'usage astronomique de cette (nouvelle ?) méthode.

Les circonstances atmosphériques de ces derniers jours ne m'ayant  pas permis de faire un test sur la Lune, j'ai peaufiné les essais statiques sur cette même cible.

La turbulence était plus faible, le soleil était voilé et j'ai sous-exposé d'un petit diaphragme pour évaluer le comportement des "dcraw.dll".

Les images publiées ci-dessous à partir des prises DNG n'ont subi que rotation et redimensionnement :

 

 

De gauche à droite 1  2  3  4 :

1. Traitement par FitsWork (dcrawfw.dll) d'une unitaire *

2. Traitement par IrfanView (dcraw.dll) de la même unitaire

3. Image de référence de la méthode testée (Zip de 100 prises)

4. Image de sortie de la méthode testée (Zip de 100 prises)

 

Je crois que je vais arrêter là mes investigations...

----------------------------------------------------

* Pour info, l'EXIF de l'unitaire :

Filename - IMG_20230724_191500.dng
ImageWidth - 4000
ImageLength - 3000
BitsPerSample - 
Compression - 1 (None)
PhotometricInterpretation - -32733
ImageDescription - 
Make - Xiaomi
Model - 2201117SY
StripOffset - 696
Orientation - Bottom right
SamplesPerPixel - 1
RowsPerStrip - 1
StripByteCount - 12696
XResolution - 72
YResolution - 72
PlanarConfiguration - 1
ResolutionUnit - Inch
Software - Redmi/fleur_eea/fleur:13/TP1A.220624.014/V14.0.4.0.TKEEUXM:user/release-keys
DateTime - 2023:07:24 19:15:00
CFARepeatPatternDim - 2
CFAPattern - 
Copyright - 
ExposureTime - 1/100.1 seconds
FNumber - 1.89
GPS-IFD-Offset - 24828
ISOSpeedRatings - 52
DateTimeOriginal - 2023:07:24 19:15:00
FocalLength - 5.89 mm

GPS information: - 
GPSVersionID - 2.3.0.0
GPSLatitudeRef - N
GPSLatitude - 43  25  6.1 (43.418361)
GPSLongitudeRef - E
GPSLongitude - 6  47  53.45 (6.798181)
GPSTimeStamp - 17  15  0
GPSDateStamp - 2023:07:24
 

Modifié 26 juillet 2023 par Nebulium