Une erreur dans la photographie computationnelle d’Apple qui déforme la réalité

Une future mariée déforme la réalité à cause d’une erreur de photographie computationnelle

• Une Britannique a découvert qu’une photo prise devant un miroir montrait des reflets qui ne correspondaient pas.
• Ce phénomène est dû à une erreur de la photographie computationnelle de l’iPhone, qui fait apparaître plusieurs reflets adoptant des poses différentes.
• La photo montre Tessa Coates en robe de mariée devant un miroir, avec son reflet dans plusieurs miroirs affichant à chaque fois une posture différente.

Erreur dans le pipeline de photographie computationnelle d’Apple

• L’appareil photo de l’iPhone ne reconnaît pas qu’il photographie un miroir et traite donc les différents reflets comme s’il s’agissait de personnes distinctes.
• Pendant que Coates bouge, plusieurs images différentes sont capturées, puis l’algorithme d’Apple les fusionne en sélectionnant la meilleure saturation, le meilleur contraste, le meilleur niveau de détail et l’image la moins floue.
• L’image composite finale est censée être l’interprétation la plus réaliste de cet instant, mais la présence du miroir pousse l’algorithme à juger optimaux des instants différents visibles dans chaque reflet, ce qui produit plusieurs versions différentes de Tessa.

Les limites de la photographie computationnelle et son usage sur les réseaux sociaux

• Ce type de résultat peut aujourd’hui être reproduit sur les iPhone récents ainsi que sur de nombreux smartphones, en raison des limites de la photographie computationnelle face aux miroirs.
• Les jeunes générations ont compris le phénomène et l’utilisent pour créer des images amusantes destinées aux réseaux sociaux.

L’avis de GN⁺

• Le point le plus important de cet article est l’exemple concret des limites de la photographie computationnelle et des distorsions du réel qu’elle peut provoquer.
• Le sujet est intéressant parce qu’il montre comment les progrès technologiques peuvent produire des résultats inattendus et sensibiliser aux erreurs surprenantes qui peuvent apparaître dans l’usage quotidien de la technologie.

[GN⁺]

Avis Hacker News

• L’article original peut être une meilleure source d’information

  • Un court résumé de l’article original a été cité, mais l’article original est susceptible de fournir de meilleures informations.

• Réserves des puristes envers la photographie computationnelle et satisfaction personnelle

  • Les puristes peuvent ne pas aimer la photographie computationnelle, mais un utilisateur apprécie que l’iPhone capture bien les images de nuit, en basse lumière et avec du mouvement.
  • Il a pu prendre des photos de nuit qu’il pensait impossibles avec un capteur physiquement petit.
  • Les photos ne sont peut-être pas 100 % fidèles à la réalité au pixel près, mais cet utilisateur n’y attache pas d’importance.
  • Il a utilisé des techniques comme l’empilement d’expositions HDR, le focus stacking et la fusion de plusieurs photos pour créer des images sans personnes ni voitures, l’objectif étant d’obtenir une image qui saisit le sujet plutôt qu’une représentation parfaite pixel par pixel.

• Expérience avec des photos prises au Google Pixel 7 et avec la photographie computationnelle

  • En prenant une photo de cerf avec un Google Pixel 7, en regardant les détails de près, tout avait un étrange rendu de peinture à l’huile.
  • La photographie computationnelle est à la fois très impressionnante et légèrement inquiétante.

• Expérience de transformation irréaliste des photos par les algorithmes des smartphones

  • Une personne a pris une photo parfaite de son fils avec un Galaxy 22 Ultra, mais l’algorithme a transformé la peau de son fils en texture de mur.
  • Il est possible de sauver les futures photos en passant au mode RAW, mais cela ne fonctionne qu’en mode appareil photo « pro » et c’est peu pratique.
  • Elle a finalement décidé d’installer et d’utiliser une application photo tierce.

• Passe-temps familial autour des photos « pano-Frankenstein »

  • Les membres de la famille s’amusent à prendre des panoramas de visages humains en changeant rapidement d’expression pour obtenir des résultats amusants.

• Possibilité d’utiliser les manipulations par IA comme moyen de défense juridique

  • Il est prévu que des exemples de manipulation par IA soient utilisés dans certaines défenses juridiques, en donnant à certains juges et jurés une marge de doute raisonnable.

• Méthode de prise de vue du Google Pixel et empilement HDR

  • Le Google Pixel commence à enregistrer des images dès l’ouverture de l’application appareil photo, et au moment de la prise de vue il peut utiliser les images précédentes pour produire un effet d’empilement HDR.

• Résultat de photographie computationnelle où les pattes d’un papillon ont disparu

  • Sur une photo en gros plan prise dans une serre à papillons, le résultat a supprimé les pattes du papillon et n’a laissé que les ailes.

• Perception de la réalité et impact de la photographie computationnelle

  • Réflexion sur ce qu’est la réalité et sur la manière dont la photographie computationnelle la capture.
  • Discussion sur la fidélité avec laquelle une caméra optique capte notre réalité, et sur la différence entre la réalité produite par la photographie computationnelle et notre perception.

• Fonction de prise de vue de l’application appareil photo de l’iPhone et sélection de la meilleure photo

  • Dans l’application appareil photo de l’iPhone, un appui long sur le bouton permet de prendre plusieurs photos, puis d’indiquer celle qu’il considère comme la « meilleure ».
  • Cette fonction repose sur la sélection des photos où les personnes ont les yeux ouverts.