Summary

Visualisering Visual Tilpasning

Published: April 24, 2017
doi:

Summary

Denne artikkelen beskriver en ny fremgangsmåte for å simulere og studere tilpasning i det visuelle systemet.

Abstract

Mange teknikker har blitt utviklet for å visualisere hvordan et bilde vil vises til en person med en annen visuell følsomhet: for eksempel på grunn av optiske eller aldersforskjeller, eller en farge mangel eller sykdom. Denne protokollen beskriver en teknikk for å inkorporere sensoriske tilpasning inn i simuleringene. Protokollen er illustrert med et eksempel på fargesyn, men er generelt anvendbar for en hvilken som helst form for visuell tilpasning. Protokollen benytter en enkel modell for menneskelig fargesyn basert på standard og plausible antagelser om retinal og corticale mekanismer som koder for farge og hvordan disse justerer deres følsomhet for både middelfargen og utvalg av farger i den rådende stimulus. Forsterkningene til de mekanismer som er innrettet slik at deres middelresponsen under ett sammenheng er likestilt for en annen sammenheng. Simuleringene bidra til å avsløre de teoretiske grenser for tilpasning og generere "tilpasset bilder" som er optimalt tilpasset til en spesifikk Environment eller observatør. De gir også en felles metrisk for å utforske virkningen av tilpasning innenfor ulike observatører eller ulike miljøer. Karakterisere visuell persepsjon og ytelse med disse bildene gir et nytt verktøy for å studere funksjoner og konsekvenser av langsiktig tilpasning i syn eller andre sensoriske systemer.

Introduction

Hva kan verden se ut til andre, eller for oss selv som vi forandre? Svarene på disse spørsmålene er fundamentalt viktig for å forstå naturen og mekanismer for oppfatning og konsekvensene av både normale og kliniske variasjoner i sensorisk koding. Et bredt utvalg av teknikker og metoder har blitt utviklet for å simulere hvordan bildene kan vises til personer med ulike visuelle følsomhet. For eksempel, disse inkluderer simuleringer av de farger som kan diskrimineres ved hjelp av forskjellige typer farge mangler 1, 2, 3, 4, de romlige og kromatiske forskjeller som kan løses av spedbarn og eldre observatører 5, 6, 7, 8, 9 hvordan bilder vises i sidesynet <s opp class = "ekstern referanse"> 10, og konsekvensene av optiske feil eller sykdom 11, 12, 13, 14. De har også blitt anvendt for å visualisere den forskjells som er mulig for andre arter 15, 16, 17. Typisk omfatter slike simuleringer bruke målinger av følsomhets tap i forskjellige populasjoner for å filtrere et bilde og således redusere eller fjerne den struktur de har vanskeligheter med å se. For eksempel kan vanlige former for fargeblindhet reflektere et tap av en av de to fotoreseptorene er sensitive for middels eller lange bølgelengder, og bilder som er filtrert for å fjerne de signaler som vises vanligvis fri for "reddish-grønnaktig" fargetoner 1. Tilsvarende spedbarn har dårligere skarphet, og dermed bilder behandlet for deres romlige redusert følsomhet ha uklare f. "> 5 Disse teknikkene gir uvurderlig illustrasjoner av hva en person kan se at en annen kan ikke Men de gjør ikke -. og ofte er ikke ment å – skildre selve perseptuelle opplevelsen av observatøren, og i noen tilfeller kan uriktige opplysninger om mengde og typer av informasjon som er tilgjengelig for observatøren.

Denne artikkelen beskriver en ny teknikk utviklet for å simulere forskjeller i syns erfaring som innbefatter et grunnleggende trekk ved visuell koding – tilpasning 18, 19. Alle sensoriske og motoriske systemer justerer kontinuerlig til konteksten de er utsatt for. En stikkende lukt i et rom blekner raskt, mens visjon plass til hvor lyse eller dempe rommet er. Viktigere, oppstår disse justeringene for nesten enhver stimulus attributt, inkludert "high-level" oppfatninger som kjennetegner noens ansikt 20,class = "ekstern referanse"> 21 eller stemmen 22, 23, så vel som å kalibrere motoren kommandoene foretatt ved å bevege øynene eller strekker seg etter et objekt 24, 25. Faktisk er tilpasning trolig en viktig egenskap for nesten alle nevrale behandling. Denne artikkelen viser hvordan du kan innlemme disse tilpasningseffekter i simuleringer av utseendet på bildene ved utgangspunktet "tilpasse bildet" til å forutsi hvordan det ville se ut til et bestemt observatør under en bestemt tilstand av tilpasning 26, 27, 28, 29. Mange faktorer kan endre sensitivitet av en observatør, men tilpasningen kan ofte kompensere for viktige aspekter av disse endringer, slik at tapene følsomhet er mindre iøynefallende enn det som ville bli forutsagt uten forutsatt at systemet tilpasser seg. Omvendt, forditilpasning justerer følsomhet i henhold til gjeldende stimulus sammenheng, er disse justeringer er også viktig for å innlemme for å forutsi hvor mye oppfatning kan variere når miljøet varierer.

Følgende protokoll illustrerer teknikken ved å tilpasse fargeinnholdet av bilder. Fargesyn har den fordel at de innledende stadier av nevrale fargekoding er relativt godt forstått, så er de mønstre av tilpasning 30. Den faktiske mekanismer og justeringer er komplekse og varierte, men hoved konsekvensene av tilpasning kan fanges opp ved hjelp av en enkel og konvensjonell to-trinns modell (Figur 1a). I det første trinn blir fargesignaler innledningsvis kodet for av tre typer kjeglefotoreseptorer som er maksimalt følsom for korte, middels og lange bølgelengder (S, M og L kjegler). I det andre trinn blir signalene fra forskjellige kjegler kombineres i post-receptoral celler til å danne "farge-motstander" channels som mottar antagonistiske inngangssignaler fra de forskjellige kjegler (og således formidle "farge" informasjon), og "ikke-motstander" kanaler som summerer sammen de koniske innganger (således koding "lyshet" informasjon). Tilpasning skjer på begge trinn, og justeres til to forskjellige aspekter av farge – den midlere (i kjeglene) og varians (i post-receptoral kanaler) 30, 31. Målet med simuleringene er å bruke disse justeringene til modell mekanismer og deretter gjengi bildet fra sine tilpasset utganger.

Prosessen med å tilpasse bilder omfatter seks primærkomponenter. Disse er 1) å velge bilder; 2) å velge format for bilde spektra; 3) som avgrenser den endring i fargen av miljøet; 4) som definerer forandringen i følsomhet for observatøren; 5) ved hjelp av programmet for å lage de tilpassede bilder; og 6) ved hjelp av bildene for å vurdere konsekvensene av tilpasningen. Than følgende vurderer hver av disse trinnene i detalj. De grunnleggende modellen og mekanismen reaksjoner er illustrert i figur 1, mens figurene 2 – 5 viser eksempler på bildene gjengis med modellen.

Protocol

MERK: Protokollen illustrert bruker et program som gjør det mulig å velge bilder og deretter tilpasse dem ved hjelp av alternativene som er valgt av ulike rullegardinmenyene. 1. Velg bildet for å tilpasse Klikk på bildet og bla for filnavnet på bildet for å jobbe med. Observere det opprinnelige bildet i øvre venstre ruten. 2. Angi Stimulus og The Observer Klikk på "format" menyen for å velge hvordan å representere b…

Representative Results

Figurene 2 – 4 viser tilpasnings simuleringer for endringer i observatøren eller miljø. Figur 2 sammenligner spådd utseendet Cezannes Stilleben med epler for en yngre og eldre observatør som bare varierer i tettheten av objektivet pigment 28. Det opprinnelige bildet som ses gjennom den yngre øyet (figur 2a) ser ut mye gulere og dimmer gjennom den tettere pigmentert linse (figur 2b).</st…

Discussion

Den viste protokoll viser hvordan effekten av tilpasning til en endring i miljøet eller observatør kan fremstilles på bildene. Skjemaet denne fremstillingen foregår, vil avhenge av forutsetningene for modellen – for eksempel, hvordan farge er kodet, og hvor kode- mekanismer reagere og tilpasse seg. Dermed viktigste steget er å avgjøre om modellen for fargesyn – for eksempel hva egenskapene til de hypotetiske kanalene er, og hvordan de antas å tilpasse seg. Den andre viktige trinn er å sette passende parametere f…

Divulgazioni

The authors have nothing to disclose.

Acknowledgements

Støttet av National Institutes of Health (NIH) tilskudd EY-10834.

Materials

Computer
Images to adapt
Programming language (e.g. Visual Basic or Matlab)
Program for processing the images
Observer spectral sensitivities (for applications involving observer-specific adaptation)
Device emmission spectra (for device-dependent applications)

Riferimenti

  1. Vienot, F., Brettel, H., Ott, L., Ben M’Barek, A., Mollon, J. D. What do colour-blind people see?. Nature. 376, 127-128 (1995).
  2. Brettel, H., Vienot, F., Mollon, J. D. Computerized simulation of color appearance for dichromats. J Opt Soc Am A Opt Image Sci Vis. 14, 2647-2655 (1997).
  3. Flatla, D. R., Gutwin, C. So that’s what you see: building understanding with personalized simulations of colour vision deficiency. Proceedings of the 14th international ACM SIGACCESS conference on Computers and accessibility. , 167-174 (2012).
  4. Machado, G. M., Oliveira, M. M., Fernandes, L. A. A physiologically-based model for simulation of color vision deficiency. IEEE Trans. Vis. Comput. Graphics. 15, 1291-1298 (2009).
  5. Teller, D. Y. First glances: the vision of infants. the Friedenwald lecture. Invest. Ophthalmol. Vis. Sci. 38, 2183-2203 (1997).
  6. Ball, L. J., Pollack, R. H. Simulated aged performance on the embedded figures test. Exp. Aging Res. 15, 27-32 (1989).
  7. Sjostrom, K. P., Pollack, R. H. The effect of simulated receptor aging on two types of visual illusions. Psychon Sci. 23, 147-148 (1971).
  8. Lindsey, D. T., Brown, A. M. Color naming and the phototoxic effects of sunlight on the eye. Psychol Sci. 13, 506-512 (2002).
  9. Raj, A., Rosenholtz, R. What your design looks like to peripheral vision. Proceedings of the 7th Symposium on Applied Perception in Graphics and Visualization. , 88-92 (2010).
  10. Perry, J. S., Geisler, W. S. Gaze-contingent real-time simulation of arbitrary visual fields. International Society for Optics and Photonics: Electronic Imaging. , 57-69 (2002).
  11. Vinnikov, M., Allison, R. S., Swierad, D. Real-time simulation of visual defects with gaze-contingent display. Proceedings of the 2008 symposium on Eye tracking research. , 127-130 (2008).
  12. Hogervorst, M. A., van Damme, W. J. M. Visualizing visual impairments. Gerontechnol. 5, 208-221 (2006).
  13. Aguilar, C., Castet, E. Gaze-contingent simulation of retinopathy: some potential pitfalls and remedies. Vision res. 51, 997-1012 (2011).
  14. Rowe, M. P., Jacobs, G. H. Cone pigment polymorphism in New World monkeys: are all pigments created equal?. Visual neurosci. 21, 217-222 (2004).
  15. Rowe, M. P., Baube, C. L., Loew, E. R., Phillips, J. B. Optimal mechanisms for finding and selecting mates: how threespine stickleback (Gasterosteus aculeatus) should encode male throat colors. J. Comp. Physiol. A Neuroethol. Sens. Neural. Behav. Physiol. 190, 241-256 (2004).
  16. Melin, A. D., Kline, D. W., Hickey, C. M., Fedigan, L. M. Food search through the eyes of a monkey: a functional substitution approach for assessing the ecology of primate color vision. Vision Res. 86, 87-96 (2013).
  17. Webster, M. A. Adaptation and visual coding. J vision. 11 (5), 1-23 (2011).
  18. Webster, M. A. Visual adaptation. Annu Rev Vision Sci. 1, 547-567 (2015).
  19. Webster, M. A., Kaping, D., Mizokami, Y., Duhamel, P. Adaptation to natural facial categories. Nature. 428, 557-561 (2004).
  20. Webster, M. A., MacLeod, D. I. A. Visual adaptation and face perception. Philos. Trans. R. Soc. Lond., B, Biol. Sci. 366, 1702-1725 (2011).
  21. Schweinberger, S. R., et al. Auditory adaptation in voice perception. Curr Biol. 18, 684-688 (2008).
  22. Yovel, G., Belin, P. A unified coding strategy for processing faces and voices. Trends cognit sci. 17, 263-271 (2013).
  23. Shadmehr, R., Smith, M. A., Krakauer, J. W. Error correction, sensory prediction, and adaptation in motor control. Annu rev neurosci. 33, 89-108 (2010).
  24. Wolpert, D. M., Diedrichsen, J., Flanagan, J. R. Principles of sensorimotor learning. Nat rev Neurosci. 12, 739-751 (2011).
  25. McDermott, K., Juricevic, I., Bebis, G., Webster, M. A., Rogowitz, B. E., Pappas, T. N. Human Vision and Electronic Imaging. SPIE. 68060, (2008).
  26. Juricevic, I., Webster, M. A. Variations in normal color vision. V. Simulations of adaptation to natural color environments. Visual neurosci. 26, 133-145 (2009).
  27. Webster, M. A., Juricevic, I., McDermott, K. C. Simulations of adaptation and color appearance in observers with varying spectral sensitivity. Ophthalmic Physiol Opt. 30, 602-610 (2010).
  28. Webster, M. A. Probing the functions of contextual modulation by adapting images rather than observers. Vision res. , (2014).
  29. Webster, M. A. Human colour perception and its adaptation. Network: Computation in Neural Systems. 7, 587-634 (1996).
  30. Webster, M. A., Mollon, J. D. Colour constancy influenced by contrast adaptation. Nature. 373, 694-698 (1995).
  31. Brainard, D. H., Stockman, A., Bass, M. . OSA Handbook of Optics. , 10-11 (2010).
  32. Maloney, L. T. Evaluation of linear models of surface spectral reflectance with small numbers of parameters. J Opt Soc Am A Opt Image Sci Vis. 3, 1673-1683 (1986).
  33. Mizokami, Y., Webster, M. A. Are Gaussian spectra a viable perceptual assumption in color appearance?. J Opt Soc Am A Opt Image Sci Vis. 29, A10-A18 (2012).
  34. Chichilnisky, E. J., Wandell, B. A. Photoreceptor sensitivity changes explain color appearance shifts induced by large uniform backgrounds in dichoptic matching. Vision res. 35, 239-254 (1995).
  35. Boehm, A. E., MacLeod, D. I., Bosten, J. M. Compensation for red-green contrast loss in anomalous trichromats. J vision. 14, (2014).
  36. Regan, B. C., Mollon, J. D., Cavonius, C. R. . Colour Vision Deficiencies. Vol. XIII. , 261-270 (1997).
  37. Carandini, M., Heeger, D. J. Normalization as a canonical neural computation. Nature reviews. Neurosci. 13, 51-62 (2011).
  38. Rieke, F., Rudd, M. E. The challenges natural images pose for visual adaptation. Neuron. 64, 605-616 (2009).
  39. Hardy, J. L., Frederick, C. M., Kay, P., Werner, J. S. Color naming, lens aging, and grue: what the optics of the aging eye can teach us about color language. Psychol sci. 16, 321-327 (2005).
  40. Webster, M. A., Mollon, J. D. Adaptation and the color statistics of natural images. Vision res. 37, 3283-3298 (1997).
  41. Webster, M. A., Mizokami, Y., Webster, S. M. Seasonal variations in the color statistics of natural images. Network. 18, 213-233 (2007).
  42. Sagi, D. Perceptual learning in Vision Research. Vision res. , (2011).
  43. Lu, Z. L., Yu, C., Watanabe, T., Sagi, D., Levi, D. Perceptual learning: functions, mechanisms, and applications. Vision res. 50, 365-367 (2009).
  44. Bavelier, D., Green, C. S., Pouget, A., Schrater, P. Brain plasticity through the life span: learning to learn and action video games. Annu rev neurosci. 35, 391-416 (2012).
  45. Kompaniez, E., Abbey, C. K., Boone, J. M., Webster, M. A. Adaptation aftereffects in the perception of radiological images. PloS one. 8, e76175 (2013).
  46. Ross, H. . Behavior and Perception in Strange Environments. , (1974).
  47. Armann, R., Jeffery, L., Calder, A. J., Rhodes, G. Race-specific norms for coding face identity and a functional role for norms. J vision. 11, 9 (2011).
  48. Oruc, I., Barton, J. J. Adaptation improves discrimination of face identity. Proc. R. Soc. A. 278, 2591-2597 (2011).
  49. Kording, K. P., Tenenbaum, J. B., Shadmehr, R. The dynamics of memory as a consequence of optimal adaptation to a changing body. Nature neurosci. 10, 779-786 (2007).
  50. Neitz, J., Carroll, J., Yamauchi, Y., Neitz, M., Williams, D. R. Color perception is mediated by a plastic neural mechanism that is adjustable in adults. Neuron. 35, 783-792 (2002).
  51. Delahunt, P. B., Webster, M. A., Ma, L., Werner, J. S. Long-term renormalization of chromatic mechanisms following cataract surgery. Visual neurosci. 21, 301-307 (2004).
  52. Bao, M., Engel, S. A. Distinct mechanism for long-term contrast adaptation. Proc Natl Acad Sci USA. 109, 5898-5903 (2012).
  53. Kwon, M., Legge, G. E., Fang, F., Cheong, A. M., He, S. Adaptive changes in visual cortex following prolonged contrast reduction. J vision. 9 (2), 1-16 (2009).
  54. Webster, M. A., Elliott, A., Fairchild, M. D., Franklin, A. . Handbook of Color Psychology. , 197-215 (2015).

Play Video

Citazione di questo articolo
Webster, M. A., Tregillus, K. E. Visualizing Visual Adaptation. J. Vis. Exp. (122), e54038, doi:10.3791/54038 (2017).

View Video