安部川直稔
NTT コミュニケーション科学基礎研究所
DOI:10.14931/bsd.9962 原稿受付日:2021年9月3日 原稿完成日:2021年X月X日
担当編集委員:我妻広明(九州工業大学大学院 生命体工学研究科 人間知能システム工学専攻)
英:hand-eye coordination 独:Hand-Auge-Koordination 仏:coordination main-œil
手と目の協調運動とは、脳計算処理を指す言葉として、二通りの使われ方をすることが多い。一つ目は、運動目標に向かう腕運動が計画・実行される過程において、目と手の動きが時空間的に協調する仕組みを指すものである。目と手が協調して動くことは、必要な視覚情報を、適切なタイミングで取得することにつながり、運動課題の遂行に必要不可欠な機能と考えられている。本稿では、この運動協調動作を中心に概説する。二つ目は、網膜に入力される視覚情報から、腕を動かす運動指令生成に至る変換過程、つまり座標変換処理を指すものである。
日常的動作における目と手の運動計測
スポーツ、車の運転、お茶を淹れるなど、日常行為における目と手の動きを計測する試みが、1990年代から現在に至るまで、広く行われてきた(たとえば総説[1; 2])[1][2]。目の動かし方は、運動課題の種類に応じて大きく異なるものの、課題にとって重要な場所や物体に向かう視線移動、およびそれらに対する一定時間の固視などが頻繁に観察される。運動行為・課題を構成する複数の腕運動要素に着目した際、各腕運動にとって重要な視覚情報を受容するために、眼球運動が、腕運動に先行して生ずる。このような時空間的な目と手の協調運動は、各腕運動要素を正確に行う上で重要であり、結果として運動課題の適切な遂行に寄与すると考えられている。
時間的協調関係
視覚目標に向かう腕到達運動と眼球運動(主にサッカード)を同時に計測し、両運動間の時間的な協調関係を精緻に観察する実験が、1970年後半より数多く行われてきた。一般的にサッカードは、腕運動に50~100 ms程度先行して開始し、腕運動加速度が上昇し下降する際のピーク時刻と概ね合致して終了することが知られる[3][3].眼球運動が腕運動に先行することは、目標物を中心視野で捉え、より正確な視覚情報に基づいて腕運動を計画・実行することにつながる。
腕運動と眼球運動の開始時刻(反応時間)は試行毎にばらつくものの、多くの場合、その間に正の相関関係が観察されることが知られる(図1)。この相関は、 以下2点、いずれの解釈でも説明可能であるが、(2)の協調機構の存在を示唆する知見が、多く示されてきた。
- 「目の運動制御系」と「手の運動制御系」が、共通の視覚入力を同時に受けた結果であり、協調関係を築くための両運動系間の信号のやり取りは考慮しない(図2、目標表現の共有モデル)
- 「目の運動制御系」と「手の運動制御系」が、処理過程の途中において信号を相互にやりとりし、積極的に協調関係を築いている(図2、両運動系の相互作用モデル)
たとえば、古くはFiskとGoodaleら[4][4]は、右視野あるいは左視野に提示される目標物への腕運動および眼球運動の反応時間を計測した。一般的に、使用する腕の反対側空間に目標が呈示される場合、同側空間に呈示される場合と比較して、腕運動反応時間は遅くなることが知られる[脚注 1]。FiskとGoodaleらは、腕運動と同時に生成される眼球運動の反応時間が、腕運動反応時間と同様に、同側条件時と比較して反対側条件において遅くなることを示した。つまり、腕運動生成に固有の処理時間差(同側vs.反対側)が、同時に処理される眼球運動生成にも影響を与えることが明らかになった。同様に、より近年の研究[5][5]においては、腕運動学習の前後で腕運動反応時間に差が生ずることをうまく利用し、同時に行う眼球運動の反応時間も、腕運動学習の前後で腕運動と同じく変化することを示した。一方、眼球運動の生成処理を薬理的に阻害した際に、同時に行われる腕運動への影響も調べられた[6][6]。サッカード生成に強く関与することが知られるサル頭頂間溝外側壁領域(Lateral intraparietal: LIP)をムシモールで不活性化してサッカード反応時間を遅らせた場合、眼球運動を伴った腕運動を行う場合のみ、腕運動反応時間の遅延が観察された[6][6]。以上の行動実験や、計算モデル[7][7]の知見は、腕運動と眼球運動、両処理系が相互に信号をやり取りし、積極的な協調関係が築かれた結果として、両運動反応時間の関係性が観察されるとする考え方を支持している。
一方、両運動生成の処理系は独立であり、それほど強い協調関係は存在しないとする主張もしばしば展開される(図2、目標表現の共有モデル)。実際、両運動反応時間の相関値は研究ごとに大きく変動し、ほとんど相関が観察されない場合もある[8][8]。また、相対的な時間関係についても、腕運動反応時間を筋電で計測した場合、眼球運動反応時間とほぼ変わらない[8][8]、あるいは先行する[9][9]という報告も存在する。
これら知見を踏まえると、目と手の運動発現の時間関係、協調関係は、固定的に決定されたものではなく、課題依存・状況依存で変わりうるものと考えるべきであろう。実際、目と手の反応時間相関値は、様々な運動課題間で大きく変動することが報告されている[10][10]。また、Simsら[11][11]は、目と手の反応時間の相対的な関係性が課題要求で変化し、かつその変化が最適規範の枠組で説明できることを示した。このように、目と手の協調関係は積極的に構築されながらも、その関係性は課題に依存して柔軟に変容しうると考えられるようになってきた[12][12]。
- ↑ 「使用する腕の反対側空間に目標が呈示される」とは、たとえば右腕を動かす場合、左視野に目標呈示される状況を指す。この場合、目標情報は右半球視覚野に送られる。右腕運動は主に左半球運動領野が関係するため、右半球視覚野で処理される視覚情報を左半球へと送る必要がある。その結果、目標呈示が、腕の同側か反対側かによって反応時間に差が生ずる。
目と手の運動制御系の相互作用
目と手の協調関係を支える両運動処理系の相互作用において、いかなる情報が、どのように影響を与え合うのであろうか?
腕運動が眼制御系に与える影響を調べるために、眼球運動に腕運動が付随する場合と付随しない場合との間で、視覚目標へのサッカード反応時間が比較された。その結果、腕運動が付随する場合、サッカード反応時間が早まること[13][13]、サッカードのピーク速度が上昇し、サッカードの運動時間が短くなること[14][14]が示された。これら知見は、腕運動が眼球運動制御系に与える作用は、固定されたサッカードプログラムの開始時刻を変化させるだけでなく、サッカード生成のプログラム自体に変容を与えることを示唆する。
では、腕運動制御系のいかなる情報が眼球運動制御系に影響を与えたのであろうか。たとえば、腕運動の有無に応じて、運動目標の表現様式が変化したと解釈することもできるし、腕運動指令が直接的に眼制御系に影響を与えた可能性も考えられる。このような観点のもと、Ariffら[15][15]は、視覚フィードバックのない状態で、腕運動遂行中の手先位置を眼で追従する課題を考案した。この場合の眼球運動は、滑らかな追従運動に加えて、補正サッカードが頻繁に観察される。Ariffらは、各補正サッカードの終端位置が、その時刻から約150ms先の時点での腕位置と合致していることを見出した。つまりこの結果は、腕がこれから通過するであろう位置に向かって、予測的な眼球運動が生じていると解釈できる。更に、NanayakkaraとShadmehr[16][16]は、力摂動によって変位する腕位置への眼球運動課題を行った結果、予測的なサッカードが腕ダイナミクスを考慮して生成される点を示した。これら知見は、腕運動制御系のフォワードモデルによって連続的に推定される予測的腕位置情報が、サッカード生成に利用されていることを示唆する。
また、NeggersとBekkering[17][18][17; 18]は、腕運動から眼制御系に与える影響を、これまでとは異なる課題で検討した。彼らの実験課題では、運動目標を注視しながら腕運動を行っている最中に、新たな場所に呈示される視覚目標への眼球運動が求められた。腕運動については、初期目標位置への運動を継続する。その結果、サッカード反応時間は非常に遅延し、多くの試行において腕運動が終了するまで新たな眼球運動は生成されないことが明らかになった。目が腕運動目標へ固定されるという観点から、この現象は「アンカー効果」と呼ばれる。
ここまでの知見をまとめると、眼制御系は腕制御系と密接に関連し、腕の目標位置、推定最終位置、オンライン推定腕位置といった情報を基に、眼球運動生成・抑制の調節を行っていると考えられる。特に腕運動制御の内部モデル(フォワードモデル)を用いた予測的な眼球運動生成は、腕運動にとって有益な情報を取得することにつながる機能的な眼と腕の協調関係と解釈される。
一方、眼球運動が腕制御系に与える影響についても、これまで検討されてきた。眼制御系は運動指令生成に加えて、視覚情報取得という側面を持ちうる。それゆえ、眼から腕への影響を検討する際には、その影響が視覚情報変化(網膜信号、retinal signals)に由来するのか、あるいはそれ以外の眼制御系に関連した信号(網膜外信号、extra-retinal signals)に由来するのか、分けて議論する必要がある。網膜信号が腕運動に影響を与えることは必然であり、視覚目標を注視することで腕運動の正確性は向上する(たとえば、文献[19][19])。対して、網膜外信号が腕運動に寄与する可能性については、眼と腕の運動最終位置が相関するという知見から支持されてきた[20][21][22][23][24][20–24]。また、Dunker錯視、Müller-Lyer錯視といった錯視刺激を利用して眼球運動の最終位置を変化させた場合、腕運動の到達位置は、錯視刺激による直接的な影響から推定される場所よりも、目の最終位置(視線)に近くなることが報告されている[25][26][25; 26]。これらの結果は、眼の最終位置が腕運動の目標表現として利用されている点を示唆する。また、眼の最終位置だけでなく、眼球運動の大きさが、同時に行う腕運動の最終位置あるいは初期加速度に影響を与えることも報告されている[27][28][27; 28]。以上の知見は、眼球位置情報・眼球運動情報といった網膜外信号が、腕運動制御系に利用され、眼と腕が共通の場所に向かうように協調関係が築かれていることを示唆する。一方、網膜外信号(特に自己受容感覚に基づく目の位置情報)が腕運動に与える影響は非常に小さく、その機能的な貢献度については古くより議論の対象となっている(たとえば文献[19][19])。加えて、上述の錯視刺激を用いた実験などでは、視覚刺激が直接腕運動に与える影響を考慮しきれていない部分もあり(たとえば、Dunker錯視に利用される背景視覚運動刺激が直接的に腕運動に与える影響など[29][29])、実験的な問題点も残されている。
神経基盤
目と手の協調運動を支える神経基盤として、後頭頂葉(Posterior parietal Cortex :PPC)と小脳の関与を示す知見がいくつか報告されてきた。
後頭頂葉
サルでは、ニューロン活動が示す性質から、後頭頂葉を、腕運動に強く関与するParietal reach region(PRR)と、眼球運動(主にサッカード)に強く関与するLateral intraparietal area(LIP)と分けて考えることができる。ムシモールによりPRRを不活性化した場合、両運動の反応時間相関が弱まることから、目と腕の時間的協調関係にPRRが関与していることが示唆された[30][30]。一方、神経の同期活動に着目した解析により、LIPも両運動の時間的協調関係に関与することが示されている[31][32][31; 32]。また、より近年の研究によれば、PRRとLIPの連関が、腕運動中に生ずる目への強い抑制効果(前述のgaze-anchoring)と関連することが示唆されている[33][33]。また、健常人参加者の後頭頂葉への経頭蓋磁気刺激(TMS)の印加により、目と腕の空間的協調関係が崩れることも報告されている[34][34]。
小脳
従来、小脳は、目と手の協調動作に限らず、関節や効果器間など、多様な協調動作に関与することが多く示されてきた(たとえば文献[35][35])。Miallら[36][37][38][36–38]は、不規則に動く視覚目標を、目と手を用いて連続的に追従するトラッキング課題に着目し、fMRI計測の結果、目と腕の協調関係に小脳が関わることを示した。トラッキング課題において目制御系は、フォワードモデルに基づく手の位置の推定情報を連続的に利用すると考えられており、このフォワード計算に小脳が関与すると解釈することができる。小脳が、目・腕の協調関係、特に時間的協調に関与する考え方は、小脳疾患患者や動物を対象とした実験などでも広く支持されている[39][40][41][39–41]。
関連項目
参考文献
- ↑
Hayhoe, M., & Ballard, D. (2005).
Eye movements in natural behavior. Trends in cognitive sciences, 9(4), 188-94. [PubMed:15808501] [WorldCat] [DOI] - ↑
Land, M.F. (2009).
Vision, eye movements, and natural behavior. Visual neuroscience, 26(1), 51-62. [PubMed:19203425] [WorldCat] [DOI] - ↑
Helsen, W.F., Elliott, D., Starkes, J.L., & Ricker, K.L. (1998).
Temporal and spatial coupling of point of gaze and hand movements in aiming. Journal of motor behavior, 30(3), 249-59. [PubMed:20037082] [WorldCat] [DOI] - ↑
Fisk, J.D., & Goodale, M.A. (1985).
The organization of eye and limb movements during unrestricted reaching to targets in contralateral and ipsilateral visual space. Experimental brain research, 60(1), 159-78. [PubMed:4043274] [WorldCat] [DOI] - ↑
Armstrong, I.T., Judson, M., Munoz, D.P., Johansson, R.S., & Flanagan, J.R. (2013).
Waiting for a hand: saccadic reaction time increases in proportion to hand reaction time when reaching under a visuomotor reversal. Frontiers in human neuroscience, 7, 319. [PubMed:23847494] [PMC] [WorldCat] [DOI] - ↑ 6.0 6.1
Yttri, E.A., Liu, Y., & Snyder, L.H. (2013).
Lesions of cortical area LIP affect reach onset only when the reach is accompanied by a saccade, revealing an active eye-hand coordination circuit. Proceedings of the National Academy of Sciences of the United States of America, 110(6), 2371-6. [PubMed:23341626] [PMC] [WorldCat] [DOI] - ↑
Dean, H.L., Martí, D., Tsui, E., Rinzel, J., & Pesaran, B. (2011).
Reaction time correlations during eye-hand coordination: behavior and modeling. The Journal of neuroscience : the official journal of the Society for Neuroscience, 31(7), 2399-412. [PubMed:21325507] [PMC] [WorldCat] [DOI] - ↑ 8.0 8.1
Biguer, B., Jeannerod, M., & Prablanc, C. (1982).
The coordination of eye, head, and arm movements during reaching at a single visual target. Experimental brain research, 46(2), 301-4. [PubMed:7095037] [WorldCat] [DOI] - ↑
Gribble, P.L., Everling, S., Ford, K., & Mattar, A. (2002).
Hand-eye coordination for rapid pointing movements. Arm movement direction and distance are specified prior to saccade onset. Experimental brain research, 145(3), 372-82. [PubMed:12136387] [WorldCat] [DOI] - ↑
Sailer, U., Eggert, T., Ditterich, J., & Straube, A. (2000).
Spatial and temporal aspects of eye-hand coordination across different tasks. Experimental brain research, 134(2), 163-73. [PubMed:11037283] [WorldCat] [DOI] - ↑
Sims, C.R., Jacobs, R.A., & Knill, D.C. (2011).
Adaptive allocation of vision under competing task demands. The Journal of neuroscience : the official journal of the Society for Neuroscience, 31(3), 928-43. [PubMed:21248118] [PMC] [WorldCat] [DOI] - ↑
Bekkering, H., & Sailer, U. (2002).
Commentary: coordination of eye and hand in time and space. Progress in brain research, 140, 365-73. [PubMed:12508603] [WorldCat] [DOI] - ↑
Lünenburger, L., Kutz, D.F., & Hoffmann, K.P. (2000).
Influence of arm movements on saccades in humans. The European journal of neuroscience, 12(11), 4107-16. [PubMed:11069607] [WorldCat] [DOI] - ↑
Snyder, L.H., Calton, J.L., Dickinson, A.R., & Lawrence, B.M. (2002).
Eye-hand coordination: saccades are faster when accompanied by a coordinated arm movement. Journal of neurophysiology, 87(5), 2279-86. [PubMed:11976367] [WorldCat] [DOI] - ↑
Ariff, G., Donchin, O., Nanayakkara, T., & Shadmehr, R. (2002).
A real-time state predictor in motor control: study of saccadic eye movements during unseen reaching movements. The Journal of neuroscience : the official journal of the Society for Neuroscience, 22(17), 7721-9. [PubMed:12196595] [PMC] [WorldCat] - ↑
Nanayakkara, T., & Shadmehr, R. (2003).
Saccade adaptation in response to altered arm dynamics. Journal of neurophysiology, 90(6), 4016-21. [PubMed:14665687] [WorldCat] [DOI] - ↑
Neggers, S.F., & Bekkering, H. (2000).
Ocular gaze is anchored to the target of an ongoing pointing movement. Journal of neurophysiology, 83(2), 639-51. [PubMed:10669480] [WorldCat] [DOI] - ↑
Neggers, S.F., & Bekkering, H. (2001).
Gaze anchoring to a pointing target is present during the entire pointing movement and is driven by a non-visual signal. Journal of neurophysiology, 86(2), 961-70. [PubMed:11495964] [WorldCat] [DOI] - ↑ 19.0 19.1
Prablanc, C., Echallier, J.F., Komilis, E., & Jeannerod, M. (1979).
Optimal response of eye and hand motor systems in pointing at a visual target. I. Spatio-temporal characteristics of eye and hand movements and their relationships when varying the amount of visual information. Biological cybernetics, 35(2), 113-24. [PubMed:518932] [WorldCat] [DOI] - ↑
Levine, M.S., & Lackner, J.R. (1979).
Some sensory and motor factors influencing the control and appreciation of eye and limb position. Experimental brain research, 36(2), 275-83. [PubMed:488202] [WorldCat] [DOI] - ↑
Adam, J.J., Ketelaars, M., Kingma, H., & Hoek, T. (1993).
On the time course and accuracy of spatial localization: basic data and a two-process model. Acta psychologica, 84(2), 135-59. [PubMed:8285077] [WorldCat] [DOI] - ↑
Epelboim, J.L., Steinman, R.M., Kowler, E., Edwards, M., Pizlo, Z., Erkelens, C.J., & Collewijn, H. (1995).
The function of visual search and memory in sequential looking tasks. Vision research, 35(23-24), 3401-22. [PubMed:8560808] [WorldCat] [DOI] - ↑
Epelboim, J., Steinman, R.M., Kowler, E., Pizlo, Z., Erkelens, C.J., & Collewijn, H. (1997).
Gaze-shift dynamics in two kinds of sequential looking tasks. Vision research, 37(18), 2597-607. [PubMed:9373691] [WorldCat] [DOI] - ↑
Flanders, M., Daghestani, L., & Berthoz, A. (1999).
Reaching beyond reach. Experimental brain research, 126(1), 19-30. [PubMed:10333004] [WorldCat] [DOI] - ↑
Binsted, G., & Elliott, D. (1999).
Ocular perturbations and retinal/extraretinal information: the coordination of saccadic and manual movements. Experimental brain research, 127(2), 193-206. [PubMed:10442411] [WorldCat] [DOI] - ↑
Soechting, J.F., Engel, K.C., & Flanders, M. (2001).
The Duncker illusion and eye-hand coordination. Journal of neurophysiology, 85(2), 843-54. [PubMed:11160517] [WorldCat] [DOI] - ↑
van Donkelaar, P. (1997).
Eye-hand interactions during goal-directed pointing movements. Neuroreport, 8(9-10), 2139-42. [PubMed:9243599] [WorldCat] [DOI] - ↑
van Donkelaar, P. (1998).
Saccade amplitude influences pointing movement kinematics. Neuroreport, 9(9), 2015-8. [PubMed:9674585] [WorldCat] [DOI] - ↑
Gomi, H. (2008).
Implicit online corrections of reaching movements. Current opinion in neurobiology, 18(6), 558-64. [PubMed:19095435] [WorldCat] [DOI] - ↑
Hwang, E.J., Hauschild, M., Wilke, M., & Andersen, R.A. (2014).
Spatial and temporal eye-hand coordination relies on the parietal reach region. The Journal of neuroscience : the official journal of the Society for Neuroscience, 34(38), 12884-92. [PubMed:25232123] [PMC] [WorldCat] [DOI] - ↑
Dean, H.L., Hagan, M.A., & Pesaran, B. (2012).
Only coherent spiking in posterior parietal cortex coordinates looking and reaching. Neuron, 73(4), 829-41. [PubMed:22365554] [PMC] [WorldCat] [DOI] - ↑
Hagan, M.A., Dean, H.L., & Pesaran, B. (2012).
Spike-field activity in parietal area LIP during coordinated reach and saccade movements. Journal of neurophysiology, 107(5), 1275-90. [PubMed:22157119] [PMC] [WorldCat] [DOI] - ↑ Hagan MA, Pesaran B. (2020).
Functional inhibition across a visuomotor communication channel coordinates looking and reaching. bioRxiv 2020.06.16.156125. DOI - ↑
Van Donkelaar, P., Lee, J.H., & Drew, A.S. (2000).
Transcranial magnetic stimulation disrupts eye-hand interactions in the posterior parietal cortex. Journal of neurophysiology, 84(3), 1677-80. [PubMed:10980038] [WorldCat] [DOI] - ↑
Manto, M., Bower, J.M., Conforto, A.B., Delgado-García, J.M., da Guarda, S.N., Gerwig, M., ..., & Timmann, D. (2012).
Consensus paper: roles of the cerebellum in motor control--the diversity of ideas on cerebellar involvement in movement. Cerebellum (London, England), 11(2), 457-87. [PubMed:22161499] [PMC] [WorldCat] [DOI] - ↑
Miall, R.C., Reckess, G.Z., & Imamizu, H. (2001).
The cerebellum coordinates eye and hand tracking movements. Nature neuroscience, 4(6), 638-44. [PubMed:11369946] [WorldCat] [DOI] - ↑
Miall, R.C., Imamizu, H., & Miyauchi, S. (2000).
Activation of the cerebellum in co-ordinated eye and hand tracking movements: an fMRI study. Experimental brain research, 135(1), 22-33. [PubMed:11104124] [WorldCat] [DOI] - ↑
Miall, R.C., & Jenkinson, E.W. (2005).
Functional imaging of changes in cerebellar activity related to learning during a novel eye-hand tracking task. Experimental brain research, 166(2), 170-83. [PubMed:16082535] [WorldCat] [DOI] - ↑
Rizzo, J.R., Beheshti, M., Naeimi, T., Feiz, F., Fatterpekar, G., Balcer, L.J., ..., & Hudson, T.E. (2020).
The complexity of eye-hand coordination: a perspective on cortico-cerebellar cooperation. Cerebellum & ataxias, 7(1), 14. [PubMed:33292609] [PMC] [WorldCat] [DOI] - ↑
Sailer, U., Eggert, T., & Straube, A. (2005).
Impaired temporal prediction and eye-hand coordination in patients with cerebellar lesions. Behavioural brain research, 160(1), 72-87. [PubMed:15836902] [WorldCat] [DOI] - ↑
Vercher, J.L., & Gauthier, G.M. (1988).
Cerebellar involvement in the coordination control of the oculo-manual tracking system: effects of cerebellar dentate nucleus lesion. Experimental brain research, 73(1), 155-66. [PubMed:3208854] [WorldCat] [DOI]