Так каждая модальность от чего-то своего меряет может? Когда я тянусь до чего-то рукой - я определяю расстояние до плеча. Когда смотрю - до глаз. И т.д.
Так она же будет меняться от направления взгляда? В то время как если я голову повернул направо, я знаю, что объект который прямо перед глазами — "справа", а не "прямо.