Offtop ↑
klizardin в посте Metapractice (оригинал в ЖЖ)
15 комментариев
сначала старые сначала новые
А зачем нам такое устройство? Нам нужны другие устройства. Типа камер на компах и софта, который может различать движения глаз. И еще прога, которая будет совмещать те отмеченные движения и озвученный текст.
вроде такой софт есть. где-то встречал. а в общем не так сложно написать и самому.
если нужно, то могу попробовать написать, по крайней мере оценить насколько эффективно можно написать. в такой софтине наибольшая проблема это детектирование самих глаз (как элемента лица). распознавание лица -- это алгоритмы, которые приносят не плохие деньги и их, по крайней мере, еще пару лет назад было сложно встретить в свободном доступе. а свои ну, как это сказать.. ну почти качественные.
Типа камер на компах и софта, который может различать движения глаз. И еще прога, которая будет совмещать те отмеченные движения и озвученный текст.
Есть человек -- перед компьютером или монитором. Он читает текст. Этот текст записывается как аудиофайл и также размечается движения глаз в соответствии с произнесенным? так?
Или моделируется, допустим, естественный диалог. И тогда две камеры снимают и фиксируют вместе с аудиофайлом и движения глаз?
:) Чувствую мне пора отдавать долги. Больше я уже могу и не "взять" на себя :)
Но действительно, глаз природой приспособлен для того чтобы детектировать движения зрачков. Это устройство тоже детектирует движения зрачков, просто ему не нужно детектировать лицо и находить глаза -- они поступили "хитро" и повесили устройство на человека:) и то, что человек может двигаться стало безразлично для устройства.
Есть человек -- перед компьютером или монитором. Он читает текст. Этот текст записывается как аудиофайл и также размечается движения глаз в соответствии с произнесенным? так?
Или моделируется, допустим, естественный диалог. И тогда две камеры снимают и фиксируют вместе с аудиофайлом и движения глаз?
:) Чувствую мне пора отдавать долги. Больше я уже могу и не "взять" на себя :)
Но действительно, глаз природой приспособлен для того чтобы детектировать движения зрачков. Это устройство тоже детектирует движения зрачков, просто ему не нужно детектировать лицо и находить глаза -- они поступили "хитро" и повесили устройство на человека:) и то, что человек может двигаться стало безразлично для устройства.
Исследование движений глаз -- http://www.vdvs.ru/products/human/human.htm
--Типа камер на компах и софта, который может различать движения глаз. И еще прога, которая будет совмещать те отмеченные движения и озвученный текст.
--Есть человек -- перед компьютером или монитором. Он читает текст. Этот текст записывается как аудиофайл и также размечается движения глаз в соответствии с произнесенным? так?
Так. Или говорит по скайпу. Или произносит монолог на запись.
Или моделируется, допустим, естественный диалог. И тогда две камеры снимают и фиксируют вместе с аудиофайлом и движения глаз?
Да.
--Есть человек -- перед компьютером или монитором. Он читает текст. Этот текст записывается как аудиофайл и также размечается движения глаз в соответствии с произнесенным? так?
Так. Или говорит по скайпу. Или произносит монолог на запись.
Или моделируется, допустим, естественный диалог. И тогда две камеры снимают и фиксируют вместе с аудиофайлом и движения глаз?
Да.
Хм :)
я уже несколько раз встречал описание и софта, и программ, и применения. и даже код кто-то бесплатно выкладывал типа австралийцев. но, в одиночку как бы не переоценить силы
так я и не потяну полноценную разработку алгоритма, но в инете, что-то да есть из алгоритмов. если удастся адаптировать на данные нужды, то получиться, нет.. ну просто нет. а сбор и отладка, допустим, того, что уже есть, или перенесение на другую платформу это достаточно простая задача. я лет пять назад пробовал реализовывать, что-то что в дальнейшем могло вылиться в распознавание, но тогда замучился с адекватной работой алгоритмов, которые смог на тот момент найти. хотя простые задачи, которые были эээ по плечу этим алгоритмам они вполне хорошо выполняли.
понятно
нужно, но тебе стоит сто раз просчитать свои ресурсы
и вот еще, но она не столь точная как первая система.
ФАПС -- http://usabilitylab.ru/science/technology.php?ID=2293
эх, ежели бы у нас серьезно занимались юзабилити, то видеть подобные системы мог бы просто у себя на столе.
ФАПС -- http://usabilitylab.ru/science/technology.php?ID=2293
эх, ежели бы у нас серьезно занимались юзабилити, то видеть подобные системы мог бы просто у себя на столе.
понятно, пока не пришло время
Вспомнил. Ежели к этой штуке (http://www.image-metrics.com/) есть SDK, то должна в том числе и распознавать движения глаз. Насколько знаю плагин к skype-у они (или сторонние разработчики) написали.
Понятно.