Да за технологиями дело не станет, тут особых сомнений нет.
Но все-равно физиологические аспекты внушают сомнения. Попробуйте в течение хотя бы пяти минут пристально смотреть на набор точек - очень быстро зрение утомляется таким образом.
ИМХО уж лучше тему ментального управления развивать.
Вот тоже интересная статья
http://www.technologyreview.com/Infotech/18254/?a=f
Пишут, что система визуального управления работает и людям нравится)), но высок процент ошибок - до 20%. Еще пишет про микродвижения зрачка и что пришлось специальный алгоритм придумать - а значит должна быть задержка.

вот такое мне больше нравится

Не надо "пристально смотреть" и уж тем более пять минут. Бросил взгляд на МФИ, взглядом выделил конкретную ракету (при должной реализации - едва ли пара секунд), подтвердил коротким ходом пальца - и снова смотришь на небо. Это как управление мышью - не смотришь же пристально за движением курсора.
Что касаемо многомерных манипуляторов на микроперемещениях - тут нет интуитивной понятности и чёткому управлению ими нужно очень долго учиться. А подготовка пилота и так уже сравнима по стоимости с самолётом на котором он летает.

Глаз достаточно точно смотрит на нужную точку. А приглядываться и не придётся, нужно будет только научиться нажимать кнопочку именно в момент взгляда на нужное изображение.
Вот запись движения глаза при свободном рассматривании картинки.

Широко распространены четыре технологии, на основе которых изготавливаются сенсорные экраны: поверхностные акустические волны, емкостная, резистивная, инфракрасная.
Поверхностные акустические волны.
Данный принцип позволяет достичь точности при фиксировании действий пользователя за счет компенсации возможных погрешностей при определении экранных координат мощным математическим аппаратом программной надстройки. В углах такого экрана размещается специальный набор пьезоэлектрических элементов, на которые подается электрический сигнал частотой 5 МГц. Этот сигнал преобразуется в ультразвуковую акустическую волну, направляемую вдоль поверхности экрана, а сам экран представляется для программы управления сенсорными датчиками в виде цифровой матрицы, каждое значение которой соответствует определенной точке экранной поверхности. В ограничивающую экран рамку вмонтированы так называемые отражатели, распространяющие ультразвуковую волну таким образом, что она охватывает все рабочее пространство сенсорного экрана. Специальные рефлекторы фокусируют ультразвук и направляют его на приемный датчик, который снова преобразует полученное им акустическое колебание в электрический сигнал. Даже легкое касание экрана в любой его точке вызывает активное поглощение волн, благодаря чему картина распространения ультразвука по его поверхности несколько меняется. Управляющая программа сравнивает принятый от датчиков изменившийся сигнал с хранящейся в памяти компьютера цифровой матрицей - картой экрана, и вычисляет исходя из имеющихся данных координату касания, причем значение координаты высчитывается независимо для вертикальной и горизонтальной оси. Количество поглощенной волны преобразуется в третий параметр, определяющий силу нажатия пользователя на экран. Полученные таким образом данные передаются соответствующему программному комплексу, определяющему дальнейший алгоритм работы компьютера в ответ на действия пользователя.
Емкостная технология.
Емкостной экран — это по сути стекло, на поверхность которого наносится тонкое прозрачное проводящее покрытие. Проводящий слой сверху защищен специальным защитным покрытием. По краям стекла расположены тонкие электроды, равномерно распределяющие низковольтное электрическое поле по проводящему покрытию. При прикосновении к экрану образуется емкостная связь между пальцем и экраном, что вызывает импульс тока в точку контакта. Электрический ток из каждого угла экрана пропорционален расстоянию до точки касания, таким образом, контроллеру достаточно просто сравнить эти токи для определения места касания. Таким образом, преимуществами емкостного экрана можно считать хорошую прозрачность, высокую прочность, долговечность. Емкостные экраны - это идеальное решение для общественных мест, когда дисплей интенсивно используется.
Резистивная технология.
Резистивный сенсорный экран имеет многослойную структуру, состоящую из двух проводящих поверхностей, разделенных специальным изолирующим составом, распределенным по всей площади активной области экрана. При касании наружного слоя, выполненного из тонкого прозрачного пластика, внутренняя проводящая поверхность совмещается с проводящим слоем основной пластины (может быть сделана из стекла или полиэстера), играющей роль каркаса конструкции, благодаря чему происходит изменение сопротивления всей системы. Это изменение фиксируется микропроцессорным контроллером, передающим координаты точки касания управляющей программе компьютера. Срабатывание от нажатия пальцем или другим твердым предметом.
Инфракрасная технология
Вдоль границ сенсорного экрана, применяющего в своей работе принцип инфракрасных волн, устанавливаются специальные излучающие элементы, генерирующие направленную вдоль поверхности экрана световые волны инфракрасного диапазона, распределяющиеся в его рабочем пространстве наподобие координатной сетки. С другой стороны экрана смонтированы улавливающие элементы, принимающие волну и преобразующие ее в электрический сигнал. Если один из инфракрасных лучей перекрывается попавшим в зону действия лучей посторонним предметом, луч перестает поступать на приемный элемент, что тут же фиксируется микропроцессорным контроллером. Таким образом и вычисляется координата касания. Примечательно, что инфракрасному сенсорному экрану все равно, какой именно предмет помещен в его рабочее пространство: нажатие может осуществляться пальцем, авторучкой, указкой, и даже рукой в перчатке. Инфракрасные сенсорные экраны, выполненные в виде полой рамки с установленными в ней датчиками.

Точно-то точно, но он постоянно находится в движении, даже когда мы смотрим на одну точку.
А с вибрациями что делать? Можно в общем-то установливать по шлему какие-то опорные точки, и сравнивать направление взгляда относительно их, но это опять усложнение. А тут в тепличных условиях точность 80%.

Имхо идея бредовая. Мне кажется это многократно увеличит стоимость системы а принесёт только вред.
Всё равно система будет распознавать точку направления взгляда. Это задержка.
1 Вы приняли решение нажать кнопку
2 Вы начинаете смотреть на кнопку на экране
3 Рамка подтверждения фокусировки взгляда вокруг кнопки загорается через 0.5-1 сек.
4 Вы увидели сигнал подтверждения и нажали кнопку на рукоятке - ещё 0,5-1 сек
5 Если вы решили нажать другую кнопку и перевели взгляд, система распознавания снимет активность предыдущей кнопки не сразу, так как ей надо убедиться что вы перевели взгляд не случайно.
Кроме того, нажатие определённой кнопки может зависеть от показания другого прибора, как быть с этим? Cмотреть одним глазом на прибор, а другим на изображение кнопки?
А в ситуации когда взгляд будет постоянно прыгать по разным приборам (чтобы считать показания достаточно 0,5 секунд) эта система вообще ничего не опознает...
Далее, есть такое понятие как тактильные ощущения, вы можете нажимать некоторые кнопки, практически на глядя на них, либо затрачивая на это минимум времени. Остальное время можно потратить на основные приборы, да и просто на окружающую обстановку.

О)) Я оказывается не одинок)

Ну вот откуда эта оценка времени, что нужно 0,5-1 сек для выделения? Как говорится: ссылки в студию! Ведь именно эта оценка и лежит в основе всех дальнейших рассуждений и если она не верна - то и дальнейшая софистика бессмыслена (причём ошибка, как мне кажется, на порядок минимум). Дали же ссылку, где на основании взгляда перемещается курсор на экране: http://www.newscientist.com/article/dn1 ... -kill.html Причём, насколько я понял, там не только управление перемещением курсора с помощью взгляда, а ещё и операции с ним (типа "клик мышью"), что в обсуждаемом случае не требуется. Поэтому инсинуации про длительное время определения координат направления взгляда без подтверждения ссылками в расчёт не принимаются.
Что касаемо тактильных ощущений - хочется посмотреть, кто тактильными ощущениями управляет кнопочками вокруг МФИ (о их замене идёт речь). А заменять кнопки на РУС никто и не предлагал. Туда же аргумент про нажатие кнопки в зависимости от показаний прибора - в этом случае речь идёт либо о кнопке на РУС, либо нужно оторвать с мясом руки тому, кто занимался эргономикой кокпита - т.к. ожидание с рукой на кнопке вокруг МФИ (а значит, либо двигатели не управляются, либо вообще весь самолёт) пока на приборе появится нужное значение приведёт, скорее всего, к банальному штопору.
Ну и что касаемо "многократно увеличит стоимость" - вообще не понятно. Система наведения вооружения с помощью взгляда есть? Есть. Т.е. для внедрения управления не только целеуказанием но ещё и внутрикабинными средствами требуется написать пару тысяч строк программного кода, никаких аппаратных затрат не требуется. И неделя работы программиста "многократно увеличит стоимость"?

Особенно при перегрузках.Каков бы ни был хорош интерфейс -человек->БЭВМ,но при этом необходимо,чтобы P_error-> к малой величине,для увеличения P_right_solution.Я уже писал в каком то топике про костюм,который реагирует на биоимпульсы организма в зависимости от состояния+систему ответного воздействия через биоактивные точки+систему инъекций (в крайнем случае).Мне кажется,искать надо какой то оптимум в плане комбинированного управления -и зрачком глаза,и движениями пальцев.Вот видеопример,может несколько некорректный -но состояние летчика при перегрузках порой похоже на состояние человека с ограниченными возможностями?
http://www.youtube.com/watch?v=tYIZP1hrfZI
Смотрим с 1:51 -и это был 1996 год.

2 Гость

Есть такое понятие - угловое зрение, вам не надо смотреть на кнопку, чтобы нажать её. Вы смотрите на дисплей, а кнопка, которая рядом с дисплеем, вам видна боковым зрением. Вы не отрываете взгляд от экрана, чтобы нажать её. Перевод взгляда туда-сюда, увеличит утомляемость.

Если теоретически представить, что удалось получить срабатывание системы опознавания в 0,1 секунду, тогда кнопки на дисплее будут лихорадочно мерцать вслед за случайными движениями взгляда и поймать момент фокусировки на одной кнопке будет невозможно. Как следствие ложные срабатывания...
Кроме того в этом случае вы неизбежно ждёте сигнала подтверждения для нажатия.
0,5 секунд чисто физиологическая задержка. Была такая детская шутка, один держит и отпускает монетку, а второй пытается её поймать двумя пальцами в 5 сантиметрах ниже... Попробуйте.

И что? Ссылку на статью поместили бы и всё. На мой вопрос можете ответить?

Единым фронтом выступим против
Вообще ИМХО стоит работать над способами и алгоритмами представления визуальной информации - тут широченные возможности открываются еще не использованные.

Согласен. Убедили, идея фиговая.

Низкие перегрузки(а в самолёте не бывает высоких перегрузок) никак не могут повлиять на такую систему. Мы делаем приборы, которые выдерживают 20000g (в артиллерийском выстреле) а тут какие-то жалкие 15g.

Не согласен. Каждой идеи свое место. Зачем упираться в кнопки вокруг телевизора? А если ИЛС имеет две зоны (например левая и правая) одна отвечает за выбор пушки а вторая ракет ближнего боя. Возможно в этом случае при больших перегрузках переключать будет быстрее и удобнее.

Нет, глаза должны двигаться только ради получения информации. А уж выбор пушки и вообще всё, что может понадобиться при высоких перегрузках есть на кнопках РУС и РУД, поэтому прекратите уже про перегрузки говорить. Для меня аргументом послужила усталость глаз и наличие переферического зрения.

Наверное можно посто отслеживать акивность мозга определять зоны, которые активизируются перед нажатием той или иной кнопки (или их последовательностей). Тогда в боевой уже обстановке самолет сможет выпустить ракету раньше, чем пилот нажмет кнопку.

Интересно, что проводились эксперименты, которые показывают, что часто мы совершаем действия раньше, чем осознаем принятие решения на это действие. Человек нажимает кнопку раньше, чем осознает приказ на ее нажатие, например.

Я читал о таком у Пенроуза ("Новый ум короля")

Часто ракета будет запускаться даже когда человек не хотел её запускать, а только проигрывал эту ситуацию в мозгу и готовился к пуску в случае надобности

Выбор средства поражения должен осуществляться автоматически бортовой ЭВМ, с возможностью его корректировки летчиком.
Корректировка же (которая не понадобится в 95% случаев) может осуществляться с помощью кнопок на РУС или РУД...

Это понятно. Но ведь не все приборы выдерживают высокие перегрузки. Как насчёт конкретного прибора? Лично мне идея о сенсорах и управлении взглядом, пусть и сырая, нравится. Кстати, учёные уже изучают возможность управления нейроимпульсами, или, проще говоря, мыслями, которые улавливаются сенсорами в "шапочке" надеваемой на голову. Слышал по ТВ, что программа распознаёт до 80% слов, которые мысленно произносит оператор. А ещё есть такой путь, когда микросхему вживляют в тело, чтобы соединить мозг непосредственно с компьютером без передаточного звена в виде сенсоров. Как в "Матрице" – подсоединил провод(а), и полетел "мочить" Смитов. Смиты у нас уже есть, осталось "сопрячь интерфейсы".

Уже есть такое.
Правда работает не настолько быстро и нуждается в постоянной калибровке.
http://www.3dnews.ru/peripheral/ocz-nia/
Хотя вероятно есть что улучшать.

Думаю, что достаточно просто различить проигрывание в мозгу, от принятия решения. Наверняка при решении задействуется какой то особый участок.
Кроме того я сказал "в боевой обстановке", когда лучше выпустить лишнюю ракету, чем выпустить на секунду позже.

Хотя роль летчика может сводиться просто к выбору варианта атаки, а конкретное исполнение можно доверить компьютеру.

Так и есть. "Двигательная команда" протягивания руки к кнопке на уровне нервов принципиально отлична от "намерения" протянуть руку. Поэтому сейчас уже есть прототипы протезов, превращающие именно "двигательные команды" в точные движения протеза. Эта проблема давно и успешно решается, и сейчас задача чисто инженерная - совершенствование. http://www.pubmedcentral.nih.gov/picren ... obtype=pdf


Согласен. Проблема автоматизации управления самолетом и совершенствование органов управления - разные задачи.
Автоматизация управления полетом решалась последовательно: Гидравлика -> цифровое управление отдельными элементами (двигатель, элевоны, оперение, итд) -> цу синхронизацией движения элементов -> цу простыми маневрами (см. Як-130 и С-37)
С-но, дальнейшие шаги внедрения цу: -> сложные маневры -> тактические действия ("маневр"+"вооружение") ->групповые тактические действия
Поэтому управление (с помощью мозга или кнопок - не важно) заведомо будет делаться с целью перевести фокус внимания оператора с тех задач, которые будет делать автоматика, на более сложные.
Т.о. число задач, которые пилот должен решать одновременно постоянно уменьшается в течение последних лет 50 и, видимо, продолжит уменьшаться. Поэтому, думаю, кнопки уйдут не потому что пилоту будет не хватать рук или скорости для решения большего количества задач, а для того, чтобы он меньше отвлекался на физические действия, управление полетом и вооружением от принятия тактических решений. С-но, имхо, произойдет это не раньше (но произойдет обязательно!), чем автомат будет способен самостоятельно вести воздушный бой.

А что вас смущает? Думаю надежность сенсорных экранов вполне достаточна. Подтвердить свою мысль, к сожалению, не могу. Хотя, косвенно, могут танки послужить доказательством. На абрамсе сенсорные экраны устанавливают, насколько я знаю.
С другой стороны, ни на фы-22, не на фы-35 таких экранов не стоит. Соответственно вопрос. Нужны ли они вообще?

Убрать прозрачного фонаря напрочь, он только проблем создает, утопить кабину вниз. Заменить его множеством дисплеев, прием - оптические устройства в видимом и ИК диапазонов. Управление самолета - взаимодействие бортовым ИИ и пилота, пилот должен быть "менагером" своего самолета, принимать крайниие решения для ИИ .

---Что такое манегер не знаю но в общемто пилот должен в основном принимать решения на схему боя и основные маневры остальное делает ИИ(взлет--посадка в автомате,полет к месту и обратно итд)???

Я про вот эту кабину говорил. http://paralay.com/f35/f357.jpg
Видимо, какой то очень ранний вариант.

Я тут подумал... В России, скорее всего, просто нет производства сенсорных экранов.

В чёрный матовый не даёт бликов

Вообще-то черная в видимом диапазоне поверхность, в ИК как раз ярче всего светится...