Технология общения с человеком с экспрессивной афазией?[закрыто]
https://stackoverflow.com/questions/1937782
-
20-09-2019 - |
italiano
english
français
española
中国
日本の
العربية
Deutsch
한국어
Português
RussianВопрос
Несколько лет назад один из членов семьи перенес инсульт, и теперь у него экспрессивная афазия.Она понимает, что ей говорят, осознает происходящее, но не может выразить себя.Она способна отвечать на вопросы "да" /"нет" (вы хотите пройтись по магазинам?ты ищешь свои серьги?) Однако она не умеет читать (английский не является ее родным языком, и она десятилетиями не читала хинди).)
Я технолог в нашей семье, и я намерен придумать что-то, что поможет нам общаться.Идея состоит в том, чтобы завести что-то вроде книжки с картинками, где она могла бы указать на то, что она хочет.
Мой первый вопрос:существует ли уже какая-то вспомогательная технология для людей с экспрессивной афазией?Это могут быть аппаратные или программные устройства?
Если нет, то написать такое программное обеспечение, по-видимому, несложно.Моя первоначальная мысль состояла в том, чтобы создать интерфейс с картинками - возможно, разделенными по категориям (еда, покупки), - где она могла бы указать на отдельную картинку, чтобы указать, что ей нужно.Мы могли бы легко добавить больше элементов с помощью такого программного обеспечения, и у нас мог бы быть интерфейс, в котором она (или мы) могли бы "переворачивать страницы".
Это наводит на мысль, что лучшим решением было бы использовать сенсорный экран, а не мышь.Было бы действительно трудно научить ее наводить мышь или находить клавиши на клавиатуре.
Мы подумываем о том, чтобы, возможно, приобрести планшет и написать какое-нибудь базовое программное обеспечение.Но планшетные компьютеры дороги и хрупки - я не уверен, что они выдержат разливы или удары в доме престарелых.
Итак, мой следующий вопрос:какие существуют планшетные устройства, на которых я могу программировать?Я ничего не смыслю в оборудовании, но если там что-то есть, мы могли бы заказать это по специальному заказу.Что было бы безопасным и долговечным для такого проекта?Мы могли бы сделать что-то на iPod или мобильном телефоне, но мне кажется, что этот интерфейс был бы слишком маленьким.
Наконец, есть ли у кого-нибудь здесь опыт работы с такого рода вспомогательными технологиями?Что я мог бы не предвидеть при разработке такой системы?
Редактировать
Я добавил (довольно солидную!) награду.Я бы хотел обсудить этот вопрос с любыми предложениями, комментариями и опытом, которые могут возникнуть у людей.Это довольно реальный и важный проект, поэтому, пока мы будем (работать) над решением, любая информация была бы особенно полезна.
Прямо сейчас мы планируем установить экран в ее комнате.Мы либо научим ее пользоваться трекболом, либо сенсорной панелью, после того как посмотрим, что она умеет использовать с простым прототипом.Тогда программное обеспечение сродни старой колоде "гиперкарт":
---------------------------------------------------------------- | -------------- -------------- | | | Clothes | | Food | ... | | -------------- -------------- | | | | Pic of item 1 Pic of item 2 Pic of item 3 | | | | | | | | | | Pic of item 4 Pic of item 5 Pic of item 6 | | | | | | | | | | <-Back Next-> | ----------------------------------------------------------------
комментарийкомментарий!
Решение
А как насчет старой доброй бумажной книги?(Это не должно быть язвительно) Интерфейс с сенсорным экраном, о котором вы говорите, был бы очень крутым, но тем временем вы могли бы распечатать несколько страниц с наиболее распространенными изображениями и заламинировать их.Они будут мгновенно загружаться, устойчивы к пролитию жидкости и падениям и достаточно дешевы, чтобы их можно было иметь по одному в каждой комнате и еще по одному в машине.
Я не утверждаю, что это окончательное решение, но в качестве промежуточного шага оно дает вам множество функций без особых усилий и может даже послужить прототипом, который даст вам представление о том, как член вашей семьи будет взаимодействовать с вашим устройством.Это также то, что может поручить непрограммисту, пока вы работаете над более интересным решением.
Другие советы
Вы можете рассматривать ЭЭГ-гарнитуры как платформу для исследований.За последние годы было сделано так много, что теперь сухие ЭЭГ-гарнитуры можно запрограммировать на связывание определенных мозговых волн с сообщениями.Вам придется пройти калибровку, поскольку не существует двух людей с одинаковыми мозговыми волнами (как отпечатки пальцев), но после этого вы сможете думать что бы вы ни хотели сделать.Кроме того, они не создадут языковых барьеров, поскольку ее мысль будет независимой от языка самого устройства.
Я даже видел эти управляемые инвалидные коляски и видеоигры.
Эмоциональный имеет SDK за гарнитуру стоимостью 299 долларов.
другая возможность - что-то вроде этого устройства:
http://www.aphasia.com/peoples/product.aspx
пользователь создает предложения/фразы из значков, которые представляют понятия или фразы.фразы воспроизводятся синтезированным голосом.
Есть несколько таблеток, предназначенных для тяжелых условий эксплуатации и медицинского применения.Один список здесь:
http://www.tabletpc2.com/CompareRugged.htm
Некоторые планшеты, такие как Dell Latitude XT2 XFR, также имеют повышенную защиту.
iPhone или Android можно использовать в качестве платформы с сенсорным экраном, но места на экране не так много.
Я не могу особо помочь с программным обеспечением, но в качестве аппаратной платформы вы могли бы рассмотреть Нокиа Н800 «Интернет-планшет».У меня он есть уже пару лет, и по сути это платформа Linux с gtk.Более подробную информацию о программном обеспечении см. maemo.org.Главное в Nokia – это выдающийся дисплей и сенсорный экран.(Радиоприемники тоже выдающиеся, но для вас это не так важно.)
Если вы просто хотите начать с фотографий, Просмотр изображений Quiver Это встроенное приложение Maemo, которое очень хорошо справляется с управлением большим количеством фотографий.Вашей родственнице будет относительно легко указать на фотографии того, что она хочет.
По состоянию на декабрь 2009 года новый N800 стоит 179 долларов.Они продаются на eBay примерно за 100 долларов.Колчан бесплатен.
Это довольно интересный вопрос, один из членов моей семьи также перенес несколько инсультов, но он все еще может говорить довольно хорошо, так что на самом деле я в основном ответил из-за ваших вопросов об оборудовании / программировании, потому что у меня есть друг, который также является инвалидом и не может использовать обычное готовое оборудование, потому что в противном случае он неизбежно сломал бы его довольно быстро (синдром Туретта).Несмотря на это, я нашел в Интернете несколько материалов, конкретно связанных с афазией, поэтому я добавил эти ссылки сюда, однако у меня нет никакого личного опыта работы ни с одной из упомянутых компаний или продуктов.
Мой первый вопрос:существует ли уже какая-то вспомогательная технология для людей с экспрессивной афазией?Это могут быть аппаратные или программные устройства?
Мои выводы показывают, что "Аппаратные" решения для людей, которым трудно выражать свои мысли, включают:
- http://www.pictoworld.com/
- http://www.cacfrenchay.nhs.uk/comm_over.htm (печатный, картонный, ламинированный, как упоминалось ранее)
- http://www.cacfrenchay.nhs.uk/comm_lowaac.htm
- http://www.cacfrenchay.nhs.uk/comm_highaac.htm
- http://www.gusinc.com/2010/Home.html (полноценные планшетные компьютеры с синтезатором речи)
- http://www.gusinc.com/2010/Communication_Packages.html
Решения, разработанные специально для пациентов с афазией, включают:
- http://www.aphasia.com/patients/index.aspx
- http://www.aphasia.com/flash/video_demo_smalltalk.aspx
- http://www.aphasia.com/flash/video_demo.aspx
- http://www.epill.com/aphasia.html
- http://www.textspeak.com/aactalkingdevice.htm
- http://www.bestsyndication.com/Articles/2006/Nicole-WILSON/Health/02/022006-aphasia_stroke_speech_generating_device.htm
Вы можете найти это обзор интересный, который гласит:
Появился новый мобильный аксессуар под названием SmallTalk для тех, кто страдает афазией [...] это устройство очень портативное, легкое, удобно лежит в кармане и полезно для общения и практики в дороге.Это устройство позволяет пользователям носить с собой коллекцию фраз, значков и видеороликов в любом месте и в любое время.Устройство генерации речи Lingraphica в сочетании с SmallTalk обеспечивает полную комплексную систему для общения с афазиями
И что интересно, тоже:
Стоимость устройства Lingraphica может быть возмещена через программу Medicare.Он поставляется вместе с мобильным аксессуаром SmallTalk для бесплатной пробной версии
Обзор содержит демонстрационные видеоролики, но есть также канал YouTube, показывающий все это в действии: http://www.youtube.com/user/Lingraphica
Кроме того, вы можете захотеть ознакомиться со следующей публикацией в блоге, в которой перечислены другие производители подобных устройств (в блоге также есть несколько обзоров).: http://aphasiainfo.blogspot.com/2009/03/augmentativealternative-communication.html
- Динавокс
- Ртуть
- Скажи это!Сэм
- Линграфика
Здесь представлен обзор терапевтических программных пакетов, специально предназначенных для людей с афазией:http://www.aphasianow.org/Aphasia_Recovery/Aphasia_therapy_software ,_aids~211/
Программно я мог бы найти что-то под названием "Форма предложения":
SentenceShaper® - это инновационная запатентованная программа, которая помогает людям с афазией общаться их собственным голосом.
Мы подумываем о том, чтобы, возможно, приобрести планшет и написать какое-нибудь базовое программное обеспечение.Но планшетные компьютеры дороги и хрупки - я не уверен, что они выдержат разливы или удары в доме престарелых.
Если бы мне пришлось создавать прототип / адаптировать такую пользовательскую систему, я бы лично изучил промышленные компьютеры (в частности, планшетные / панельные ПК), т.е.те, которые являются "прочными" или предназначены для использования на открытом воздухе или даже в военных целях.
Они обычно очень долговечны и предназначены для использования в тяжелых условиях.Другими словами, они предназначены для использования при таких обстоятельствах, и поэтому у вас даже есть гарантия на этот тип использования.
Итак, мой следующий вопрос:какие существуют планшетные устройства, на которых я могу программировать?
До тех пор, пока вы стремитесь к чему-то на базе PC / WinTel, т.е.который запускает любую "текущую" 32-разрядную версию Windows (т.е.>= Win98), вы должны уметь писать программное обеспечение, используя стандартные инструменты, такие как .NET, Java, Python и т.д.
Однако лично я бы воздержался от выбора каких-либо экзотических платформ, особенно на этапе прототипирования.Это сделало бы его неоправданно дорогим и сложным.
Я ничего не смыслю в оборудовании, но если там что-то есть, мы могли бы заказать это по специальному заказу.Что было бы безопасным и долговечным для такого проекта?Мы могли бы сделать что-то на iPod или мобильном телефоне, но мне кажется, что этот интерфейс был бы слишком маленьким.
А iPhone или сотовый телефон обычно не предназначены для использования в таких "тяжелых" условиях, поэтому я бы воздержался от создания прототипов / разработки чего-либо на этих платформах, но также и из-за вероятных недостатков пользовательского интерфейса, с которыми вы в конечном итоге столкнетесь.
Хотя вы могли бы разработать что-то полезное, вы наверняка столкнетесь с ограничениями платформы, независимо от того, связано ли это с отсутствием аппаратной поддержки, отсутствием экрана или чем-то еще.
Аналогично, разработка для любого типа мобильных телефонов потребует использования специфичных для телефона SDK / API и / или других зависимостей от конкретного поставщика, т.е.ваше решение не будет особенно переносимым, оно будет сильно зависеть от платформы и ограничено функциями, предоставляемыми именно этой платформой.
Прочные планшетные ПК:
- http://www.winmate.com.tw/Rugged/RuggedType.asp?Type=B010407
- http://www.scanplanet.com/tabletpc.asp
- http://www.ruggedtabletpc.com/
Таким образом, хотя промышленные / надежные планшетные ПК (с сенсорными экранами) действительно являются довольно дорогими компьютерами (обычно в диапазоне от 2000 до 5000 долларов США), более старые (т.е.восстановленный, с менее современными характеристиками) обычно можно приобрести на ebay - или в других розничных магазинах подержанного оборудования - в диапазоне 200-500 долларов США или даже меньше).
Если размер, вес, мобильность, заряд батареи и т.д. В конечном итоге Станут решающими факторами, лучшим вариантом может стать прочный мини-ноутбук (sub notebook), однако разработка для / на промышленном планшетном ПК гарантирует, что ваша работа будет переносимой и ее можно будет легко перенести на другую цель.
Рассмотрены надежные планшетные ПК здесь.
Кроме того, для вашего дальнейшего исследования, согласно веб-сайту Национальная Ассоциация Афазии, эти устройства называются "Расширяющими устройствами связи".:
Расширяющее коммуникационное устройство - это фраза, придуманная для описания различных вспомогательных средств общения.Это может относиться к низкотехнологичному устройству (например, алфавитной доске) или к очень высокотехнологичному устройству (например, компьютеру, приводимому в действие одним движением глаз пользователя).Самое важное - подобрать подходящее устройство для удовлетворения коммуникационных потребностей и способностей пользователя.
Может быть, что-то из этого окажется полезным, всего наилучшего!
Как вы сказали, интерфейс теоретически не кажется сложным, и, возможно, что-то уже существует...Я оставляю эту часть другим.
Однако я хотел бы дать вам предложения с точки зрения HW.
- Сенсорные мониторы уже доступны, и они даже дешевы.Например. HP.
- полноценные планшетные компьютеры с сенсорным экраном существуют, но они, как правило, дороги.Например. Делл
- Считыватели книг с сенсорным экраном могут быть гораздо более дешевой альтернативой 2.(и гораздо портативнее, чем 1.).Но вам, возможно, придется многое взломать, поскольку обычно они ТиВоизированный.Вот список таких устройств
- есть много слухи о том, что Apple выпустит планшет в 2010 году, так что лучше всего подождать, прежде чем вкладывать много денег в аппаратное обеспечение.
Пожалуйста, не удивляйтесь, но все эти вещи довольно дорогие.
Аппаратное обеспечение
Так называемые болтуны существует.Устройства, в которых вы нажимаете кнопку и произносите соответствующее слово/предложение.С помощью этих устройств также можно позвонить человеку, находящемуся в соседней комнате.Искать альфа и дельта болтушки или посмотрите здесь.
Программное обеспечение
Программные решения для ПК вы можете посмотреть на МайндЭкспресс и Сетки.
Для этой цели у местного жителя есть что-то вроде электронной книжки с картинками.Я никогда не исследовал это подробно.Если вы обратитесь к местным экспертам по вопросам умственной отсталости, я уверен, вы сможете найти такое же устройство.
Достаточно интересно, что я видел именно так такая система используется недавно, но, возможно, не там, где вы ее ожидали.
Компания Woolworths (в Австралии) недавно представила кассы самообслуживания, в которых вы можете сканировать свои товары с помощью считывателя штрих-кода и, по сути, выводить кассира из игры.
Весы на каждой кассе и один человек, контролирующий 8 касс, используются для того, чтобы вы не украли их, и теперь вы можете разместить эти восемь касс в пространстве, где раньше было две.Но это действительно отступление в сторону.
Суть этого ответа заключается в продуктах, на которых нет штрих-кодов (в основном мясные деликатесы, фрукты и овощи).Для этого вы кладете их на весы, а затем используете именно так система, которую вы описываете:выбираем широкую категорию и в конечном итоге переходим к конкретному товару (например, фрукты / яблоки / розовые-для дам, овощи / зеленые / с горошком / с мятой-для гороха или деликатесы / мясо / нарезанное ломтиками / ветчина / ветчина для шампанского).
Я готов поспорить, что Woolies провели огромное количество исследований, прежде чем навязать это широкой публике, так что, вероятно, это одно из лучших решений.
Хитрость заключается в том, чтобы найти наиболее эффективный способ превратить 3 или 4 выбранных изображения в связное предложение.Один из примеров, который сразу приходит на ум, - это разница между "я хочу и то, и другое" и "О, Боже мой, ты действительно потребность принять ванну".Одним из решений может быть использование тех же изображений, но только со стрелкой, указывающей либо на члена вашей семьи, либо на собеседника, с которым они общаются.
По этой причине (и многим другим) вам, вероятно, следует сделать часть вашего программного обеспечения imagechain-to-sentence как можно более настраиваемой.Ты будет у вас будет много фальстартов, поэтому выполнение этого условия значительно облегчит вашу рабочую нагрузку.
Что касается разработки, я бы сделал это на обычной машине (с мышью и клавиатурой), но сделал бы все в программном обеспечении зависящим от щелчков мыши.Экран, чувствительный к касанию пальцем, будет неотличим от экрана, управляемого мышью, при условии, что вы сделаете изображения достаточно большими и оставите достаточное расстояние между ними.Люди, пишущие программы для iPhone, на самом деле их не пишут вкл . iPhone - нет никаких причин, по которым вы должны разрабатывать на планшете.
В конце концов он вам понадобится для тестирования, но это не обязательно должно произойти сразу.Вы даже можете провести тестирование вместе с членом вашей семьи без сенсорного экрана.Просто посиди с ними и ты щелкайте мышью в соответствующем месте, когда они касаются экрана.Таким образом, вы можете отложить расходы до тех пор, пока проект не будет успешно реализован (и вы не будете более уверены в успехе).
И тебе не о чем беспокоиться слишком многое о надежности.Вы можете приобрести очень надежные портативные КОМПЬЮТЕРЫ.Около десяти лет назад я выполнял кое-какую работу в телекоммуникационной компании, которая включала в себя предоставление работы сотрудникам на местах (аппаратчикам, которые чинят ваши телефонные трубки или подключаются к локальной сети), и это была самая грубая группа пользователей, которую я когда-либо видел.
Раньше нам привозили машины с надписью "проблема со связью", которые были покрыты грязью, потому что "Джо" забросил машину через открытое окно фургона в загон для коров, потому что она не могла связаться с базовой станцией :-)
Эмоциональный был упомянут ранее.
Вот еще немного информации с их сайта:
Expressiv™ Suite
Набор Expressiv использует сигналы, измеренные набором нейронаук, для интерпретации выражений лица игрока в режиме реального времени.Это обеспечивает естественное улучшение игрового взаимодействия, позволяя игровым персонажам ожить.Когда игрок улыбается, его аватар может имитировать выражение лица еще до того, как он осознает свои собственные чувства.Искусственный интеллект теперь может реагировать на игроков естественным образом, так, как до сих пор могли только люди.
Affectiv™ Suite
Affectiv suite отслеживает эмоциональное состояние игрока в режиме реального времени.Это придает дополнительное измерение игровому взаимодействию, позволяя игре реагировать на эмоции игрока.Персонажи могут трансформироваться в ответ на чувства игрока.Музыка, освещение сцены и эффекты могут быть адаптированы таким образом, чтобы игрок получал больше впечатлений в режиме реального времени.Affectiv suite можно использовать для мониторинга душевного состояния игрока и позволяет разработчикам настраивать сложность в соответствии с каждой ситуацией.
Cognitiv™ Suite
Cognitiv suite считывает и интерпретирует сознательные мысли и намерения игрока.Геймеры могут манипулировать виртуальными объектами, используя только силу своей мысли!Впервые можно ощутить фантазию о магии и сверхъестественной силе.
Насколько я понимаю, каждый из этих "наборов" доступен через свой SDK разного уровня.Вам не обязательно знать аппаратное обеспечение, вам просто нужно знать их API.
Если вы используете подобную гарнитуру, вам понадобится довольно надежная платформа для ее запуска (в зависимости от требований разработчика к гарнитуре).:
Requirements Windows XP or Vista 2.2 GHz Dual Core CPU or faster
1.5GB RAM 150MB Hard drive Graphic cards with 256MB memory
Что касается аппаратного обеспечения для запуска этого, вам придется использовать Microsoft (Windows embedded?) для использования их SDK.Вы могли бы рассмотреть прочный ноутбук от Dell.На экране всем было бы легче видеть результат.
Это очень благородный проект, и я желаю вам всяческой удачи!
Несколько предложений поздно ночью:
a) Я очень уверен, что Apple в ближайшем будущем выпустит 10-дюймовое планшетное устройство с ОС multitouch, похожее на iPhone.Может быть дополнительным вариантом, и его можно поместить в мягкий чехол, который защитит его от падения и повреждений.
б) iPod Touch довольно маленький.Но у этого есть некоторые преимущества:б.1) Маленький!Так что она может взять его с собой куда угодно.б.2) Хорошо документированный SDK для работы с кодом.Не слишком сложно, на мой взгляд.б.3) Отличный сенсорный экран (намного лучше всего, о чем я знаю) Но у него есть большой недостаток:Возможно, вам придется "сделать джейлбрейк", чтобы избавиться от блокирующего стартового экрана после его включения.Ей всегда придется разблокировать экран и находить значок приложения в документе, каждый раз, когда она захочет пообщаться.Вероятно, джейлбрейкнувшее устройство сможет обойти это бремя.
в) Цифровая фоторамка с кнопками "Вперед" / "Назад".Просто составляйте изображения, как открытки, на разные темы.Картинка с одеждой, картинка с обувью, картинка с занятиями ... Она могла быстро просмотреть их, чтобы найти нужную.Кроме того, это оборудование не слишком сложное, поэтому, возможно, удастся купить устройство и сконструировать для него более подходящий чехол с гораздо большими кнопками и большей защитой от падения / повреждений.
г) Тоби, устройство слежения за глазами.но тихо пока обходится дорого.Может быть, это позволяет ей общаться даже намного быстрее.Альтернатива:На рынке есть очки, которые могут проецировать изображение перед левым или правым глазом, оставаясь при этом прозрачными.Я немного припоминаю, что было такое устройство дополненной реальности со встроенным отслеживанием глаз.Что-то подобное в сочетании с передачей изображения, которое она видит, на портативное устройство может привести к очень быстрой связи.Но опять же, это очень дорого и сложно в разработке.
Может быть, я бы начал с iPod touch, который просто перемещает изображения.Тот, с кем она хочет связаться, может включить устройство для нее.Затем вы могли бы воспользоваться встроенным приложением photos, которое предоставляет обзор фотографий в виде квадратных миниатюр, и добавить к нему составленные изображения.Это очень просто сделать, и устройство является бесшумным и доступным по сравнению с другими решениями.Она может быстро пролистать изображения, а затем указать на то, что она имеет в виду.Но также было бы нетрудно создать более подходящее приложение, в котором были бы представлены различные миниатюры выбора категорий.Я думаю, что здесь действительно важна категоризация.У iPod touch есть и еще одно преимущество:Если вы разработаете что-то для этого, многие другие могут легко воспользоваться этим, просто скачав его из App Store.
У iPod touch есть еще одно преимущество:Если Apple выпустит планшет, а я уверен на 99,999%, что они это сделают, вы сможете с легкостью перенести свое программное обеспечение на это устройство.И, возможно, вы также сможете воспользоваться преимуществами сенсорных жестов, чтобы очень быстро перейти в категорию карточек с картинками.Благодаря акселерометрам возможны равномерные движения-жесты.Я думаю, что экран iPod touch может вмещать не более 6 элементов одновременно.Зависит от того, насколько маленькой может быть целевая вкладка.
Кстати:Я не врач и не очень разбираюсь в медицине.Но я слышал замечательные истории о технике под названием "Биологическая обратная связь".Возможно, вы могли бы также подумать о разработке устройства / приложения для биологической обратной связи, которое позволило бы ей переподготовить свои навыки.Кроме того, музыкальная терапия все еще находится на ранней стадии исследований, но уже добилась больших успехов.Возможно, это также хорошая идея - подумать о включении звука / музыки.
Редактировать:Я вижу, что многие люди высказали здесь хорошие идеи.Я желаю вам всяческих успехов в вашем проекте и надеюсь, что вы поделитесь своим решением!Возможно, вы сможете найти родственных людей, которые готовы вложить средства в ваши усилия, возможно, в форме благотворительной организации или фонда, для разработки чего-то действительно потрясающего.
Это часто используемый предмет в мире терапии.
