La technologie pour communiquer avec une personne aphasique expressive? [fermé]

https://stackoverflow.com/questions/1937782

20-09-2019
|

Question

Un membre de la famille a eu un accident vasculaire cérébral quelques années et a maintenant aphasie. Elle comprend ce qui est dit à elle, est cognitive de ce qui se passe, mais ne peut pas s'exprimer. Elle est en mesure de répondre aux questions oui / non (voulez-vous aller faire du shopping? Vous cherchez vos boucles d'oreilles?) Elle est toutefois pas en mesure de lire (en anglais n'est pas sa langue maternelle, et elle n'a pas lu en hindi décennies.)

Je suis le technicien dans la famille, et je l'intention de venir avec quelque chose pour nous aider à communiquer. L'idée est d'avoir une sorte de livre d'images où elle peut indiquer ce qu'elle veut.

Ma première question: une sorte de technologie d'assistance pour les personnes atteintes d'aphasie expressive existent déjà? Ceux-ci peuvent être des dispositifs matériels ou logiciels?

Dans le cas contraire, un tel logiciel ne semble pas difficile d'écrire. Ma première pensée est d'avoir une interface avec des images - peut-être séparés par catégorie (nourriture, shopping) - où elle peut pointer vers une image individuelle pour indiquer ce dont elle a besoin. On pourrait facilement ajouter d'autres éléments avec un tel logiciel, et nous pourrions avoir une interface où elle (ou nous) pourrait « tourner les pages ».

Ce qui suggère que la meilleure solution serait d'utiliser un écran tactile plutôt que d'une souris. Il serait vraiment difficile de la former pour viser une souris ou trouver les clés sur un clavier.

Nous pensons d'obtenir peut-être une tablette et d'écrire un logiciel de base. Mais les ordinateurs comprimés sont chers et fragiles - Je ne sais pas si elle serait en mesure de supporter les déversements ou d'être bousculée dans une maison de soins infirmiers

Ma question suivante: quel genre de tablettes comme sont là-bas que je peux programmer sur? Je ne sais pas quoi que ce soit sur le matériel, mais s'il y a quelque chose, nous pourrions-de commande spéciale. Quel serait sûr et durable pour un tel projet? Nous pourrions faire quelque chose sur un iPod ou un téléphone cellulaire, mais je me sens comme cette interface serait trop petite.

Enfin, quelqu'un ici ont de l'expérience avec ce genre de technologie d'assistance? Ce que je pourrait ne pas prévoir lors de la conception d'un tel système?

modifier

J'ai ajouté une prime (assez costaud!). Je voudrais ouvrir un peu cette question à toutes les suggestions, les commentaires et les expériences que les gens pourraient avoir. Ce projet est assez important et réel, et bien que nous (travaillons) une solution, tout aperçu serait particulièrement utile.

En ce moment, le plan est de monter un écran dans sa chambre. Nous allons lui enseigner soit d'utiliser une boule de commande ou d'utiliser un panneau écran tactile, après avoir vu ce qu'elle est capable d'utiliser avec un prototype simple. Ensuite, le logiciel semblable à un vieux jeu « de HyperCard »:

----------------------------------------------------------------
|   --------------          --------------                     |
|   |  Clothes   |          |    Food    |      ...            |       
|   --------------          --------------                     |
|                                                              |
|    Pic of item 1     Pic of item 2     Pic of item  3        |
|                                                              |
|                                                              |
|                                                              |
|                                                              |
|    Pic of item 4     Pic of item 5     Pic of item  6        |
|                                                              |
|                                                              |
|                                                              |
|                                                              |
|  <-Back                                       Next->         |
----------------------------------------------------------------

commentcommentcomment!

La solution

Qu'en est-il un bon vieux livre de papier façonné? (Ce n'est pas censé être snarky) Une interface à écran tactile comme vous parlez serait très cool, mais en attendant, vous pouvez imprimer plusieurs pages avec des images les plus courantes et les laminer. Ils auraient le temps de démarrage instantané, être robuste face à des déversements / gouttes, et assez pas cher vous pourriez avoir un dans chaque chambre plus un dans la voiture.

Je ne dis pas que c'est la solution ultime, mais comme étape intermédiaire, il vous reçoit beaucoup de fonctionnalités pour l'effort pas beaucoup, et peut même servir de prototype qui vous donne un aperçu de la façon dont un membre de votre famille va interagir avec votre appareil . Il est aussi quelque chose d'un non programmeur peut être chargé de pendant que vous travaillez sur la solution colombophile.

Autres conseils

Vous pouvez envisager d'EEG Casques d'écoute comme une plate-forme d'exploration. Beaucoup a été fait ces dernières années tant que peuvent maintenant être programmés Casques EEG secs pour relier les ondes cérébrales particulières avec des messages. Vous devez passer par un étalonnage, car deux personnes ont des ondes cérébrales similaires (un peu comme les empreintes digitales), mais après que vous devriez être en mesure de pensent tout ce que vous voulez faire. De plus, ils ne seront pas présents les barrières linguistiques depuis sa pensée serait la langue agnostique à l'appareil lui-même.

J'ai même vu ces fauteuils roulants, le contrôle et les jeux vidéo.

Emotive a un SDK pour leur 299 $ Casque d'écoute.

Une autre possibilité est quelque chose comme ce dispositif:

http://www.aphasia.com/patients/product.aspx

l'utilisateur crée des phrases / expressions des icônes qui représentent des concepts ou des phrases. les phrases sont lues d'une voix synthétisée.

il y a des comprimés conçus pour des applications robustes et utilisations médicales. Une liste:

http://www.tabletpc2.com/CompareRugged.htm

Et certains comprimés comme Latitude XT2 XFR de Dell sont également Ruggedized.

iPhone ou Android pourrait être utilisé comme une plate-forme d'écran tactile, mais il n'y a pas beaucoup d'écran de l'immobilier.

Je ne peux pas aider beaucoup avec le logiciel, mais comme une plate-forme matérielle que vous pourriez envisager un Nokia N800 "tablette Internet". J'ai eu depuis quelques années, et il est essentiellement une plate-forme Linux avec GTK. Plus de détails sur le logiciel maemo.org . La principale chose à propos du Nokia est que l'affichage et l'écran tactile sont en circulation. (Les radios sont également en suspens, mais ce n'est pas si pertinent pour vous.)

Si vous voulez juste pour commencer avec quelques photos, Quiver Image Viewer est une application native Maemo et fait très bien à gérer un grand nombre de photographies. Il serait relativement facile pour votre rapport au point de photos de ce qu'elle veut.

Une nouvelle marque coûte 179 $ N800 à partir de Décembre 2009. Ils vendent sur eBay pour environ 100 $. Carquois est libre.

Ceci est une question très intéressante, l'un des membres de ma famille ont également souffert de plusieurs coups, mais il peut encore parler assez bien, donc en fait j'ai surtout répondu en raison de vos questions matérielles / de programmation parce que je suis un ami qui est aussi désactivé et ne peut pas utiliser la normale du matériel impromptu parce qu'il serait autrement briser inévitablement assez rapidement (syndrome de Gilles de la Tourette). Indépendamment de cela, j'ai trouvé plusieurs choses en ligne spécifiquement liés à l'aphasie, donc j'ajouté ces liens, je n'ai cependant pas une expérience personnelle avec l'une des sociétés ou des produits mentionnés.

Ma première question: une sorte de technologie d'assistance pour les personnes atteintes d'aphasie expressive existent déjà? Ceux-ci peuvent être des dispositifs matériels ou logiciels?

Mes résultats indiquent que les solutions « matérielles » pour les personnes ayant des difficultés à s'articuler comprennent:

http://www.pictoworld.com/
http://www.cacfrenchay.nhs.uk/comm_over.htm (imprimé, le carton, le stratifié tel que mentionné précédemment)
http://www.cacfrenchay.nhs.uk/comm_lowaac.htm
http://www.cacfrenchay.nhs.uk/comm_highaac.htm
http://www.gusinc.com/2010/Home.html (ordinateurs tablettes à part entière avec synthétiseur vocal)
http://www.gusinc.com/2010/Communication_Packages.html

Solutions spécifiquement pour les patients aphasiques comprennent:

Vous pouvez trouver cette http://www.youtube.com/user/Lingraphica

De plus, vous pouvez consulter l'affichage de blog suivant qui liste d'autres fabricants de ces appareils (le blog contient également des commentaires): http://aphasiainfo.blogspot.com/2009/03/augmentativealternative-communication.html

Dynavox
Mercury
Dis-It! Sam
Lingraphica

progiciels thérapeutiques en particulier pour les personnes aphasiques sont passées en revue ici: http://www.aphasianow.org/Aphasia_Recovery/Aphasia_therapy_software,_aids~211/

Software-sage je pouvais trouver quelque chose appelé " SentenceShaper ":

SentenceShaper® est un logiciel innovant, breveté, qui aide les personnes aphasiques à communiquer dans leur propre voix.

Nous pensons d'obtenir peut-être une tablette et d'écrire un logiciel de base. Mais les ordinateurs comprimés sont chers et fragiles - Je ne sais pas si elle serait en mesure de supporter les déversements ou d'être bousculée dans une maison de soins infirmiers
.

Si je devais prototype / adapter un tel système personnalisé, je regarde personnellement dans les ordinateurs industriels (en particulier la tablette / des PC de panneau), à savoir ceux qui sont « robustes » ou destinés à être utilisés à des fins de plein air ou même militaires.

Ce sont généralement très durable et conçu pour être utilisé dans des conditions lourdes. En d'autres termes, ils sont destinés à être utilisés dans ces circonstances, et en tant que tel, vous avez même une garantie pour ce type d'utilisation.

Ma question suivante: quel genre de tablettes comme sont là-bas que je peux programmer sur

Tant que vous visez quelque chose qui est PC / base Wintel, ce qui va tout « courant » version 32 bits de Windows (par exemple> = Win98), vous devriez être en mesure d'écrire un logiciel en utilisant des outils standards, comme .NET , Java, Python, etc.

Personnellement, je cependant éviter de choisir des plates-formes exotiques, en particulier lors de la phase de prototypage. Cela rendrait inutilement coûteux et compliqué.

Je ne sais pas quoi que ce soit sur le matériel, mais s'il y a quelque chose, nous pourrions-de commande spéciale. Quel serait sûr et durable pour un tel projet? Nous pourrions faire quelque chose sur un iPod ou un téléphone cellulaire, mais je me sens comme cette interface serait trop petite.

iPhone ou un téléphone cellulaire est généralement pas destiné à être utilisé dans de telles « lourds » conditions, donc je me garderai de prototypage / développer quoi que ce soit sur ces plates-formes, mais aussi en raison des lacunes de l'interface probable que vous finirez par rencontrer.

Alors que vous pourriez être en mesure de développer quelque chose d'utile, vous rencontrerez sûrement des limites de la plate-forme, peu importe si elle est le manque de soutien matériel, écran immobilier ou autre.

De même, le développement pour toute sorte de téléphone mobile nécessitera l'utilisation de SDKs / API spécifiques au téléphone et / ou d'autres dépendances spécifiques des fournisseurs, à savoir votre solution ne sera pas particulièrement portable, il sera très plate-forme spécifique et limitée à la fonctionnalités offertes par cette plate-forme très.

PC tablette robuste:

Ainsi, alors que les tablettes PC industriels / robustes (avec touchscReens) sont en effet des ordinateurs assez chers (habituellement dans la gamme de 2000- $ 5000 US $), les plus âgés (c.-à-remis à neuf, avec moins jusqu'à spécifications jour) peuvent être obtenus habituellement sur d'autres secondes retails- matériel de main ebay dans la gamme de $ 200- $ 500 US ou encore moins).

Si la taille, le poids, la mobilité, puissance de la batterie, etc. devrait éventuellement se transformer pour devenir des facteurs cruciaux, un mini-ordinateur portable robuste (sous portable) pourrait être une meilleure option - encore, le développement pour / sur une tablette PC industriel assure que votre travail est portable et peut être facilement migré vers une autre cible.

PC tablette robuste sont passés en revue .

En outre, pour votre plus amples recherches, selon le site du L'Association nationale Aphasis , ces appareils sont appelés "suppléance à la communication" Devices:

Suppléance Dispositif de communication est une expression inventée pour décrire diverses aides à la communication. Il peut se référer à un dispositif de faible technologie (comme un tableau alphabétique) ou un dispositif de très haute technologie (comme un ordinateur entraîné par les clignements de son utilisateur). La chose essentielle est de répondre aux besoins de communication et les capacités de l'utilisateur au bon dispositif.

Peut-être une partie de ce qui est utile, le meilleur!

Comme vous l'avez dit, l'interface ne semble pas difficile en théorie, et il pourrait déjà exister quelque chose ... Je laisse cette partie aux autres.

Je voudrais vous donner des suggestions du point de vue HW, cependant.

moniteurs à écran tactile sont déjà disponibles, et ils sont même pas cher. Par exemple. HP .
ordinateurs tablettes tactiles à part entière existent, mais ils ont tendance à être coûteux. Par exemple. Dell
lecteurs de livres à écran tactile peut être une alternative beaucoup moins cher à 2. (et plus portable que 1). Mais vous pourriez avoir besoin de pirater beaucoup, car ils sont généralement TiVoizated . Voici un liste de ces appareils
il y a beaucoup de rumeurs

S'il vous plaît ne soyez pas choqué, mais toutes ces choses sont assez cher.

Hardware Alors appelé causeurs existe. Les appareils où vous appuyez sur un bouton et un mot correspondant / phrase est parlée. Avec ces appareils, vous pouvez également appeler une personne qui est dans la pièce voisine. Cherchez alpha et deltas des affichettes ou consultez ici .

Logiciels Pour des solutions logicielles de PC vous pouvez regarder MindExpress et Le Grid.

Une personne locale a une sorte de livre électronique d'image à cet effet. Je ne l'ai jamais examiné en détail. Si vous cherchez les experts locaux pour faire face à la déficience intellectuelle, je suis sûr que vous pouvez trouver votre chemin vers le même type de dispositif.

Il est intéressant, je l'ai vu exactement ce type de système utilisé récemment, mais peut-être pas là où vous l'attendez.

Woolworths (en Australie) a récemment introduit en libre-service où vous pouvez checkouts vous numérisez propres trucs dans le lecteur de code à barres et de prendre essentiellement la personne de la caisse de la boucle.

Balances à chaque station, et une seule personne de surveillance 8 stations de caisse, sont utilisés pour vous assurer de ne pas les déchirer pas loin, et vous pouvez maintenant adapter ces huit caisses dans un espace utilisé pour avoir deux. Mais ce qui est vraiment un côté.

La viande de cette réponse est des choses qui ne disposent pas de codes-barres (charcuterie, fruits et légumes principalement). Pour ceux-ci, vous les placez sur la balance, puis utilisez exactement le système que vous décrivez: la sélection d'une catégorie générale et éventuellement forage vers le bas à un élément spécifique (fruits / pommes / rose-dames, légumes / vert / pois / pois ou frappées charcuterie / viande / tranches / jambon / jambon de champagne par exemple).

Je suis prêt à parier Woolies a fait un seau charge de la recherche avant refilant ce sur le grand public donc il est probablement l'une des meilleures solutions.

L'astuce consiste à trouver le moyen le plus efficace d'obtenir à partir de 3 ou 4 sélections d'images à une phrase cohérente. Un exemple jaillissant immédiatement à l'esprit est la différence entre « Je veux une fois » et « Oh, mon Dieu, vous avez vraiment besoin un bain ». En utilisant les mêmes images, mais juste avoir une flèche qui pointe vers soit un membre de votre famille ou de la partie dont ils parlent à pourrait être une solution.

Pour cette raison (et bien d'autres), vous devriez probablement faire la partie imagechain à peine de votre logiciel configurable comme possible. Vous ont beaucoup de faux départs rendant ainsi ce donc facilitera considérablement votre charge de travail.

En ce qui concerne le développement, je le ferais sur une machine régulière (avec la souris et le clavier), mais font tout dans le logiciel dépend des clics de souris. Un écran tactile du doigt sera impossible à distinguer d'une condition que vous faites des images assez grand par la souris et de laisser un espacement suffisant entre eux. Les gens qui écrivent des programmes pour l'iPhone ne les écris pas vraiment sur l'iPhone -. Il n'y a aucune raison pour laquelle vous devriez avoir à se développer sur une tablette

Vous aurez besoin d'un test pour finalement, mais cela ne doit pas se produire tout de suite. Vous pouvez même tester avec un membre de votre famille sans écran tactile. Il suffit de s'asseoir avec eux et cliquez sur la souris à l'endroit approprié quand ils touchent l'écran. De cette façon, vous pouvez retarder les coûts jusqu'à ce que le projet est bien le long (et vous êtes plus certain de succès).

Et vous ne devriez pas avoir à vous soucier aussi beaucoup sur la fiabilité. Vous pouvez obtenir des PC portables très robustes. J'ai travaillé pour une compagnie de téléphone il y a une dizaine d'années qui a impliqué obtenir des emplois sur le marché du travail sur le terrain (les Bods qui fixent vos combinés ou boucle locale) et ils étaient le groupe d'utilisateurs les plus rudes que j'ai jamais vu.

Nous avons utilisé pour obtenir des machines à venir dans étiquetés « problème de communication » qui ont été couverts dans la boue parce que « Joe » avait jeté par la fenêtre de la camionnette ouverte dans un enclos de vache, car il n'a pas pu contacter la station de base: -)

Emotive a mentionné plus haut.

Voici un peu plus d'informations sur leur site:

Expressiv™ Suite

La suite Expressiv utilise les signaux mesurés par le neuroheadset à interpréter les expressions faciales des joueurs en temps réel. Il fournit une amélioration naturelle de jeu en permettant l'interaction des personnages de jeu à venir à la vie. Quand un joueur sourit, son avatar peut imiter l'expression avant même qu'ils soient conscients de leurs propres sentiments. L'intelligence artificielle peut maintenant répondre aux joueurs naturellement, de manière que les humains ont pu jusqu'à présent.

Affectiv™ Suite

Le joueur Suite surveille Affectiv états émotionnels en temps réel. Il offre une dimension supplémentaire dans l'interaction du jeu en permettant au jeu de répondre aux émotions d'un joueur. Les personnages peuvent transformer en réponse au sentiment du joueur. Musique, éclairage de la scène et les effets peuvent être adaptés pour accroître l'expérience pour le joueur en temps réel. La suite Affectiv peut être utilisé pour surveiller l'état des joueurs d'esprit et permettre aux développeurs d'ajuster la difficulté à chaque situation.

Cognitiv™ Suite

La suite didactiq lit et interprète les pensées et les intentions conscientes d'un joueur. Les joueurs peuvent manipuler des objets virtuels en utilisant uniquement la puissance de leur pensée! Pour la première fois, le fantasme de pouvoir magique et surnaturel peut être vécue.

Si je comprends bien, chacun de ces « Suites » est disponible via un autre niveau de leur SDK. Vous ne devez pas connaître le matériel, il vous suffit de connaître leur API.

Si vous allez avec un casque comme celui-ci, vous aurez besoin d'une plate-forme assez robuste pour l'exécuter (en fonction des exigences de casque développeur):

Requirements Windows XP or Vista 2.2 GHz Dual Core CPU or faster 
1.5GB RAM 150MB Hard drive Graphic cards with 256MB memory

En ce qui concerne le matériel pour exécuter cette commande, vous devrez utiliser pour tirer parti de leur SDK Microsoft (Windows Embedded?). Vous pourriez envisager un ordinateur portable de Dell ruggedized. L'écran serait plus facile pour tous de voir la sortie.

est un projet très noble, et je vous souhaite bonne chance!

Quelques suggestions tard dans la nuit:

a) Je suis sûr que Apple sortira un 10" tablette avec multitouch OS similaire à l'iPhone dans un proche avenir. Peut-être une option, et pourrait être couvert dans un étui souple qui le protège de tomber et dommage.

b) L'iPod Touch est assez petite. Mais il a quelques avantages: b.1) Petit! Alors, elle peut le prendre avec elle, partout. b.2) SDK bien documenté pour coder contre. Pas trop dur, à mon avis. b.3) écran tactile Excellent (bien mieux que tout ce que je sais) Mais il a un gros inconvénient: Vous devrez peut-être « jailbreak » pour se débarrasser du blocage démarrage écran après mise sous tension. Elle aura toujours pour déverrouiller l'écran et recherchez l'icône de l'application dans le doc, chaque fois qu'elle veut communiquer. Probablement un dispositif jailbreaké peut contourner ce fardeau.

c) un cadre photo numérique avec des boutons de marche avant / arrière. Il suffit de composer des images comme des cartes pour différents sujets. Une image avec des vêtements, une image avec des chaussures, une photo avec des activités ... elle pourrait zapper ces pour trouver la bonne. En outre, ce matériel est pas trop complexe, donc il peut être possible d'acheter un appareil et un ingénieur cas mieux approprié pour elle, avec des boutons beaucoup plus grands et plus sûr de tomber / dommages.

d) Tobii , le dispositif de suivi de l'oeil. mais calme et pourtant cher. Peut-être cela lui permet de communiquer même beaucoup plus rapide. Alternative: Il y a des verres sur le marché qui peut projeter une image en face de l'œil gauche ou à droite, alors qu'ils restent transparents. Je me souviens un peu il y avait un dispositif de réalité augmentée comme ça avec le suivi des yeux intégré. Quelque chose comme cela, couplé à la transmission de l'image qu'elle voit à un appareil portable pourrait conduire à une communication très rapide. Mais encore une fois, très coûteux et difficile à développer.

Peut-être que je commencerais avec un iPod touch qui glisse simplement des images. Celui qu'elle veut communiquer pourrait allumer l'appareil pour elle. Ensuite, vous pouvez utiliser l'application en construit de photos qui présente une vue d'ensemble sur la vignette carrée de photos et ajouter des images composées à lui. Ceci est très simple à faire, et l'appareil est calme abordable par rapport à d'autres solutions. Elle peut rapidement feuilleter les images puis pointez sur ce qu'elle signifie. Mais il ne serait pas aussi difficile de faire une meilleure application suiting qui présente différentes vignettes de sélection de la catégorie. Je pense que la catégorisation est vraiment important. L'iPod touch a également un autre avantage. Si vous développez quelque chose pour cela, beaucoup d'autres pourraient facilement profiter simplement en le téléchargeant depuis l'App Store

Theres un autre avantage avec l'iPod touch: Si Apple lance une tablette, et je suis 99,999% sûr qu'ils vont, vous serez en mesure de transférer votre logiciel à cet appareil avec facilité. Et peut-être vous pouvez profiter des gestes tactiles ainsi, à l'étape très rapidement dans une catégorie de cartes d'image. Même mouvement gestes sont possibles, grâce à des accéléromètres. Je pense que l'écran d'un iPod touch peut contenir pas plus de 6 éléments à la fois. Cela dépend de la petite cible de tabulation est autorisé à être.

BTW: Je ne suis pas médecin, et je ne sais pas beaucoup sur la médecine. Mais je l'ai entendu de grandes histoires au sujet d'une technique appelée « Bio Feedback ». Peut-être que vous pourriez aussi penser à développer un dispositif / application Bio Commentaires qui lui permet de re-former ses compétences. En outre, la musicothérapie est encore au stade de la recherche au début, mais a montré un grand succès déjà. Peut-être qu'il est aussi une bonne idée de penser à intégrer son / musique.

Edit: Je vois beaucoup de gens ont fourni de bonnes idées ici. Je vous souhaite le meilleur succès avec votre projet, et espérons que vous partagerez votre solution! Peut-être que vous pouvez trouver des personnes liées qui sont prêts à co-investir dans vos efforts, peut-être sous la forme d'une organisation ou d'une fondation bénéfique, pour développer quelque chose de vraiment incroyable.

http://www.pecsusa.com/

Ceci est un élément couramment utilisé dans le monde de la thérapie.

Licencié sous: CC-BY-SA avec attribution

Non affilié à StackOverflow