Технология для общения с кем-то с выразительной афазией? [закрытый]

Вы можете рассматривать наушники для ЭЭГ как платформу для исследований. За последние годы было сделано так много, что теперь сухие ЭЭГ-гарнитуры можно запрограммировать так, чтобы они связывали определенные мозговые волны с сообщениями. Вы должны пройти калибровку, так как у двух людей нет одинаковых мозговых волн (как отпечатки пальцев), но после этого вы сможете думать о том, что вы хотите делать. Кроме того, они не будут создавать языковых барьеров, так как ее мысли не зависят от языка самого устройства.

Я даже видел эти управляющие инвалидные коляски и видеоигры.

Emotive имеет SDK для их гарнитуры за 299 долларов.

другая возможность - это что-то вроде этого устройства:

http://www.aphasia.com/patients/product.aspx

пользователь создает предложения / фразы из значков, которые представляют концепции или фразы. фразы воспроизводятся синтезированным голосом.

Существуют планшеты, предназначенные для использования в тяжелых условиях и в медицине. Один список здесь:

http://www.tabletpc2.com/CompareRugged.htm

И некоторые планшеты, такие как Dell Latitude XT2 XFR, также имеют повышенную защиту.

iphone или android можно использовать как платформу с сенсорным экраном, но на экране не так много места.

Для этой цели у местного жителя есть что-то вроде электронной книги с картинками. Я никогда не исследовал это подробно. Если вы обратитесь к местным экспертам по вопросам умственной отсталости, я уверен, что вы найдете способ использовать такое же устройство.

Не могу особо помочь с программным обеспечением, но в качестве аппаратной платформы вы можете рассмотреть Nokia N800 "Интернет-планшет". Он был у меня пару лет, и в основном это Linux-платформа с gtk. Более подробная информация о программном обеспечении находится на maemo.org. Главное в Nokia - это то, что дисплей и сенсорный экран выдающиеся. (Радиоприемники тоже выдающиеся, но это не так важно для вас.)

Если вы просто хотите начать с некоторых фотографий, то Quiver Image Viewer является родным приложением Maemo и очень хорошо справляется с большим количеством фотографий. Это было бы относительно легко для вашего родственника, чтобы указать на фотографии того, что она хочет.

Совершенно новый N800 стоит $179 по состоянию на декабрь 2009 года. Они продаются на eBay примерно за $100. Колчан бесплатный.

Как вы сказали, интерфейс не кажется сложным в теории, и он может уже существовать.... Я оставляю эту часть на усмотрение других.

Я бы хотел дать вам предложения с точки зрения HW, однако.

1. сенсорные мониторы уже доступны, и они даже дешевы. Например HP.
2. полнофункциональные сенсорные планшетные компьютеры существуют, но они, как правило, дорогие. Например Dell
3. сенсорные устройства для чтения книг могут быть намного дешевле 2. (и намного портативнее 1.). Но вам может понадобиться много взломать, так как они обычно TiVoizated. Вот список таких устройств
4. есть много слухов о том, что Apple выпустит планшет в 2010 году - так что лучше всего будет подождать, прежде чем инвестировать много денег в hw

Пожалуйста, не удивляйтесь, но все это довольно дорого.

Оборудование
Так называемые talkers существуют. Устройства, в которых вы нажимаете кнопку и произносите соответствующее слово/название. С помощью этих устройств вы также можете позвонить человеку, который находится в соседней комнате. Ищите альфа и дельта говорящих или посмотрите здесь.

Программное обеспечение
Для компьютерных программных решений вы можете посмотреть на MindExpress и The Grid.

Эмотив упоминался ранее.

Вот немного больше информации с их сайта:

Expressiv™ Suite

Комплект Expressiv использует сигналы, измеряемые нейронаушниками, для интерпретации выражений лица игроков в реальном времени. Он обеспечивает естественное улучшение игрового взаимодействия, позволяя игровым персонажам оживать. Когда игрок улыбается, его аватар может имитировать выражение лица еще до того, как он осознает свои собственные чувства. Искусственный интеллект теперь может реагировать на игроков естественным образом, так как до сих пор только человек мог это сделать.

Affectiv™ Suite

Affectiv-сюита отслеживает эмоциональные состояния игрока в режиме реального времени. Он обеспечивает дополнительное измерение в игровом взаимодействии, позволяя игре реагировать на эмоции игрока. Персонажи могут трансформироваться в ответ на чувства игрока. Музыка, освещение сцены и эффекты могут быть настроены так, чтобы усилить ощущения игрока в реальном времени. Комплект Affectiv может быть использован для мониторинга душевного состояния игрока и позволяет разработчикам подстраивать сложность под каждую ситуацию.

Cognitiv™ Suite

Комплект Cognitiv читает и интерпретирует сознательные мысли и намерения игрока. Геймеры могут манипулировать виртуальными объектами, используя только силу своей мысли! Впервые можно испытать фантазию магии и сверхъестественной силы.

Как я понимаю, каждый из этих "сюитов" доступен через SDK разного уровня. Вам не нужно знать аппаратное обеспечение, вы просто должны знать их API.

Если вы используете гарнитуру вроде этой, вам понадобится довольно надежная платформа для ее запуска (исходя из требований к гарнитурам разработчиков):

Requirements Windows XP or Vista 2.2 GHz Dual Core CPU or faster 
1.5GB RAM 150MB Hard drive Graphic cards with 256MB memory

Что касается аппаратного обеспечения для ее запуска, вам придется использовать Microsoft (windows embedded?), чтобы использовать их SDK. Вы можете рассмотреть прочный ноутбук от dell. На экране всем будет проще увидеть результат.

Это очень благородный проект, и я желаю вам удачи!

Интересно, что я недавно видел точно такую систему, но, возможно, не там, где ее можно было ожидать.

Woolworths (в Австралии) недавно ввел систему самообслуживания, где вы можете сканировать свои вещи через считыватель штрих-кодов и, по сути, вывести человека, который их проверяет, из цикла.

Весы на каждой станции и один человек, контролирующий 8 кассовых станций, используются для того, чтобы убедиться, что вы не сорвете их, и теперь вы можете разместить эти восемь кассовых станций в пространстве, которое раньше имело две. Но на самом деле, это не относится к делу.

Мясо этого ответа - это вещи, которые не имеют штрих-кодов (в основном, деликатесы, фрукты и овощи). Для них Вы помещаете их на весы, а затем используете точно описанную Вами систему: выбираете широкую категорию и, в конце концов, приступаете к конкретному предмету (фрукты/яблоки/розовые дамы, овощи/зеленый/ горох/маятный горох или деликатесы/мясо/слайс/хам/шампань-хам, например).

Готов поспорить, что Вулис проделал большую исследовательскую работу, прежде чем навязать ее широкой публике, так что это, вероятно, одно из лучших решений.

Хитрость в том, чтобы найти наиболее эффективный способ получить от 3 или 4 выборок изображений до когерентного предложения. Один из примеров, который сразу же приходит на ум, это разница между "Я хочу и то, и другое" и "Боже мой, тебе действительно нужно принять ванну". Использование одних и тех же изображений, но только наличие стрелки, указывающей либо на члена вашей семьи, либо на партию, с которой они разговаривают, может быть одним из решений.

По этой причине (и многим другим) вы, вероятно, должны сделать так, чтобы часть вашего программного обеспечения, посвященная цепочке образов, была как можно более конфигурируемой. У вас будет много фальстартов, так что это значительно облегчит вашу работу.

Что касается разработки, я бы сделал это на обычной машине (с мышью и клавиатурой), но сделайте так, чтобы все в программе зависело от щелчков мышью. Экран, чувствительный к прикосновению пальцев, будет неотличим от экрана, управляемого мышью, при условии, что вы сделаете изображения достаточно большими и оставите между ними достаточно свободного пространства. Люди, пишущие программы для iPhone, на самом деле не пишут их на iPhone - нет никаких причин, почему вы должны развиваться на планшете.

Вам понадобится одна для тестирования в конце концов, но это не должно произойти сразу. Вы даже можете протестировать с членом семьи без сенсорного экрана. Просто сядьте с ними и вы щелкните мышью в соответствующем месте, когда они коснутся экрана. Таким образом, вы можете отложить расходы до тех пор, пока проект не будет успешно реализован (и вы будете более уверены в его успехе).

И вам не нужно беспокоиться слишком о надежности. Вы можете получить очень надежные портативные компьютеры. Около десяти лет назад я работал на Telco, где мне приходилось получать работу в полевых условиях (тела, которые исправляли ваши телефоны или локальную петлю), и это была самая грубая группа пользователей, которую я когда-либо видел.

Раньше мы получали машины с пометкой "проблемы со связью", которые были покрыты грязью, потому что "Джо" бросался через окно открытого фургона в загон для коров, потому что он не мог связаться с базовой станцией :-)

Некоторые предложения поздно вечером:

a) Я очень уверен, что в ближайшем будущем Apple выпустит 10-дюймовое планшетное устройство с мультитач-операционной системой, похожей на iPhone. Возможно, это вариант, и его можно будет закрыть мягким чехлом, который защитит его от падения и повреждения.

b) iPod Touch довольно маленький. Но у него есть некоторые преимущества: б.1) Маленький! Поэтому она может взять его с собой, куда угодно. b.2) Хорошо документированный SDK для кодирования против. Не слишком сложно, на мой взгляд. b.3) Отличный сенсорный экран (намного лучше, чем что-либо другое, о чем я знаю). Но у него есть большой недостаток: Возможно, вам придётся "побег из тюрьмы", чтобы избавиться от блокирующего стартового экрана после его включения. Она всегда должна будет разблокировать экран и найти иконку приложения в доке, каждый раз, когда она хочет общаться. Возможно, джейлбрейк может обойти эту нагрузку.

c) Цифровая фоторамка с кнопками перемотки вперед/назад. Просто составьте изображения, как карты для различных тем. Фотография с одеждой, фотография с обувью, фотография с деятельностью...она может перепрыгнуть через них, чтобы найти нужную. Кроме того, это оборудование не слишком сложное, так что можно купить устройство и спроектировать более подходящий чехол для нее, с гораздо большими кнопками и более безопасным от падения/повреждения.

d) Tobii, устройство слежения за глазами. но тихий дорогой. Может быть, это позволит ей общаться еще быстрее. Альтернатива: На рынке есть очки, которые могут проецировать изображение на левый или правый глаз, при этом они остаются прозрачными. Я слегка помню, что было такое устройство дополненной реальности со встроенным глазным трекером. Что-то вроде этого, в сочетании с передачей изображения, которое она видит, на портативное устройство, может привести к очень быстрой связи. Но опять же, очень дорогой и трудноразвивающийся.

Может быть, я бы начал с iPod touch, который просто скользит по изображению. Тот, с кем она хочет общаться, мог бы включить устройство для нее. Затем можно было бы воспользоваться встроенным приложением "Встроенные фотографии", которое содержит обзор фотографий в виде квадратных эскизов, и добавить в него сочиненные фотографии. Это очень просто сделать, и устройство бесшумно доступно по сравнению с другими решениями. Она может быстро пролистывать изображения, а затем указывать на то, что она имеет в виду. Но это также не составит труда сделать более подходящее приложение, в котором есть эскизы выбора различных категорий. Я думаю, что категоризация здесь очень важна. У iPod touch есть еще одно преимущество: если вы разрабатываете что-то для этого, многие другие могут легко воспользоваться им, просто загрузив его из магазина приложений.

Theres еще одно преимущество iPod touch: если Apple выпустит планшет, и я на 99,999% уверен, что это произойдет, вы сможете с легкостью портировать свое программное обеспечение на это устройство. И, возможно, вы также сможете воспользоваться преимуществами сенсорных жестов, чтобы очень быстро перейти в категорию карт памяти. Благодаря акселерометрам возможны даже двигательные жесты. Я думаю, что на экране iPod touch может быть не более 6 элементов одновременно. Зависит от того, насколько маленькой может быть мишень на вкладке.

BTW: Я не врач, и я мало что знаю о медицине. Но я слышал отличные истории о технике под названием "Обратная биологическая связь". Может быть, вы также могли бы подумать о разработке устройства/приложения "Обратная биологическая связь", которое позволит ей заново обучить свои навыки. Кроме того, музыкальная терапия все еще находится на ранней стадии исследования, но уже показала большой успех. Может быть, это также хорошая идея подумать о включении звука/музыки.

Edit: Я вижу, что многие люди придумали здесь хорошие идеи. Я желаю вам наилучшего успеха в вашем проекте и надеюсь, что вы поделитесь своим решением! Может быть, вы найдете родственных людей, которые готовы внести свой вклад в ваши усилия, может быть, в виде благотворительной организации или фонда, чтобы разработать что-то действительно удивительное

Это довольно интересный вопрос, один из членов моей семьи также пострадал от нескольких ударов, но он все еще может довольно хорошо говорить, поэтому на самом деле я в основном ответил из-за ваших вопросов по оборудованию / программированию, потому что у меня есть друг, который также отключен и не может использовать обычное стандартное оборудование, потому что в противном случае он неизбежно сломал бы его довольно быстро (синдром Туретта). Несмотря на это, я обнаружил в Интернете несколько вещей, специально связанных с афазией, поэтому я добавил эти ссылки здесь, однако у меня нет личного опыта работы с какой-либо из упомянутых компаний или продуктов.

Мой первый вопрос: существуют ли какие-то вспомогательные технологии для людей с выраженной афазией? Это могут быть аппаратные или программные устройства?

Мои результаты показывают, что «аппаратные» решения для людей, которым сложно сформулировать свои мысли, включают:

• http://www.pictoworld.com/
• http: // www. cacfrenchay.nhs.uk/comm_over.htm (напечатанный, картон, ламинированный, как упоминалось ранее)
• http://www.cacfrenchay.nhs.uk/comm_lowaac.htm
• http: //www.cacfrenchay .nhs.uk / comm_highaac.htm
• http://www.gusinc.com/2010/Home.html (полноценные планшетные компьютеры с синтезатором речи)
• http://www.gusinc.com /2010/Communication_Packages.html

Решения, специально предназначенные для пациентов с афазией, включают:

• http://www.aphasia.com/patients/index.aspx
• http://www.aphasia.com/flash/video_demo_smalltalk .aspx
• http://www.aphasia.com/flash/video_demo.aspx
• http://www.epill.com/aphasia.html
• http://www.textspeak.com/aactalkingdevice .htm
• http://www.bestsyndication.com/Articles/2006/Nicole-WILSON/Health/02/022006-aphasia_stroke_speech_generating_device.htm

Вы можете найти этот обзор интересным, который гласит:

Есть новый мобильный аксессуар под названием SmallTalk для тех, кто страдает афазией. [...] это устройство очень портативное, легкое и удобное для использования в кармане и полезны для общения и практики на ходу. Это устройство позволяет пользователям носить с собой коллекцию фраз, значков и видеороликов в любом месте в любое время. Устройство генерации речи Lingraphica в сочетании с SmallTalk обеспечивает полную универсальную систему для общения при афазии

И что интересно также:

Устройство Lingraphica может быть возмещено через Medicare. Он поставляется с мобильным аксессуаром SmallTalk для пробного использования без каких-либо обязательств

В обзоре есть демонстрационные видеоролики, но есть также канал на YouTube, демонстрирующий все это в действии: http://www.youtube.com/user/ Lingraphica

Кроме того, вы можете ознакомиться со следующей записью в блоге, в которой перечислены другие производители таких устройств (в блоге также есть некоторые обзоры): http://aphasiainfo.blogspot.com/2009/03/ augmentativealternative-communication.html

• Dynavox
• Mercury
• Say-It! Sam
• Lingraphica

Пакеты терапевтического программного обеспечения, специально предназначенные для людей с афазией, рассматриваются здесь: http://www.aphasianow.org/Aphasia_Recovery/Aphasia_therapy_software,_aids~211/

Программно я мог найти что-то под названием « SentenceShaper »:

SentenceShaper® - это инновационный , запатентованная программа, которая помогает людям с афазией общаться своими голосами.

Мы думаем о том, чтобы получить планшет и написать какое-нибудь базовое программное обеспечение. Но планшетные компьютеры дороги и хрупки - я не уверен, выдержат ли они пролитие жидкости или столкновение в доме престарелых.

Если бы мне пришлось создавать прототип / адаптировать такую ​​индивидуальную систему, я бы лично изучил промышленные компьютеры (в частности, планшетные / панельные ПК), то есть те, которые являются «прочными» или предназначены для использования на открытом воздухе или даже в военных целях.

Они обычно очень прочные и предназначены для использования в тяжелых условиях. Другими словами, они предназначены для использования в этих обстоятельствах, и поэтому у вас даже есть гарантия на такой тип использования.

Итак, мой следующий вопрос: какие существуют устройства, похожие на планшеты, на которых я могу программировать?

Если вы стремитесь к чему-то, основанному на ПК / WinTel, т.е. версии Windows (т.е.> = Win98), вы должны иметь возможность писать программное обеспечение, используя стандартные инструменты, такие как .NET, Java, Python и т. д.

Лично я, однако, воздержусь от выбора любых экзотических платформ, особенно на этапе прототипирования . Это сделало бы это излишне дорогим и сложным.

Я ничего не знаю об аппаратном обеспечении, но если есть что-то, мы можем заказать его по специальному заказу.Что было бы безопасным и долговечным для такого проекта? Мы могли бы что-нибудь сделать с iPod или мобильным телефоном, но мне кажется, что этот интерфейс будет слишком маленьким.

IPhone или сотовый телефон обычно не предназначены для использования в таких «тяжелых» условиях, поэтому я бы воздержался от прототипирования / разработки чего-либо на этих платформах, но также из-за вероятных недостатков пользовательского интерфейса, с которыми вы в конечном итоге столкнетесь.

Хотя вы могли бы разработать что-то полезное, вы наверняка столкнетесь с ограничениями платформы, независимо от того, не хватает ли это аппаратной поддержки, состояния экрана или чего-то еще.

Аналогичным образом, разработка для любого типа мобильного телефона потребует использования специфичных для телефона SDK / API и / или зависимостей от других поставщиков, то есть ваше решение не будет особенно портативным, оно будет сильно зависеть от платформы и ограничиваться функции, предоставляемые этой самой платформой.

Защищенные планшетные ПК:

• http://www.winmate.com.tw/Rugged/RuggedType.asp?Type=B010407
• http://www.scanplanet.com/tabletpc.asp
• http://www.ruggedtabletpc.com/

Итак, хотя промышленные / защищенные планшетные ПК (с сенсорными экранами) действительно являются довольно дорогими компьютерами (обычно в диапазоне от 2000 до 5000 долларов США), более старые (т.е. отремонтированные, с меньшими затратами) актуальные спецификации) обычно можно получить на ebay или в других магазинах подержанного оборудования в диапазоне от 200 до 500 долларов США или даже меньше).

Если размер, вес, мобильность, мощность аккумулятора и т. Д. Должны в конечном итоге стать решающими факторами, прочный мини-ноутбук (дополнительный ноутбук) может быть лучшим вариантом, но разработка для / на промышленном планшетном ПК гарантирует, что ваша работа является переносимым и может быть легко перенесен на другую цель.

Обзор планшетных ПК повышенной прочности приведен здесь .

Кроме того, для дальнейшего исследования, согласно веб-сайту Национальной ассоциации афазиса , эти устройства называются «Устройства усиления связи»:

Устройство усиления связи - это фраза, придуманная для описания различных вспомогательных средств. к общению. Это может относиться к низкотехнологичному устройству (например, доске с алфавитом) или к очень высокотехнологичному устройству (например, к компьютеру, который управляется морганием глаз его пользователя). Критически важно сопоставить коммуникационные потребности и возможности пользователя с правильным устройством.

Может быть, кое-что из этого пригодится, всего наилучшего!

http://www.pecsusa.com/

Это часто используемый предмет в мире терапии.