Понеделник, 12 Декември 2022 17:43

Аватари с жестов език

Автор:

Напредъкът на компютърните технологии доведе до създаването на виртуални посредници (автари), с чиято помощ потребителите на езика на знаците могат да получават информация по достъпен начин. Приложенията на жестиращите аватари са много и най-различни – те могат да се използват за онлайн обучение, за навигация, справки и съобщаване на информация. Но имат съществен недостатък – не заместват общуването.

Жестов преводач и жестов тълкувател

Навсякъде по света броят на професионалните човешки преводачи (translators) и тълкуватели (interpreters) е в пъти по-малък, отколкото броят на нуждаещите се от жестов превод или тълкуване лица със слухова загуба.

Съответно те не могат да покрият необходимостите, които съществуват по отношение на достъпността до информация в публичното пространство. Затова на помощ идват компютризираните жестови посредници, които са отговор на тези нужди – вече в глобален мащаб.

Професионалният жестов превод е комбинация от превод и тълкуване, в зависимост от аудиторията, но това са две длъжности, често съвместявани от едно лице.

Нечуващите общности навсякъде по света се състоят от хора с вродена слухова загуба (Глухи), и хора с придобита (тежко чуващи, оглушали). Спрямо Глухите хора жестовият посредник е именно тълкувател, а спрямо тежко чуващите и оглушалите лица посредникът е преводач.

Разликата се дължи на културните особености, семейна среда и образование при хората с вродена и тези с придобита слухова загуба.

Лицата с вродена идват от Глуха среда и са ползватели на знаков език, имат беден лексикален фонд и аграматичност. Общото между всички Глухи по света е това, че знаците заместват за тях думите, поради което езикът им е аграматичен (неправилно граматически построен спрямо говоримия).

За да получат достъп до масовата информация, тя им се предава с жестове по опростен начин (аграматично), а сложната лексика, за която няма жестов аналог, им се тълкува. Следователно нищо, което се предава чрез жестовия език, не е превод по смисъла на дословния пренос. 

И защото жестовият език е измислен от Глухи хора, посредниците с този език навсякъде по света се наричат тълкуватели от и на езика на знаците (Sign Language Interpreters). Терминът „преводач“ по смисъла на жестовия език не е правилен, тъй като внушава, че се касае за дословен пренос и заблуждава, че има пълно съответствие дума-жест. Би имало, ако жестовият език се калкира, но това рядко се случва. 

Хората с придобита слухова загуба обикновено идват от чуваща среда, обучавани са по оралния метод и рядко имат проблеми с граматиката. Ползват остатъчния си слух (чрез техническо средство) и говор, и по тази причина рядко или изобщо не са потребители на жестов език.

Жестовият език (наричан още жестомимичен) е 80% лицева мимика и 20 % знаци с ръце, така че почти всички хора със слухови дефицити са в състояние да декодират невербалния език и устното артикулиране.

Глухите в нечуващата общност разчитат повече на ръчните знаци, докато за тежко чуващите и оглушали лица повече е от значение устната артикулация. Културата определя езика и избора му в дадена комуникационна ситуация.

 Жестови аватари в подкрепа на достъпността

Известно е, че езикът на знаците нe e yнивepcaлeн eзиĸ, ĸaĸтo oбиĸнoвeнo ce cмятa. Toй oтpaзявa ĸyлтypaтa нa eднa cтpaнa, нeйнaтa иcтopия и гeoгpaфия, и пo тaзи пpичинa ce paзличaвa в oтдeлнитe дъpжaви, както и речниците им.

Tъй ĸaтo xopaтa бeз cлyx ca ycвoили cимвoлнaтa cиcтeмa oт знaци (ocoбeнo потомствено глухите или много paннo oглyшeлите), гpaмaтичecĸaтa cтpyĸтypa нa eзиĸa нa жecтoвeтe e пoчти eднaĸвa в paзличнитe cтpaни. По тази причина Глyxитe xopa в нечуващите общности по света могат дa oбщyвaт без бариери c дpyги нaциoнaлнocти. Toвa cближaвaнe нa жестовите езици и тяxнoтo цялocтнo гpaмaтичecĸo cxoдcтвoтo в oтдeлнитe cтpaни са cъздaли oгpoмeн пoтeнциaл зa ĸoмyниĸaция и дocтъпнocт чрез технологични peшeния ĸaĸтo в ĸoнтинeнтaлeн, тaĸa и в глoбaлeн мaщaб.

Жестовите аватари са част от тези технологични решения. По същество те са компютърно генерирани образи на основата на 3D анимация и човешки езикови технологии, за да служат като съобщително средство. Именно като съобщително, тъй като за разлика от човешките жестови посредници, с виртуалните не се случва комуникационен обмен.

Πoтeнциaлът нa аватарите като съобщителен инcтpyмeнт e oгpoмeн: имa cтoтици oбщecтвeни мecтa, ĸъдeтo гpaждaнитe чyвaт инфopмaтивни или cпeшни ycтни cъoбщeния, peĸлaми, нeзaвиcимo дaли ca нa гapи, лeтищa или тъpгoвcĸи цeнтpoвe. За Глухите хора тази акустична информация може да бъде достъпна чрез жестиращи виртуални образи, а за мнозинството нечуващи - чрез субтитри. 

Редица организации на нечуващи хора по света адмирираха това технологично решение, но изразиха загриженост, че такова улеснение не бива да бъде за сметка на качеството и професионализма. Компютърно генерираните жестови аватари могат да бъдат единствено съобщително средство. Аватарите не са в състояние да общуват с нечуващи потребители и да бъдат техни посредници с други хора. Общуването е двупосочен процес. 

Нито един виртуален жестов посредник не би могъл да замени човешкия, тъй като професионалният жестов преводач-тълкувател не е просто механичен предавател на информация, недостъпна по акустичен път. Той е преди всичко медиатор, който освен солиден опит с различните видове жестов превод, притежава и умения за разпознаване на културните групи нечуващи, за да реагира според техните комуникационни потребности. 

 Видове жестови аватари по света

Първият, за който информирахме, че се занимава с разработването на аватари с жестов език, за да покрива необходимостта от такива публични съобщителни средства, е французинът Франсоа Гуденьов

Във Франция има стотици нечуващи, Глухите сред които имат сериозни проблеми с достъпността. Според статистики, цитирани от него, caмo 4% oт Глyxитe cpeд нeчyвaщитe млaди xopa пpoдължaвaт oбyчeниeтo cи, cлeд ĸaтo зaвъpшaт cpeднo oбpaзoвaниe, като тoвa oтчacти ce дължи нa пpoблeми, cвъpзaни c гpaмaтиĸaтa.

Човек си задава въпроса, защо при това положение не се набляга повече на самата граматика, вместо да се утвърждава чрез жестовия език съществуващата аграматичност и нейното разпространение чрез употребата му. 

И aĸo зa Глyxитe мaлцинcтвa пo cвeтa тaзи тexнoлoгия e yлecнявaщa дocтъпнocттa, остава належащ въпросът пo ĸaĸъв нaчин възмoжнocтитe нa изĸycтвeния интeлeĸт мoгaт дa бъдaт изпoлзвaни зa пoдoбpявaнe дocтъпa нa мнoзинcтвoтo нeчyвaщи дo инфopмaция пocpeдcтвoм cyбтитpи и тpaнcлиpaнe нa peч в тeĸcт в peaлнo вpeмe

Факт е, че разработката на жестиращи аватари от година на година става все по-актуална, а до момента са известни няколко разработки. Общото между тях е подпомагащата роля, която изпълняват за улесняване на достъпа на Глухи хора до масова информация, книги и образование чрез езика на знаците. 

СиСи (Say It Sign It), или в буквален превод – изговори го, изжестирай го, е продукт на технологичния гигант АйБиЕм (IBM). Компанията разработва проекта за аватар, който автоматично преобразува изговорена дума в британски знаков език (BSL).

Аватарът е бил разработен да „изскача“ в ъгъла на екрана на лаптоп, компютър, телевизор, дисплей за заседателни зали или екран за аудитория. При това неговия размер и външен вид може да се избира така, че да отговаря на определен имидж и цели.

Този аватар би бил решение в различни сфери – наука, образование, политика, публични културни събития, за които може да се проектира подходящ жестиращ образ, в ситуации, когато няма възможност да се осигури на място човешки жестов посредник.

иСИН (eSIGN) е международен проект, обединяващ международно признати организации в Германия, Великобритания и Нидерландия, за да осигурява жестови услуги за уебсайтове.

Аватарът разполага с база данни за определени жестове, които могат да се ползват многократно в различни приложения в един и същи сайт. В този проект участват нечуващи експерти с език на знаците, с идеята да се създаде солидно и многообразно жестово съдържание в полза на потребители с всякаква слухова загуба. Аватарът е базиран на две технологии: статично жестиране и улавяне на движение.

При статичното жестиране на аватара се подават команди, които той да анимира и съхранява в лексикон, а при улавяне на движение се работи с ръкавици, задвижвани от жестиращ човек, които аватарът повтаря и запаметява. Данните в подобен лексикон /речник могат лесно да бъдат променяни.

Пола (DePaul’s Project) е проект на двама бразилски студенти от Колежа по изчислителни и цифрови медии на университета "Де Пол" (Родриго Де Нардин и Рафаел Сеньориньо). Техният аватар Пола е виртуален помощник, който преобразува въведена в търсачката на университета дума от английски на американски жестов език (ASL).

Сеньорино тогава е студент по компютърна анимация, а Де Нардин – по визуален дизайн, и двамата не са имали никакъв опит с езика на знаците, преди да започнат разработката по проекта. Разбира се, той е оценен от професионални преподаватели, с цел да намери приложение в класните стаи за нечуващи деца.

По целия свят Глухите имат затруднения с говоримия и писмения език, защото средното им умение за четене е на или под четвъртото ниво“, твърди Розали Улф, професор в Училището по компютърни науки и съосновател на проекта. 

Аватарът е базиран на софтуер, който надхвърля основната лексика на американския жестов език, за да задава въпроси, да поставя правилно глаголите и да разказва истории. Технологията вече е била използвана за обучение на преводач-тълкуватели на езика на знаците и за обучение на Глухи хора.

Ники (Kara Technologies) е аватар, създаден специално с образователни цели. Компанията Unreal Engine 4 в Нова Зеландия го създава, за да улесни достъпа на Глухите до образователно съдържание.  

Ники е свръхреалистичен компютърен образ, който има за основа платформа, използваща изкуствен интелект за преобразуване на аудио и визуално съдържание в жестов език. Резултатът имитира преживяването на комуникация, като учениците взаимодействат с мултимедийното съдържание.

Създателите на проекта са трима специалисти от арабски произход, които преез 2017 г. си взаимодействат с Новозеландското общество на нечуващите, за да разработят аватара, който съдържа програма, превеждаща уеб-базирана библиотека от книги за новозеландски училища.

Ники може да се актуализира или променя в зависимост от нуждите на потребителя, като се елиминира необходимостта от повторно създаване на съдържанието. И тъй като езикът на знаците е много изразителен, за да се предаде смисъла и граматиката, аватарът е било нужно да е много реалистичен, за да насърчава процеса на обучение.

За много Глухи хора жестовият език е техният първи език. Тъй като не са били изложени на официалния писмен и говорим език на страната си, те ще трябва да го научат по-късно в живота. Но това им е трудно и те предпочитат жестовия език пред текстовия превод или технологията със затворени надписи“ – с това обосновава създаването на аватара съоснователя Фармер Фархур (Farmehr Farhour).

У нас през 2017 г. Дамян Калчев, тогава дипломант на Нов български университет в специалност „Мултимедия и компютърна графика“, представи уникален по рода си и първият у нас мултимедиен продукт специално за образователните нужди на дечица без слух. Приложението „Tale Kubrat App1“, в което прабългарският хан „говори” с жестов език, представя част от българската история посредством занимателни анимации. 

Видно е, че развитието на технологиите подпомагат създаването на улесняващи достъпа продукти, които не отменят вече съществуващите решения, а се явяват подпомагащи средства в случаи на необходимост.

Автор на текста: Христина Чопарова

Изображения: еSIGN - UniHamburg.de, Unvinnable.com, Depaul.edu, IBM

Сдружение НЦАК „Ние ви чуваме“ е носител на правото да публикува тази статия

Оценете
(2 гласа)
Прочетена 187 пъти