Stane sa aplikácia prekladu znakového jazyka niekedy realitou?

Reklama

Predstavte si svet, kde sú odstránené bariéry medzi hluchým a sluchom. Svet, v ktorom rozhovory plynule prúdia medzi tými, ktorí počujú zvuk, a tými, ktorí to nepočujú. Mohol by sa tento svet v blízkej budúcnosti stať skutočným?

Už v júni vyvinula skupina študentov marketingu na Berghs School of Communication koncepčné video pre fiktívny produkt s názvom Google Gesture. Súčasťou produktu bola nositeľná páska na zápästie a mobilná aplikácia, ktorá využívala elektromyografiu na čítanie svalových pohybov nepočujúcich osôb, ktoré robia znakový jazyk. Systém potom tieto signály odovzdal aplikácii, ktorá ich preložila do digitalizovaného hlasu a hovorila za osobu.

Sledovanie falošného marketingového videa bolo celkom vzrušujúce. V skutočnosti je tak vzrušujúce, že hlavné technologické stránky, ako napríklad Mashable, Slashgear a ďalšie, pôvodne ohlásili tento produkt ako skutočný, a neskôr sa museli sťažnosti preplatiť a ospravedlniť sa za ich chybu. Bola to čudná chyba, keď som to vzal do úvahy

je produkt Google s názvom Vyhľadávanie gestami Google [Už nie je k dispozícii], ktorý vám umožňuje kresliť gestá na mobilnú obrazovku a vyhľadávať kontakty, záložky a ďalšie.

Koncept študentov Berghovcov však predstavil pozoruhodný nápad vedúci k otázke - bolo by možné vytvoriť takúto aplikáciu pre skutočné?

Je možný preklad znakovej reči?

Šírenie marketingovej koncepcie na technickej úrovni ukazuje, že technológia využívajúca elektromyografiu (EMG) na „snímanie“ posunkovej reči nie je v skutočnosti taká príťažlivá. Už v roku 2009 vedci z Washingtonskej univerzity boli schopní použiť viac snímačov EMG na dekódovanie svalových pohybov a ich konverziu na skutočné gestá rúk a rúk.

Vedci v skutočnosti vybudovali kompletnú „knižnicu na rozpoznávanie gest“, ktorá identifikovala, ktoré svalové signály predstavovali ktoré gesto. Výskum dokazuje, že tento druh technológie je k dispozícii a je pripravený na implementáciu v takej aplikácii, ktorú predstavili študenti Berghsu.

Dosiahol to už niekto? Ak nie, prečo to nikto nerobí, a poskytuje nepočujúcim a nepočujúcim schopnosť komunikovať s niekým na svete prostredníctvom posunkovej reči?

Budúcnosť prekladateľskej technológie v reálnom čase

Pravda je, že niekto v skutočnosti pracuje na takejto technológii prekladu posunkového jazyka v reálnom čase.

Existuje spoločnosť s názvom SpeechTrans [Broken URL Removed], ktorá posúva limity prekladateľské technológie Zabudnite na Google Translate: 3 spôsoby, ako získať presný a rýchly prekladČi už plánujete uchádzať sa o prácu alebo byt v zahraničí, alebo hľadáte preložiť svoju webovú stránku, musíte veci správne zvládnuť aj s cudzím jazykom. Čítaj viac v posledných rokoch. SpeechTrans spolupracuje s technologickými partnermi na výrobe niektorých z najpozoruhodnejších prekladateľských služieb v reálnom čase na dnešnom trhu. Sú to služby, ktoré prekladajú textový chat do textového chatu, hlasový prevod textu na text a dokonca aj preklad jazyka reči hlasu v reálnom čase pomocou aplikácií pre mobilné telefóny a stolné počítače.

Aby preskúmala, či by sa technológia posunkového jazyka mohla stať realitou v blízkej budúcnosti, MakeUseOf sa posadil s generálnym riaditeľom SpeechTrans John Freim a COO Yanom Auerbachom, aby prediskutovali tento priekopnícky nový prekladateľská technológia Pochopte akýkoľvek jazyk pomocou týchto 5 webových stránok pre preklad jazykovVďaka technológii sa svet stal menším miestom. Ľudia z každej časti tejto planéty používajú veľa rovnakých nástrojov, navštevujú niektoré z rovnakých webových stránok a kombinujú rôzne chatovacie miestnosti online. Zariadenie ... Čítaj viac a ako ďaleko môže byť do budúcnosti.

Vývoj aplikácie pre preklad znakového jazyka

Muo: Je možné v preklade reči posunkového jazyka na reč, ktorý v tomto koncepčnom videu Gesture Google vykreslili študenti Berghovcov, urobiť taký posun?

John: Povedal by som, že táto technológia je k dispozícii na jej vývoj. V súčasnosti spolupracujeme so spoločnosťami Microsoft a Intel na výskume niektorých technológií, ktoré prichádzajú s ohľadom na hardvér a softvér. Predstavujeme si schopnosť používať túto technológiu na rozpoznávanie posunkovej reči a potom ju previesť na reč a zvukový výstup.

Muo: Momentálne aktívne pracujete na vývoji tejto technológie?

yan: Takže existoval zákazník, ktorý používal náš softvér, a myslel som, že by bolo úžasné, keby sme ho mohli upraviť tak, aby ho mohli používať ľudia so sluchovým postihnutím telefonovať z našej aplikácie, komunikovať bez potreby znakového jazyka, keď sú osobne alebo bez potreby služby typu TTY pre telefónne hovory hovory. Tento produkt sme vyvinuli a s financovaním od spoločností Microsoft a Intel sme spustili program SpeechTrans pre sluchovo postihnutých v systéme Windows 8.1, čo odstraňuje potrebu znakovej reči.

Muo: Ako funguje aplikácia „in-person“?

yan: Je tu režim počúvania a režim vstupu. Keď teda s vami niekto hovorí, prepnete sa do režimu počúvania a textom napíše všetko, čo na obrazovke hovorí. Potom, keď odpoviete naspäť, napíšete to a potom nahlas vyslovíte, čo píšete. Pomocou telefónu stačí vytočiť telefónne číslo ktorejkoľvek osoby a keď na ňu odpovie, stáva sa to ako okamžitá správa. Čokoľvek hovoria, dostanete sa ako IM. Potom sa bez ohľadu na to, čo píšete, nahlas vysloví telefón. Toto je prvá fáza.

Blízko preklad budúcej posunkovej reči

Muo: Aké technológie môžu ľudia očakávať v blízkej budúcnosti? Aká je ďalšia fáza?

John: Predpokladáme - pre niekoho, kto má schopnosť používať iba posunkovú reč -, aby to mohol urobiť pred zariadením, ako je telefón, počítač alebo laptop. Intel má nový kamerový systém a Microsoft robí rovnako dobre s Kinectom, ktorý rozpoznáva gestá.

Muo: Ako je to lepšie ako koncept skupiny, ktorý navrhli študenti Berghovcov?

yan: Náš bude v zásade fungovať tak, že nebude vyžadovať, aby ste si niečo položili na rameno. Po ruke rozpozná 64 bodov. Používame beta verziu kamery RealSense od spoločnosti Intel. Takže nielen dokážeme rozoznať celý posunkový jazyk a rôzne dialekty posunkového jazyka, ale dokážeme tiež byť schopný rozpoznať emócie, výrazy tváre a ďalšie malé nuansy a potom ich premeniť na hovorené slová ako dobre.

To si nebude vyžadovať, aby ste nosili rukavice alebo čokoľvek. Zameriavame sa na tento trh konkrétne preto, lebo radi pomáhame ľuďom všeobecne. Nechceme len pomôcť ľuďom, ktorí chcú hovoriť v mnohých rôznych jazykoch, ale tiež chceme pomôcť ľuďom, ktorí nehovoria žiadnym jazykom. Táto technológia existuje a neexistuje dôvod, prečo by kvalita ich života nemala byť iná ako tá naša.

John: Je to uskutočniteľný koncept. Je to len iný vstup a výstup. Niektoré rozhovory, ktoré sme viedli so spoločnosťou Microsoft o niektorých budúcich technológiách, sú práve tam niekto by si skutočne mohol implantovať mikročip do krku a priamo mu načíta mozgovú vlnu vzory. Takže ak pomáhate ľuďom, ktorí nevedia komunikovať, skutočne by sme niečo také videli ako nasadenie fázy tri.

Minulý rok vyšla skupina študentov, ktorí prišli s funkčným prototypom rukavice, ktorá bola pripojená k počítaču. Gestá, ktoré ste urobili pomocou rukavice, sa potom rozpoznajú a prevedú do posunkovej reči. Takže už majú schopnosti so súčasnou technológiou.

Našou víziou je, že naozaj nechceme vytvárať doplnky, ako sú ramenné pásy, ktoré musíte obliecť. Malo by byť pre nich prirodzené a plynulé, aby to robili pred videokamerou. 90% ľudí, ktorí hovoria v komunikácii, je v skutočnosti rečou ich tela. Keďže budeme mať prístup k rozpoznaniu tváre, gestám a emóciám, budeme môcť tieto údaje používať ako aby ste sa uistili, že preklad a to, čo sa snažia sprostredkovať, sú vyjadrené správne tvoriť.

Muo: Je spoločnosť Intel v rámci päťročnej škály zavedenia tejto technológie rozpoznávania posunkového jazyka?

John: Spoločnosť Intel má určite k dispozícii veľa zdrojov. Ich technológia a softvér prichádzajú tempom, keď môžeme dosiahnuť, aby sa to stalo pomerne rýchlo.

Muo: Máte časový rámec, kedy dúfate, že sa táto technológia dostane na trh?

John: Pre posunkovú reč je to asi 12 až 18 mesiacov.

Muo: Má niekto tam vonku niečo podobné pre preklad do posunkovej reči?

John: Videla som YouTube spoločnosti IBM, ktorý robil prototyp, kde niekto robil posunkovú reč, ale bol to dôkaz koncepcie a mal iba tri alebo štyri slová, ktoré rozpoznal. Máme viac ako päťstotisíc slov, s ktorými plánujeme zaviesť, takže to posunie na inú úroveň.

záver

Aj keď vízia, o ktorej sa študenti v Berghs snívali, sa nemusí stať aplikáciou prekladu do posunkového jazyka budúcnosti, ešte to neznamená, že sa takýto koncept nestane. Práca spoločností SpeechTran, Intel a Microsoft dokazuje, že preklad znakového jazyka sa takmer za pár rokov stane skutočnou technológiou. Pravdepodobne sa nejedná o ťažkopádne paže, ale o nič viac ako o špeciálnu videokameru a mobilnú aplikáciu.

Prostredníctvom kúzla gestá a rozpoznávania tváre táto aplikácia pre preklad do posunkového jazyka sľubuje úplnú revolúciu medziľudských komunikácií pre stovky tisíc ľudí. sluchovo postihnutých 5 najlepších zdrojov pre používateľov zariadení Mac a Apple so zdravotným postihnutím Čítaj viac alebo ťažko počujúcich jednotlivcov z celého sveta.