28 gruodžio, 2018

Technologijų šuolis: emocijas atpažįstanti programėlė akliesiems per sekundę padaro 75 nuotraukas

Virtualiose parduotuvėse kiekvieną dieną atsiranda šimtai naujų išmaniesiems telefonams skirtų programėlių. Daugelis jų – universalios, tinkamos daugybės žmonių poreikiams patenkinti ir vos keli procentai yra pritaikytos labai mažoms visuomenės grupėms – pavyzdžiui, akliesiems ar silpnaregiams. Būtent todėl „Huawei“ sukūrė programą „Facing Emotions“, kuri fiksuoja žmonių emocijas ir paverčia jas tam tikrais garsais, kuriuos atpažinęs aklasis gali suprasti, kai jo pašnekovas šypsosi ar demonstruoja kitą emociją.

„Aklieji ir silpnaregiai yra kur kas jautresni jutimams ir garsui – tai padeda jiems orientuotis erdvėje, tačiau neverbalinė komunikacija yra didelis iššūkis bendraujant su kitais žmonėmis. Norėdami panaikinti šį barjerą, mes sukūrėme „Facing Emotions“ programą. Tai nebuvo lengva – norint sukurti specialių poreikių žmonėms pritaikytą programą, reikia įdėti daug darbo, viskas turi būti tobula – netikslumų palikti negalima“, – pasakoja „Huawei“ Baltijos šalių vartotojų verslo grupės vadovas Yanfei.

Procesoriaus našumas atveria neribotas galimybes

Tokioms programoms kaip „Facing Emotions“ reikalingi ypatingai galingi išmanieji telefonai – tai paaiškina, kodėl tokio lygio pagalbininkas nebuvo sukurtas anksčiau. „Huawei Mate 20 Pro“ esantis „Kirin 980“ procesorius leidžia apdoroti iki 75 nuotraukų per sekundę – tai leidžia dirbtiniam intelektui realiu laiku atpažinti fotografijose užfiksuotus objektus, juos suskirstyti ir tą pačią akimirką reaguoti.

Kai telefone esanti kamera yra nukreipiama į žmogų ar jų grupę, programa užfiksuoja visus iki 3 metrų atstumu nutolusių asmenų veidus. Ji stebi fiksuoja net menkiausius pokyčius kiekviename veide, o atpažinusi vieną iš septynių pagrindinių emocijų, apie jas neregį informuoja tam tikru jam girdimu garsiniu signalu. Dėl išmaniajame telefone esančio galingo procesoriaus visa tai vyksta realiu laiku – laiko skirtumas tarp pašnekovo šypsenos ir garsinio signalo skaičiuojamas milisekundėmis.

Dešimtys veido raumenų yra atsakingi už daugiau nei 10 tūkstančių judesių, o dalis jų, atlikti vienu metu, reiškia tam tikrą emociją. Visa tai „Huawei“ specialistai kartu su žinomu psichologu, veido išraiškų ekspertu Paulu Ekmanu identifikavo bei surašė į vieną duomenų bazę, daug kartų išbandė visus algoritmus ir užtikrino, kad jie veiktų nepriekaištingai. Tai buvo bene daugiausiai laiko pareikalvusi užduotis.

„Per kelias milisekundes mes savo veido judesiais galime išreikšti emociją apie tai net nepagalvodami. Ar tai būtų pakeltas lūpų kamputis, ar antakis, ar išreikšta grimasa – visa tai parodo, kaip žmogus jaučiasi. Žodžiais jis to gali ir nepasakyti, tačiau programa atpažins ir perduos informaciją neregiui, tarsi jis pats tas emocijas matytų“, – pasakoja „Huawei“ atstovas Yanfei.

Į „Facing Emotions“ algoritmą įrašytos septynios pagrindinės žmonių emocijos: džiaugsmas, liūdesys, nuostaba, baimė, pasibjaurėjimas, panieka bei pyktis. Tai yra universalios, visame pasaulyje tokiais pat būdais išreiškiamos emocijos – jos tokios elementarios, kad žmonės jas demonstruoja anksčiau nei išmoksta kalbėti.

Programėlės kūrėjai – ir patys neregiai

Programą kūrė „Huawei“ inžinieriai kartu su grupe aklųjų ir silpnaregių, kurie kiekviename gamybos etape atlikdavo daugybę bandymų. Bene didžiausias klausimas programuotojams buvo esminis – ar neregiai apskritai sugebės naudotis lietimui jautrų ekraną turinčiu telefonu? Kaip parodė bandymai, tai problemų nesukėlė.

„Svarbiausia buvo suprasti, kaip šie žmonės panaudoja telefonus savo kasdienybėje. Rezultatai mus nustebino: telefone įdiegtos naujosios „Android 9“ sistemos, intuityvumas ir naudojimo paprastumas buvo įvertinti puikiai, neregiai neturėjo jokių problemų priprasdami prie techniškai pažangiausio išmaniojo telefono“, – teigia Yanfei.

Kiekvienas tikslinės grupės dalyvis vėliau pažymėjo jam svarbiausius dalykus, kuriuos tokio tipo programa galėtų sugebėti, o programuotojai reguliariai duodavo jiems išbandyti naujausią „Facing Emotions“ versiją ir įvertinti progresą.

Silpnaregiai prisidėjo kuriant ne tik programinį kodą, bet ir vartotojo aplinkos išvaizdą – todėl joje dominuoja dvi spalvos, juoda ir geltona. Tai lėmė kelios priežastys: visų pirma, šios spalvos sudaro didelį kontrastą, o antroji priežastis – geltona yra paskutinė, kurią silpnaregiai bei spalvų neskiriantys žmonės dar gali atpažinti.

Specialius garsus, informuojančius apie pašnekovų emocijas, kūrė taip pat neregys – žinomas kompozitorius Tomaszas Bileckis. Jis sukūrė tokius garsus, kurie būtų trumpi, lengvai atpažįstami, neblaškantys aplinkos ir nenutraukiantys pokalbio. Tuo pačiu jie girdimi bei suprantami net ir triukšmingoje aplinkoje – pavyzdžiui, žmonių pilname kambaryje ar lauke pučiant stipriam vėjui.

Tokia programa kaip „Facing Emotions“ siekiama įrodyti, jog išmanusis telefonas gali būti panaudojamas įvairiausiems tikslams – ne tik skambinimui ar naršymui internete, bet ir kitoms funkcijoms, pritaikytoms siauresnėms visuomenės grupėms. Jau greitai programėlę, kartu su „Mate 20 Pro“ telefonais, galės išbandyti ir Lietuvos aklųjų ir silpnaregių sąjungos nariai.


16 kovo, 2025

Sekmadienio vakarą baigėsi balsavimas pirmalaikiuose Panevėžio miesto bei Joniškio rajono merų rinkimuose. Vyriausiosios rinkimų komisijos (VRK) duomenimis, Panevėžyje iš viso […]

16 kovo, 2025

Lietuvos savivaldybių asociacijos (LSA) nariai ragina Lietuvos banko (LB) valdybą, Vyriausybę bei Finansų ministeriją iki 2026 m. užtikrinti, kad dalis […]

Mindaugas Sinkevičius. Mariaus Morkevičiaus (ELTA) nuotr.
14 kovo, 2025

Valstybinį kaltinimą Jonavos mero Mindaugo Sinkevičiaus byloje palaikęs ir bylos tyrimą kontroliavęs Kauno apygardos prokuratūros prokuroras Darius Valkavičius kreipėsi į […]

12 kovo, 2025

Sulaikytas krovininio laivo, kuris Šiaurės jūroje atsitrenkė į stovintį tanklaivį ir sukėlė didelį gaisrą, kapitonas yra Rusijos pilietis, trečiadienį agentūrai […]

12 kovo, 2025

Trečiadienį Vyriausybė priėmė nutarimą, kuriuo nuo šių metų rugsėjo šalies regionuose veikiančiose gimnazijose trečias ir ketvirtas klases bus leidžiama formuoti […]

12 kovo, 2025

Medienos perdirbimo įmonėje Šilalės rajone trečiadienį įvyko sprogimas, pranešė Bendrasis pagalbos centras (BPC). Anot BPC, 12 val. 25 min. Bendrajame […]

11 kovo, 2025

Lietuvos Nepriklausomybės atkūrimo dienos išvakarėse, Lietuvos nacionalinis muziejus perėmė unikalius su Baltijos šalių elektros tinklų sinchronizacija susijusius artefaktus. Juos muziejui […]

10 kovo, 2025

Vidaus reikalų ministerija (VRM) pirmadienį pristatė pasirengimui ekstremalioms situacijoms skirtą mobiliąją programėlę LT72. Joje gyventojams pateikiami algoritmai, kaip reikėtų elgtis […]

10 kovo, 2025

2023 m. Europos Sąjungoje (ES) gimusių kūdikių skaičius sumažėjo 5,4 proc., iki 3,67 mln. mažylių, o tai yra didžiausias nuosmukis […]

9 kovo, 2025

Vilniuje prie Baltarusijos ambasados sekmadienio vidurdienį kelios dešimtys žmonių protestavo prieš Aliaksandro Lukašenkos režimo vykdomą opozicijos atstovų įkalinimą ir kankinimą […]

9 kovo, 2025

Panevėžio rajone, automobilyje ir garaže, pasieniečiai aptiko daugiau nei 200 tūkst. eurų vertės nelegalių cigarečių krovinį, pranešė Valstybės sienos apsaugos tarnyba […]

7 kovo, 2025

Lietuvos Respublikos Prezidentas Gitanas Nausėda ir pirmoji ponia Diana Nausėdienė, šią savaitę buvę vizito Vatikane ir Romoje, parašė padėkos laišką […]

7 kovo, 2025

Valstybės saugumo departamentas (VSD) ir AOTD visuomenei pristatė jau dešimtąjį Grėsmių nacionaliniam saugumui vertinimą. Kaip ir kasmet, šiame dokumente apžvelgiami […]

6 kovo, 2025

Ketvirtadienį Vyriausioji rinkimų komisija (VRK) atšaukė savo sprendimą dėl trečiadienį Lietuvos Aukščiausiojo Teismo (LAT) išteisinto Mindaugo Sinkevičiaus Jonavos mero mandato […]

EPA-ELTA nuotr.
6 kovo, 2025

1990-ųjų pradžioje buvau jaunas Tarptautinio valiutos fondo (TVF) ekonomistas pagrindiniame politikos formavimo departamente. Tuo metu vykdavau į TVF misijas Bulgarijoje, […]

5 kovo, 2025

Vilnius teiks paraišką tapti Europos jaunimo sostine 2028 m. – tam šiandien pritarė sostinės Taryba. Skiriant šį titulą, vertinamas jaunimo […]

Mindaugas Sinkevičus
5 kovo, 2025

Lietuvos Aukščiausiasis Teismas (LAT) trečiadienį nutraukė „čekiukų” byloje nuteisto buvusio Jonavos mero Mindaugo Sinkevičiaus bylą. Kasacinis teismas konstatavo, kad tuomečio […]

5 kovo, 2025

Visuomenės dėmesį patraukusi lietuvio Aurimo Mockaus gelbėjimo operacija prie Australijos krantų atskleidė svarbų aspektą – kaip teisiškai reglamentuojamos tokios gelbėjimo […]

4 kovo, 2025

Universitetas „Vilnius Tech“ gavo 669 tūkst. eurų finansavimą Lietuvos kibernetinio saugumo specialistų ugdymui, kurį skiria tarptautinės technologijų korporacijos „Google“ įsteigta […]

4 kovo, 2025

Aplinkosaugininkai, sausį išnagrinėję navigacinių portalų duomenis, identifikavo šalyje keturias vietas, kur buvo neteisėtai ardomos transporto priemonės, pranešė Aplinkos apsaugos departamentas […]

Regionų naujienos