Aplikacja do fitness trackera rozpoznaje ton głosu i emocje rozmówcy

Naukowcy tworzą technologię, która z rozmowy wychwyci znacznie więcej niż słowa. Innowacyjna aplikacja w sportowej opasce może bowiem odgadnąć, w jakim nastroju jest rozmówca. W jakich zastosowaniach ma się sprawdzić?

  1. Gdzie powstało oprogramowanie analizujące emocje?
  2. Z jaką dokładnością je odczytuje?
  3. Czy analizuje jednocześnie mowę i funkcje ciała?
  4. Skutki jakich chorób ma pomóc zniwelować?

Dynamiczna analiza głosu

Aplikację stworzył zespół naukowców z prestiżowego Instytutu Technologicznego w Massachusetts (MIT), a badania są prowadzone w ramach Centrum Strategii i Innowacji Samsunga. Oprogramowanie zainstalowano na jego opasce Simband, mierzącej ruch, puls, ciśnienie i temperaturę skóry.

To pierwszy eksperyment mierzący nie tylko dane nt. aktywności, lecz również mowy: tonu i dynamiki głosu oraz użytego słownictwa. Analiza odbywa się bez przeszkód podczas naturalnej, swobodnej rozmowy.

Potwierdzona eksperymentalnie precyzja wskazań

Na podstawie zebranych danych werbalnych i fizjologicznych oprogramowanie określa ton rozmówcy w poszczególnych 5-sekundowych fragmentach wypowiedzi. Wykorzystując mechanizmy głębokiego uczenia, z 83-proc. dokładnością rozpoznaje go jako wesoły, smutny bądź neutralny.

Doświadczenie przeprowadzono na 31 rozmowach trwających kilka minut. Analizowały je dwa algorytmy: jeden określał nastrój podczas całej rozmowy, a drugi – w czasie jej poszczególnych, 5-sekundowych segmentów. Oprogramowanie trafnie rozpoznało dłuższe przerwy i monotoniczny wydźwięk głosu jako smutek, a wypowiedzi dynamiczne i ożywione jako radość.

Analogicznie zachował się przekład mowy i funkcji ciała: smutniejsze wypowiedzi zdradzała adekwatna reakcja układu krążenia i charakterystyczne gesty, jak np. ukrycie twarzy w dłoniach. Skuteczność algorytmu podczas eksperymentów przekroczyła wcześniejsze dokonania w tej dziedzinie o 7,5 proc.

Zobacz również: Pierwsze wrażenia: Samsung Galaxy TAB

Niwelowanie skutków zaburzeń i chorób

Kolejnym etapem rozwoju projektu ma być poprawa dokładności i rozszerzenie zakresu rozpoznawania emocji o takie jak znużenie, napięcie czy ekscytacja. Model smutny-neutralny-wesoły ma być jedynie punktem wyjścia dla znacznie obszerniejszej analizy. W planach jest również wykorzystanie komercyjnie dostępnych urządzeń, takich jak Apple Watch.

Przyszłość tworzonego przez naukowców produktu ma istotnie ułatwić codzienne funkcjonowanie osobom cierpiącym na szereg specyficznych chorób. W pierwszej kolejności wymienia się zespół Aspergera, jednak wynalazek sprawdzi się także w innych zaburzeniach skutkujących niepoprawnym rozpoznawaniem emocji rozmówcy.

Choć twórcy urządzenia nie dzielą się takimi planami, możemy również wyobrazić sobie stosowanie tego rozwiązania w marketingu, dzięki czemu otrzymamy personalizowane reklamy, uwzględniające nasz nastrój. Jest ci smutno i źle? Oto najlepsza czekolada na świecie! Albo whisky. Masz dobry nastrój? Szybko, zrób datek na pomoc humanitarną. Możemy tylko wyobrazić sobie, jak bardzo skuteczny będzie taki przekaz.

Źródło: News.mit.edu

Podziel się:

Przeczytaj także:

Ten artykuł nie ma jeszcze komentarzy

Pokaż wszystkie komentarze

Także w kategorii Technologie:

Binairy Talk – dane zapisane w obłokach dymu. Odczytamy je laserem Życie na pokaz. W sieci udajemy zdrowych i szczęśliwych, bo zmuszają nas różne aplikacje Nietypowe zastosowania WD-40. Do czego można go wykorzystać? Unikalne hasła: zakała współczesnego internetu. Jak pozbyć się tego problemu? Jak oni podrabiają! Chińczycy skopiowali kuchenkę gazową Apple'a i... alpejski kurort Bałakława - tajna baza radzieckich okrętów podwodnych Niesamowity XC-120 Packplane: eksperymentalny samolot z lat 50. Kosmiczne technologie, których używamy na co dzień Tego używaliśmy przed internetem. Skazane na zapomnienie stare nośniki danych Cyfrowi aktorzy w filmach. Jak wyglądała droga od prostych modeli 3D do fotorealizmu? Jaki nóż wybrać? Najlepsze scyzoryki i foldery za 50, 100 i więcej złotych Tego się po Apple nie spodziewałeś. 13 nieznanych faktów Były inżynier Mozilli odradza antywirusy i poleca Windows Defendera Awaryjność dysków HDD w 2016 roku Top 4 najlepszych słuchawek dla sportsmenki Luka w firmware routerów Netgear: zagrożonych może być ponad milion urządzeń Monitory 5K dla MacBooków Pro bezużyteczne w pobliżu routerów Facebook zastąpi mailowe odzyskiwanie haseł usługą Delegated Recovery Anima Kronaby: eleganckie inteligentne zegarki o 2-letnim czasie pracy na baterii Seagate obiecuje rekord: dysk HDD 16 TB już w przyszłym roku Hatsune Miku: oto przyszłość muzyki. Ta Japonka zawsze będzie miała 16 lat ZeroTech Rollcap: pierwsza kamera sportowa 4K z wbudowanym, 3-osiowym gimbalem Satechi USB-C Power Meter: elektroniczny miernik pomoże zapobiec uszkodzeniu komputera Selfly: zaskakujące połączenie drona do selfie z obudową na smartfona

Popularne w tym tygodniu:

Nietypowe zastosowania WD-40. Do czego można go wykorzystać? Życie na pokaz. W sieci udajemy zdrowych i szczęśliwych, bo zmuszają nas różne aplikacje Unikalne hasła: zakała współczesnego internetu. Jak pozbyć się tego problemu? Tego używaliśmy przed internetem. Skazane na zapomnienie stare nośniki danych Jak oni podrabiają! Chińczycy skopiowali kuchenkę gazową Apple'a i... alpejski kurort Bałakława - tajna baza radzieckich okrętów podwodnych Developerzy Microsoftu zdradzają tajemnicę datowania sterowników na 2006 rok Kosmiczne technologie, których używamy na co dzień Niesamowity XC-120 Packplane: eksperymentalny samolot z lat 50. Fast Forward Gita: inteligentny osobisty transporter zaskakuje możliwościami W dobie Internetu rzeczy hakerzy mogą zaatakować nawet przez lodówkę. Wywiad z Karoliną Małagocką z F-Secure Growler Chill: inteligentny domowy nalewak do piw kraftowych