Az emberi arcot attól függően, hogy hogyan számolja őket, 23 és 43 izom biztosítja, amelyek közül sok a bőrhöz kapcsolódik, és a túlélés szempontjából nem gyakorol nyilvánvaló funkciót. Az idegen, aki egy emberi mintát elszigetelten vizsgál meg, nem tudná, mit tegyen belőlük. A homlokra, a szemöldökre, az ajkakra és az arcára dörzsölve az izmok rengeteg információt sugároznak érzelmi állapotunkról, érdeklődési szintjükről és éberségünkről. Rendkívül hatékony kommunikációs eszköz - szinte pillanatnyi, általában pontos, amely meghaladja a legtöbb nyelvi és kulturális akadályt. De néha az adatok elvesznek, figyelmen kívül hagyják vagy félreértelmezik őket. Ha egy fakitermelő mosolyog az erdőben és senki sem látja őt, valóban boldog volt?
Ebből a történetből
[×] BEZÁR
Olyan hosszú hangulatjelek. A tudós olyan technológiát fejleszt ki, amely képes felismerni és olvasni kifejezéseinket
Videó: Smithsonian Ingenuity Awards 2015: Rana el Kaliouby
Kapcsolódó olvasmányok
Érzelmi intelligencia: Miért fontosabb, mint az IQ?
megveszRana el Kaliouby utálja, hogy ezt az információt pazarolni kell. Találkozva az El Kaliouby-val a kicsi irodájában, Waltham-ban, Massachusetts-ben, látom, hogy összehúzza zygomatikus fő izomját, a száj sarkait emeli, és orbicularis oculi-ját ráncolja a szemének külső sarkaira. Mosolyog, és arra a következtetésre jutottam, hogy üdvözöl engem, mielőtt még ki is mondaná a „hello” szót. De ma sok társadalmi csereprogram valósidejű, szemtől szembeni kapcsolat nélkül zajlik. Itt jön be Kaliouby és a társaság.
El Kaliouby, aki 37 éves, gyakran mosolyog. Kerek, kellemes, kifejező arccal és ügyesen viselkedik, és a gyorsan növekvő tech-startup - anti-Bezos, un-Zuckerberg - társalapítójaként viselkedik. Cégét, az Affectiva-t, amelyet 2009-ben alapított egy MIT Media Lab akkori kollégájával, Rosalind Picard-nal, a technológia élvonalában helyezkedik el, hogy számítógépeket használjon az emberi arckifejezések észlelésére és értelmezésére. Ez az „érzelmi számítástechnikának” nevezett mező arra törekszik, hogy megszüntesse az emberi lények és a gépek közötti kommunikációs szakadékot egy új interakciós mód hozzáadásával, beleértve a mosolyok, önelégültségek és emelt szemöldök nemverbális nyelvét. „Tevékenységünk előfeltétele az, hogy az érzelmek fontosak legyenek” - mondta el Kaliouby. Az érzelmek nem zavarják meg a racionális gondolkodásunkat, hanem irányítják és tájékoztatják. De hiányoznak a digitális tapasztalatunkból. Az okostelefon tudja, ki vagy és hol vagy, de nem tudja, hogy érzi magát. Célunk ezt megjavítani. ”
Miért kell az okostelefonnak tudnia, hogy érzi magát? Az El Kaliouby-nak számos választ kell adnia, amelyek mindegyike a számítógépek látszólag határtalan integrációját jelenti a mindennapi életünk rutinjaiba. Arra gondol, hogy „technológiát alkalmaz a házak megvilágításának, a hőmérsékletnek és a zenenek a hangulatainkra való reagálásához”, vagy olyan alkalmazásokat, amelyek adaptálhatják a film tartalmát az ön tudatalatti reakciója alapján, miközben nézel. Olyan programokat képzel el, amelyek figyelemmel kísérhetik az Ön kifejezését, miközben vezet, és figyelmeztet figyelmetlenségre, álmosságra vagy haragra. Mosolyog kedvenc ötletének említésére - „egy hűtőszekrény, amely érzékeli, ha stressz alatt van, és bezárja a fagylaltot”.
Különösen úgy gondolja, hogy az Affectiva és az a technológia, amely segít a mainstream bevezetésében, nagy segítséget nyújt az egészségügyben. Az új gyógyszert tesztelő kutató, vagy a beteget kezelő terapeuta csak időközönként kap visszajelzést, az önjelentés minden problémájának függvényében - például az öntudatlan vágy, hogy az orvos kedvére vágyjon, vagy a legfrissebb emlékeket kedvelő szelektív visszahívás. . El Kaliouby elképzel egy olyan programot, amely a tárgy laptopja vagy telefonja alatt fut, és amely egy pillanatra rögzíti a hangulatát egy adott időszak (egy nap, egy hónap) alatt, és összekapcsolhatja azt a idő vagy bármi más, amelyet az eszköz képes mérni vagy nyomon követni. „Nem is kellene egy kezelési program részét képeznie” - múlik. "Lehet, hogy a telefonján van, és ez azt mondja neked, hogy minden alkalommal, amikor az 'X' hívás negatív kifejezést ad, és valami olyat mond neked, amit talán nem is tudott."
Feliratkozás a Smithsonian magazinra mindössze 12 dollárért
Ez a történet a Smithsonian magazin decemberi számának válogatása.
megveszAz El Kaliouby elősegíti az emocionális számítástechnikát, mint logikus következő lépést a billentyűzet és az egér közötti érintőképernyő és a hangfelismerés között. Tavasszal az Affectiva kiadta első kereskedelmi szoftverfejlesztő csomagját, amelyet a fejlesztők, akik a felhasználók valós idejű érzelmi állapotai iránt érdeklődnek, beépíthetik saját programjukba - például zenelejátszókba vagy játék- vagy randevú-alkalmazásokba. És csak idén ősszel az Affectiva elindította az Emotion As a Service alkalmazást, egy felhőalapú programot, amelybe az ügyfelek videókat tölthetnek fel elemzés céljából. Ki használhatja ezt? Olyan jelölt, akit interjút készítenek állásra, aki aggódik amiatt, hogy aggódónak vagy unatkozni, vagy akár túl mosolyog. Vagy egy légiutas-kísérőket bérelõ légitársaság, több száz videó alkalmazás segítségével, amelyek között szerepelhet azok, akik meggyõzõ mosolyt tudnak kezelni, amikor búcsút tesznek az utasoknak. (A valódi mosolyt, amely magában foglalja az izmok összehúzódását a szem sarkában, „Duchenne” mosolynak nevezzük, amelyet a 19. századi anatómusnak neveztek; ennek ellenkezője, csak a száját használó kényszer mosoly, valójában néha „Pan Am” mosolynak hívják.)
És természetesen a szoftvert futtató eszközök mindegyike csatlakozik az internethez, így az általuk összegyűjtött információk azonnali összesítésre, szitálásra és hálózatba rendezésre kerülnek úgy, ahogyan a közösségi média alkalmazások azonosítják a népszerű témákat vagy személyiségeket. Összeállítva például egy Affectiva Mood Index-ként, a bruttó nemzeti boldogság numerikus leolvasásával, vagy olyan régiókra bontva, ahol a mosolyok vagy a homlokuk fellendülnek.
Az Affectiva alapprogramja másodpercenként húszszor elemzi az arcot 46 boldogság, szomorúság, meglepetés, félelem, harag, undor és megvetés 46 lokalizált kifejezése mellett, érdeklődéssel és zavarral. (Naomi Shavin / Smithsonian) Eddig az Affectiva fő ügyfelei a reklám-, marketing- és médiavállalatok voltak. Szoftvere automatizálja a fókuszcsoport futtatásának folyamatát, az a nehézkes rituálét, amikor egy tucat embert összegyűjtnek egy szobába, hogy véleményt nyilvánítsanak egy új termékről, TV sorozatról vagy hirdetési kampányról; közvetlenül rögzíti a reakciókat, anélkül, hogy a résztvevőnek bemutatóra válaszolva meg kellene fordítania a tárcsát vagy válaszolni a kérdőívre. Sőt, a szoftver kiterjeszti a potenciális fókuszcsoportot az egész világra, vagy legalább annak jelentős részére, amely webkamerával képes számítógépet vagy mobil eszközt tartalmaz.
Visszajelzés az Affectiva könyörtelen, mindenki számára látható szemétől segített kialakítani a hálózati TV-csatornát, két karaktert hagyva feledésbe a bűn miatt, amiért a nézők nem mosolyogtak. (El Kaliouby nem fogja azonosítani a műsort vagy a szereplőket.) Szoftverét egy „mosoly-mintavevő” felépítéséhez használták, egy olyan gépet, amely cukorkát adtál a vásárlóinak, akik a kamerabe mosolyogtak. Több kutatással valószínűleg hasznos lehet a repülőtéri tömegmegfigyelésnél, a lehetséges árukereskedők azonosításában vagy hazugságdetektorként.
El Kaliouby azonban ellenállt ezeknek a rejtett alkalmazásoknak, bármennyire jövedelmezőek is. Úgy gondolja, hogy az érzelmi számítástechnika megváltoztatja a világot, ideértve, de nem korlátozódva az édességek eladására. "Cégünk etosza - mondja -, hogy ezt a technológiát arra használja, hogy javítsa az emberek életét és segítse őket a jobb kommunikációban, nem csak a hirdetők további termékek eladásának elősegítésében."
**********
Sok tech vállalkozótól eltérően, a meggazdagodás nem volt az el Kaliouby eredeti napirendjén. Kairóban született azoknak az egyiptomi szülőknek, akik mindkettő technológiával foglalkoznak. Számítástechnikát tanulmányozta a kairói amerikai egyetemen, ahol 1998-ban diplomázott. Akkoriban a számítógépek elég erősek lettek, hogy a kutatók elgondolkodjanak az emberi értelemben vett számukra való felruházásban. érzelmi intelligenciának hívják.
Folytatta a számítástechnika tanulmányait a Cambridge-i Egyetemen, közvetlenül a 2001. szeptember 11-i Amerika elleni támadások után érkezett. Szülei úgy gondolták, hogy öröksége miatt veszélyezteti letartóztatását, zaklatását vagy még rosszabbat. De annak ellenére, hogy néhány évvel ezelőtt muszlim fejfedőt viselt, sem az angliai Cambridge-ben, sem a Massachusetts-i Cambridge-ben, ahol 2006-ban költözött, hogy csatlakozzon a MIT Media Lab-hoz, valóban valaha is aggódott vallása vagy megjelenése miatt . "Azt hiszem, azért van, mert nagyon mosolyogok" - mondja mosolyogva.
A francia anatómus Duchenne közzétette az emberi arckifejezések mérföldkő tanulmányait. (Bridgeman képek) Cambridge-ben tartózkodva érdeklődést mutatott az autizmus problémája iránt, különös tekintettel az autista gyermekek nehézségeire az arckifejezések olvasásakor. Azt javasolta, hogy hozzanak létre egy „érzelmi hallókészüléket”, amelyet viselni lehet az arcok olvasása és a viselkedés megfelelő viselkedésének felvázolása érdekében. Először a Nemzeti Tudományos Alapítvány támogatást kérve azzal az indokkal, hogy a projekt túl nehéz volt, kollégáival összeállított egy prototípust, amely apró kamera felszerelt szemüvegből, villogó fényekből és fejhallgatóból áll, ellentétben a Google Glass korai verziója. A második pályázat sikeres volt, és miután a MIT-be költözött, a csapatával a következő három évben a Rhode Island egyik iskolájának tökéletesítésére és tesztelésére dolgozott. El Kaliouby „kutatási projektnek és egy sikeres projektnek” írja le - az autista gyermekeknek, akik ezt felhasználták, rendkívül pozitív tapasztalataik voltak -, de 2008-ban, amikor a támogatás befejeződött, szembeszállt egy pillanatra. Növekedett az érdeklődés az érzelmi számítástechnika iránt, és azt akarta látni, hogy ez bővüljön és virágzik; ha a szemüveg kifejlesztésére tett erőfeszítéseit, akkor egy apró szeletre korlátozná a lehetséges felhasználási lehetőségeit. Tehát Picarddal együtt elfordította az Affectivat, miközben reménykedett, hogy egy másik társaság felveszi az érzelmi hallókészüléket, és piacra dobja.
Amikor létrehozták az Affectiva-t, a társaságot alkotó néhány „csapattag” néhány olyan értéket választott, amelyet megtestesítenek, mint például „tanulás” vagy „társadalmi felelősségvállalás” vagy „szórakozás”. Hers, mint stratégiai és tudományos főtisztviselő, "A szenvedély" volt. A 20 fős társaság kvázi demokráciaként működik, féléves ülésekkel, ahol az alkalmazottak szavaznak a következő hat hónap során követendő prioritásokról. Irodájában van egy táblája, amelyet egyik kollégája fiatal lánya rajzaival borított; van egy 6 éves fia, Adam és egy 12 éves lánya, Jana, akik vele élnek a bostoni külvárosban (apjuk Egyiptomban él). Manapság enyhe és figyelmes; Egy órával a reggeli találkozón szendvicset rendelhet egy látogató számára, annak ellenére, hogy maga is kihagyja az ebédet. "Nekem ez Ramadan" - mondja mosolyogva -, de neked nem ez a Ramadan. "
A látogatókat íróasztalnál helyezi el, szemben a monitorral és egy webkamerával; a szoftver megkeresi a látogató arcát, és rajzol egy dobozt körül a képernyőn. Meghatározza a követni kívánt pontok halmazát: a szem és a száj sarkait, az orr hegyét és így tovább. Másodpercenként húszszor a szoftver keresi az „akcióegységeket”, az arckifejezések gyakran futó izmainak játékát. Ezek közül 46 van, a szokásos osztályozási rendszer, az Arcművelet Kódrendszer (FACS) alapján. Ide tartoznak a belső és külső szemöldök emelõi, tompítók, pislogók, csapdák és ajakfúrók, fûtõgépek, nyomók és szopók. Az Affectiva szokásos programja mindegyikből mintegy 15 mintát vesz fel, és hét alapvető érzelem kifejezése céljából elemzi őket: boldogság, szomorúság, meglepetés, félelem, harag, undor és megvetés, valamint érdeklődés és zavar. Mosolyog, és láthatja, hogy a boldogság mértéke felrobbant; göndör göndör gúnyolódni és a program feljegyzi az undorodását.
Vagy pontosabban az undorodás kifejezése. Az emocionális számítástechnika teljes feltételezése azon alapszik, hogy a hit ugrásszerű, azaz a mosoly boldogságot, örömet vagy szórakozást közvetít. Természetesen az emberek ugyanabban a helyzetben vannak: hamis mosoly vagy csalódott harag becsaphat bennünket, így nem számíthatunk valójában többre egy számítógépes programtól, legalábbis még nem.
Az idő múlásával az Affectiva több mint hárommillió arckép-archívumot készített, amelyet a világ mintegy 75 országából toborzott internetes felhasználók töltöttek fel. Ezeket százezreket képzett megfigyelők elemezték, és a FACS akcióegységekre kódolták - ez egy monumentális vállalkozás, mivel a videók átlaga körülbelül 45 másodperc, és mindegyik körülbelül ötször annyi időt vesz igénybe a feldolgozáshoz. Az emberi kódolók eredményeit viszont felhasználták a vállalat algoritmusainak „kiképzéséhez”, amelyek a többi valós időben feldolgozódtak. A teljes adatbázis most körülbelül 40 milliárd „érzelem-adatpontot” foglal magában. Ez az erőforrás, El Kaliouby, büszkélkedhet, amely különbözteti meg az Affectivát az azonos területen működő többi vállalattól, mint például a kaliforniai Emotient, valószínűleg legközelebbi versenytársa.
(Diagram: 5W infographics; Forrás: Daniel McDuff, MIT Media Lab, Affectiva) Daniel McDuff, aki csatlakozott az Affectivához a MIT Media Lab-tól és kutatási igazgatóként szolgál, folyamatosan tanulmányozza ezt a vágyat, hogy további betekintést nyújtson az érzelmek kifejezéséhez. Hogyan különböznek egymástól életkor, nem és kultúra szerint? (Talán meglepő módon, a McDuff azt tapasztalta, hogy az idősebb emberek kifejezőbbek, különösen a pozitív érzelmekkel szemben, mint a fiatalabbak.) Meg tudja-e mérni megbízhatóan a megvetést, a kínosságot, az unalmat, a szorongást? Mikor jelzi a homlokát a zavar, és mikor jelzi a koncentrációt? Hogyan lehet megkülönböztetni a félelem egy olyan kifejezést, amely meglepetést jelent? (Tipp: Az 1. akcióegység, a „belső homlokzatnövelő” a félelem jelzője; a 2. akcióegység, a „külső homlokzatnövelő” meglepetést jelez.) Szerinte minden oka van azt hinni, hogy a program folytatódik jobban észlelni a kifejezéseket (bár lehet, hogy soha nem fogja teljes mértékben legyőzni az összes legnagyobb akadályt: a Botoxot).
Kérésére McDuff adta a programnak az érzelmek érzékelésének egyik nagy klasszikus problémáját, a Mona Lisát, amelynek rejtélyes kvázi mosolyja 500 éve vonzza a nézőket. Figyelembe véve azt a figyelmeztetést, hogy a szoftver a legjobban változik a kifejezések váltásán, nem statikus képeken, azt jelentette, hogy nem talált bizonyítékot a La Gioconda valódi mosolyáról, hanem inkább a 28. akcióegység (ajaktekercs) és a 24. akció kombinációja (az ajkak összepréselt)., ami bizonyos szintű kellemetlenséget idézhet elő.
**********
- Most veled beszélek - mondja el Kaliouby -, és figyeli, hogy felmérje, mi érdekli az, amit mondok. Le kellene lassítanom, és többet kellene magyaráznom? Más témához kellene mennem? Most képzeld el, hogy webinar tartok egy nagy csoport számára, amelyet nem látok vagy hallok. Nem kapok visszajelzést, semmiképpen sem tudom megmondani, hogy működik-e egy vicc vagy lapos-e, ha az emberek elkötelezettek vagy unatkoztak. Nem lenne jó, ha ezt a visszajelzést valós időben, összesített formában kapjuk, pillanatról pillanatra, ahova megyek? ”
A Jibo hirdetését játssza, amely egy „szociális robot”, amely előrendelésre elérhető az Indiegogo tömegfinanszírozó weboldalon, és amelyet egy MIT korábbi munkatárs, Cynthia Breazeal fejlesztett ki. Úgy néz ki, mint egy csúcstechnikai láva lámpa, és a Jibo az asztalon ül, és beolvassa a környékét, arcát azonosítva és velük kölcsönhatásba lépve - üzeneteket továbbít, emlékeztetőket küld, rutin telefonhívásokat kezdeményez, még beszélgethet. Ez egy másik lehetséges alkalmazás az Affectiva szoftveréhez - a vállalatok tárgyalások alatt állnak -, és ez „nagyon izgalmas lehetőség” - mondja el Kaliouby.
Néhányan izgalmas, de az érzelmeket feldolgozó robotok kilátása mások számára riasztó. Sherry Turkle, aki már régóta tanulmányozta az emberek kapcsolatát a számítógépekkel, új könyvében, a Beszélgetés visszatérése : A beszélgetés hatalma a digitális korban figyelmeztetésében figyelmezteti a „robot pillanatot”, amikor a gépek elkezdenek helyettesíteni az emberi társaságot. Turkle úgy véli, hogy az olyan tudósok, mint az el Kaliouby és csapata megtehetik azt, amit mondanak. "Ezek mind ragyogó, tehetséges emberek, akik ragyogó munkát végeznek" - mondja. És egyetért azzal, hogy bizonyos kontextusokban - az olyan veszélyes környezetekben, mint például a világűr vagy a nehéz gépek körül, ahol minden lehetséges kommunikációs módot fel akar venni - az emocionális számítástechnika szerepet játszik. „De a következő lépés - mondja - egyáltalán nem követi. A következő lépés: Hozzunk létre egy robot-barátot. Interjúkat készítettem olyan szülőkkel, akik örülnek, hogy gyermekeik beszélnek Sirival, és azt hiszem, ez nem vezet minket arra az útra, ahová akarunk menni. Azt definiáljuk magunkat, mint ember, akivel társulunk, és számomra nincs értelme az önértékelés érzelmének kialakításához egy géppel kapcsolatban. Miért szeretné, ha egy számítógép megtudja, ha szomorú vagy? ”
Még el Kaliouby hajlamos arra is egyetérteni, hogy „több időt töltsünk, mint amennyit kéne készülékeinkkel”, természetesen szem előtt tartva tizenöt éves lányát, akinek a tekintete reteszelődik az okostelefon képernyőjén.
De az egyre nagyobb összeköttetés felé mutató tendenciát visszafordíthatatlannak tartja, és úgy gondolja, hogy bár a felhasználóknak mindig engedélyezniük kell, mi is mindent megtehetünk belőle. Azt jósolja, hogy eszközeinknek „érzelmi chipekkel és alkalmazáscsomagjával kell rendelkezniük, amelyek olyan értéket használnak, amely elegendő értéket teremt az életünkben, és meghaladja az emberek aggodalmait ezen adatok megosztásakor.” Analógiát húz a GPS-készülékekre: Az hatékony számítástechnika képes segít nekünk az érzelmi térben való navigáláshoz, ugyanúgy, ahogy a telefonos alkalmazások segítik a fizikai térben való megkerülést. "Mindenki a helymeghatározó eszközök miatt aggódott, amikor először jöttek ki: ők támadtak a magánéletünkbe, állandóan követtek minket" - mondja. „Csak most mindannyian elvesznénk telefonjainkon a Google Maps nélkül. Azt hiszem, ez ugyanaz lesz. ”
**********
