Microsoft Corporation, olles käivitanud teenuse, mis võimaldab teil kindlaks teha, otsustas minna kaugemale. Nüüd on ettevõtte spetsialistid välja töötanud algoritmi, mis määrab fotol kujutatud inimese emotsioonid. Kokku läbib test kaheksa positsiooni: viha, rahulolu, vastikus, hirm, õnn, neutraalsus (loeme – irdunud näoilme), kurbus, üllatus.
Arendajad väidavad, et tulemused pole kuigi täpsed, kuid on näha, et hinnang on täpsem kui vanuse määramise puhul. Näiteks võivad paljud meist teha tuntud foto, kuidas Keanu Reeves istub pingil ja närib midagi. Microsoft usub, et selline emotsioon nagu kurbus näitleja näost peaaegu puudub (0,01831), tema näoilme on neutraalne.
Veel üks tuntud foto näitab meile last, kelle emotsionaalset seisundit hinnatakse "vihaseks". Siin on meil koguni 0,98752 punkti.
Ettevõtte töö selliste algoritmide kallal ei ole mäng. Ettevõte püüab täiustada fototuvastuse eest vastutavat tarkvara. Vaatamata mõningatele vigadele (eriti vanuse määratlusega) tundub kõik üsna huvitav. Microsoft kavatseb avada oma pilditeenuste jaoks API, et oleks võimalik luua tarkvara ja veebiteenuseid, mis sortivad fotosid piltidel olevate inimeste emotsioonide põhjal.
Vaatame, milliseid emotsioone Bill Gates kogeb 
Tim Cook 
Fallout 4 kangelased 
Kas soovite ressurssi tegevuses proovida? Siin pole probleemi
Juhend. Mul on teile väga huvitav mäng. Teate, et kõik inimesed on mõnikord õnnelikud, mõnikord üllatunud või vihased. Nüüd näitan teile mõnda pilti, millel on inimese näol näha mingi emotsioon (näiteks rõõm, lein, hirm, üllatus, põlgus, vastikus, häbi, huvi, viha). Siin on nimekiri nendest emotsioonidest. Proovige kindlaks teha, milline emotsioon igal fotol kajastub.
Katsetaja näitab vaheldumisi 9 fotot ja kirjutab lapse vastuse vormile foto numbri kõrvale.
Vorm vastuste registreerimiseks
| Eseme number | Foto | Subjekti vastus | Märge |
622 Taotlus
Arvesse võetakse õigete vastuste arvu, mille järgi hinnatakse kujunenud võimet määrata näoilme järgi emotsioonimärki.
Emotsioonide defineerimine pantomiimi abil
Juhend. Ja nüüd näitan teile pilte, millel on kujutatud ka mingisuguse kogemusega inimest. Proovige kindlaks teha, millised emotsioonid on inimesel igal pildil.
Katsealusele näidatakse kordamööda 8 pilti ja ta kirjutab oma vastused vormile.
Vorm vastuste registreerimiseks
| Eseme number | Pilt | Subjekti vastus | Märkmed |
| M + . + .IP--MM | |||
Arvesse võetakse õigete vastuste arvu ja nende põhjal hinnatakse kujunenud võimet määrata pantomiimi abil emotsioonimärki.
Pildi ekspressiivse poole tajumise uurimine
Tehnika on võetud artiklist: Repina T. A. Eelkooliealiste joonistuse ekspressiivse külje tajumine ja selle mõju laste suhtumisele raamatu kangelasesse // Psühholoogia küsimused. - 1960. - nr 5.
Õppetöö ettevalmistamine. Korjake 10-14 maalide reproduktsiooni, mille emotsionaalne sisu antakse edasi näoilmete ja žestide, tegelaste kehahoiakute, tegelaste omavaheliste suhete või ümbritsevate objektidega.
Uuringute läbiviimine. Katse viiakse läbi individuaalselt 3-6-aastaste lastega. Lapsele näidatakse pilte järjest ja palutakse neist rääkida. Kui tal on raske kirjeldada, esitage suunavaid küsimusi (ettevalmistage eelnevalt), et teada saada, kuidas ta mõistab pildi süžeed, tegelaste emotsionaalset seisundit.
Andmetöötlus.Õigete vastuste arv loetakse siis, kui lapsed said süžeest ja tegelaste emotsionaalsest seisundist õigesti aru. Loendamine toimub iga pildi jaoks. Tulemused koostatakse tabelina vanuse järgi: 3-4 aastat, 4-5 aastat, 5-6 aastat, 6-7 aastat.
Nad saavad teada, milliseid piltidel kujutatud emotsionaalseid seisundeid lapsed õigesti tajuvad ja millises vanuses. Kuidas nad tajuvad rõõmu ja viha näoilmeid, kurbuse ja kurbuse väljendust, millega emotsionaalne kogemus seovad omavahel pildi erksad värvid, kuna need mõistavad kangelase kehahoiaku ja žestide abil edasi antud emotsionaalset sisu.
Laste emotsionaalsete ilmingute uurimine süžeesseenide mängimisel
Tehnika on võetud raamatust: Eelkooliealise emotsionaalne areng / Toim. A. D. Ko-šeleva. - M., 1985. - S. 100-102.
Õppetöö ettevalmistamine. Valige laste elust olukorrad, mis on neile lähedased ja arusaadavad, näiteks:
Lisa 623
1. Haige ema lamab voodis, vanim tütar ( ettevalmistav rühm) toob venna (sõimerühm).
2. Rühmas lõuna ajal kallab poiss kogemata suppi, kõik lapsed hüppavad püsti ja naeravad; poiss ehmatab, õpetaja seletab rangelt, et tuleb olla ettevaatlikum ja naerda pole siin absoluutselt mitte midagi.
3. Poisil jäid ära labakindad ning jalutuskäigu ajal olid tal käed väga külmad, kuid ta ei taha teistele näidata, et tal on väga külm.
4. Tüdrukut ei võetud mängu vastu, ta läks toanurka, langetas pea madalale ja on vait, hakkab nutma.
5. Poisil (tüdrukul) on hea meel oma sõbra (tüdruksõbra) üle, kelle joonistus osutus rühma parimaks.
Valmistage 2–3 last ette neid lugusid dramatiseerima. Uuringute läbiviimine. Uuring viiakse läbi 4-7-aastaste lastega. Esimene episood. Eelnevalt ettevalmistatud lapsed mängivad rühma ees stseeni ette, seejärel küsib katsetaja lastelt, kuidas selle stseeni tegelased end tunnevad. Teine seeria. Eksperimenteerija kirjeldab olukorda ja pakub seda kujutamiseks.
minu olukord - näidata ema kurba, kannatavat nägu, kapriisset nutvat poissi ja tüdruku kaastundlikku nägu.
II olukord - näidata õpetaja ranget nägu, naervaid ja seejärel piinlikke lapsi, poisi hirmunud nägu.
III olukord - kuidas poiss ei taha näidata, et tal on külm.
IV olukord - näidata solvunud tüdrukuid.
V olukord - näidata teise üle tõelist rõõmu. Kui lapsed ei ole piisavalt väljendusrikkad või kujutavad tegelaste tundeid ja emotsioone valesti, kirjeldab katsetaja olukorda uuesti ja räägib üksikasjalikult, mida iga tegelane kogeb.
Andmetöötlus. Nad analüüsivad, kuidas lapsed kehastavad stseenides tegelaste emotsionaalseid seisundeid. Nad teevad järelduse ekspressiiv-miimika suhtlusvahendite väljendusrikkuse ja rikkuse ning teiste inimeste empaatiavõime arengu kohta. Andmed vormistatakse tabelina (tabel 6).
Tänapäeval allutatakse üha enam meie elu aspekte automatiseerimisele ja matemaatilisele töötlemisele, millest üks on põhiosa meie mälust – fotod, mis jäädvustavad meid, meie sõpru, meeldejäävaid hetki ja palju muud. Mitte nii kaua aega tagasi astus Microsoft juba esimese ja üsna huvitava sammu fototöötluses - töötati välja algoritm, mis võimaldas määrata jäädvustatud inimeste vanust (). Kuid aeg ei seisa paigal ja täna räägime Microsofti pakutud uuest algoritmist - emotsioonide tuvastamisest fotolt.
Alateadlikult teame me kõik, kuidas teha kindlaks, kas fotol olev inimene naerab või kurb, kuid kas neid tundeid on võimalik mõõta? Selgub, et saate! Ja vaatame kohe, mis see dimensioon on.
Alustamiseks minge projekti lehele https://www.projectoxford.ai/demo/emotion#detection .
Ja me näeme kohe näidet, kuidas algoritm töötab. Proovime välja mõelda, mis see on, ja siis viime läbi mõned katsed.
Niisiis, vasakul on analüüsitud pilt, millel on esile tõstetud näod. Kohe saab selgeks, et algoritm suudab fotodelt kõik näod välja valida ja igaüht analüüsida.
Paremal (ja nägudel olevate raamide kohal hõljutades) on ala, mis sisaldab hunnikut arusaamatut teksti (näidatud tekst on spetsiaalses vormingus algoritmi tulemus), jagame selle lahti.
Esimesel real on kiri "tuvastuse tulemus" - "analüüsi tulemused".
"FaceRectangle" :(
Vasakul: 488
Ülemine: 263
Laius: 148
"Kõrgus": 148
"skoorid" :(
"Viha": 9.075572e-13,
"Põlgus": 7.048959e-9,
"Vastik": 1.02152783e-11,
"Hirm": 1.778957e-14,
"Õnn": 0,9999999,
"Neutraalne": 1.31694478e-7,
"Kurbus": 6.04054263e-12,
Üllatus: 3.92249462e-11
Mida see kõik tähendab?
Fragment "FaceRectangle" sisaldab iga näo raami nurkade koordinaate, et oleks selge, millise inimese emotsioone me vaatame.
Fragment "Skoorid" esitab tulemused ise. Sest algoritm on seni antud proovirežiimis, tulemusi ei ole töödeldud “inimlikul” kujul ja need esitatakse “toores vormis”. Kuid ärge kartke - kõik on väga lihtne! Seal on kaheksa emotsiooni loend:
Viha - Viha
Kontekst - Põlgus
Vastik - Vastik
Hirm- Hirm
Õnn - Õnn
Neutraalne - Neutraalne
Kurbus - Kurbus
Üllatus - üllatus
Ja iga emotsiooni panus fotol oleva inimese üldisesse emotsionaalsesse seisundisse on näidatud vahemikus 0 kuni 1 - mida suurem arv, seda olulisem on emotsioon.
Vaadeldavas näites näeme, et esimesel inimesel fotol on kõige rohkem väljendunud emotsioon – õnn. Ärge kartke arusaamatuid väärtusi, nagu "3.92249462e-11" - see on arvu kirjutamise matemaatiline vorm, kus "e-11" näitab, mitu märki vasakule tuleb koma liigutada, s.t. näites saadakse arv "0.0000000000392249462", mis on meeletult väike.
Nüüd saate fantaseerida fotolt emotsioonide äratundmise algoritmi rakendamisest. Näiteks näen sotsiaalvõrgustikus fotoalbumit, mis olenevalt valitud kasutaja staatusest (kurbus, rõõm või tüdimus) paigutab fotod automaatselt vastavalt meeleolule ümber. Või teine näide, lähete võrgust pilte vaatama, teie seadme kaamera pildistab teid ja meeleolu määrab kindlaks määratud algoritm ning seejärel pakutakse vaatamiseks pilte, mis vastavad näiteks emotsionaalsele seisundile. , kui olete kurb, on pildid värvilised ja positiivsed.
Olen kindel, et algoritm leiab palju kasutusvõimalusi. Lisaks on Microsoft pakkunud algoritmile juurdepääsuks API-d, mis tähendab, et igaüks saab seda kasutada ja anda töötlemistulemusi mitmel viisil.
Ja lõpuks mängisin natuke automaatse emotsioonituvastusega ja tahan näidata, mis sellest välja tuli.
Esimene foto, mida kontrollisin, oli loomulikult kuulus terminaator Mr. Equanimity. Ja algoritm toetas mind - 0,89 neutraalsus.
Miks mitte proovida midagi lõbusat? Ja kes oskab kõige paremini grimassi teha ja lõbutseda – Muski esimene mõte. Ja üksmeelselt – nägu täis "õnne".
Kuna filmid on läinud, peame proovima hobitit. Siin ei saa ma ise kogu näo emotsioonide spektrit kindlaks teha ja algoritm on minuga nõus. Sel hetkel ma aga huvitavast asjast läbi ei saanud - kui fotol raami kohal hõljutada, ilmub aken tulemustega, tore pisiasi, eriti kui nägusid on palju.
Ja jälle, Jim Carrey, mulle tundub, et tal on väga eredad emotsioonid – ja me vaatame üllatusena. Tundub, et ma ei eksinud.
Fotol on noormees, kelle emotsionaalset seisundit oleme tuvastanud vihasena.
Teeme ülesande keerulisemaks ja anname algoritmile eelnevalt ettevalmistatud emotsioonide fotod. Kindlasti ei ole näod selgeks oleku ülekandmiseks päris loomulikud, kuid kõik määrati väga suure täpsusega.
Noh, me oleme natuke häbelik. Mitte foto, vaid kunstniku joonistatud portree meie veebisaidilt () ja minu arvates on see ka hea tulemus!
Muidugi ei suutnud ma vastu panna ja püüdsin Tšeburaška tundeid ära tunda ning mul ei jäänud midagi - algoritm keeldus koomiksitegelast töötlemast.
Võttes kokku Microsofti rakendatud fotode emotsioonide tuvastamise algoritmi ülevaate, tahaksin märkida väga häid tulemusi tema tööd ja suur hulk täpsed äratundmised. Demo alustamiseks lihtsalt suurepärane tulemus! Jääme ootama uusi huvitavaid lahendusi.
Juhend. Mul on teile väga huvitav mäng. Teate, et kõik inimesed on mõnikord õnnelikud, mõnikord üllatunud või vihased. Nüüd näitan teile mõnda pilti, millel on inimese näol näha mingi emotsioon (näiteks rõõm, lein, hirm, üllatus, põlgus, vastikus, häbi, huvi, viha). Siin on nimekiri nendest emotsioonidest. Proovige kindlaks teha, milline emotsioon igal fotol kajastub.
Katsetaja näitab vaheldumisi 9 fotot ja kirjutab lapse vastuse vormile foto numbri kõrvale.
Vorm vastuste registreerimiseks
| Eseme number | Foto | Subjekti vastus | Märge |
622 Taotlus
Arvesse võetakse õigete vastuste arvu, mille järgi hinnatakse kujunenud võimet määrata näoilme järgi emotsioonimärki.
Emotsioonide defineerimine pantomiimi abil
Juhend. Ja nüüd näitan teile pilte, millel on kujutatud ka mingisuguse kogemusega inimest. Proovige kindlaks teha, millised emotsioonid on inimesel igal pildil.
Katsealusele näidatakse kordamööda 8 pilti ja ta kirjutab oma vastused vormile.
Vorm vastuste registreerimiseks
| Eseme number | Pilt | Subjekti vastus | Märkmed |
| M + . + .IP--MM | |||
Arvesse võetakse õigete vastuste arvu ja nende põhjal hinnatakse kujunenud võimet määrata pantomiimi abil emotsioonimärki.
Pildi ekspressiivse poole tajumise uurimine
Tehnika on võetud artiklist: Repina T. A. Eelkooliealiste joonistuse ekspressiivse külje tajumine ja selle mõju laste suhtumisele raamatu kangelasesse // Psühholoogia küsimused. - 1960. - nr 5.
Õppetöö ettevalmistamine. Korjake 10-14 maalide reproduktsiooni, mille emotsionaalne sisu antakse edasi näoilmete ja žestide, tegelaste kehahoiakute, tegelaste omavaheliste suhete või ümbritsevate objektidega.
Uuringute läbiviimine. Katse viiakse läbi individuaalselt 3-6-aastaste lastega. Lapsele näidatakse pilte järjest ja palutakse neist rääkida. Kui tal on raske kirjeldada, esitage suunavaid küsimusi (ettevalmistage eelnevalt), et teada saada, kuidas ta mõistab pildi süžeed, tegelaste emotsionaalset seisundit.
Andmetöötlus.Õigete vastuste arv loetakse siis, kui lapsed said süžeest ja tegelaste emotsionaalsest seisundist õigesti aru. Loendamine toimub iga pildi jaoks. Tulemused koostatakse tabelina vanuse järgi: 3-4 aastat, 4-5 aastat, 5-6 aastat, 6-7 aastat.
Nad saavad teada, milliseid piltidel kujutatud emotsionaalseid seisundeid lapsed õigesti tajuvad ja millises vanuses. Kuidas nad tajuvad rõõmu ja viha näoilmeid, kurbuse ja kurbuse väljendust, millise emotsionaalse kogemusega seostavad pildi erksaid värve, kuidas nad mõistavad kangelase kehahoiaku ja žestide kaudu edasiantavat emotsionaalset sisu.
Laste emotsionaalsete ilmingute uurimine süžeesseenide mängimisel
Tehnika on võetud raamatust: Eelkooliealise emotsionaalne areng / Toim. A. D. Ko-šeleva. - M., 1985. - S. 100-102.
Õppetöö ettevalmistamine. Valige laste elust olukorrad, mis on neile lähedased ja arusaadavad, näiteks:
Lisa 623
1. Haige ema lamab voodis, vanem tütar (ettevalmistusrühm) toob oma venna (sõimerühm).
2. Rühmas lõuna ajal kallab poiss kogemata suppi, kõik lapsed hüppavad püsti ja naeravad; poiss ehmatab, õpetaja seletab rangelt, et tuleb olla ettevaatlikum ja naerda pole siin absoluutselt mitte midagi.
3. Poisil jäid ära labakindad ning jalutuskäigu ajal olid tal käed väga külmad, kuid ta ei taha teistele näidata, et tal on väga külm.
4. Tüdrukut ei võetud mängu vastu, ta läks toanurka, langetas pea madalale ja on vait, hakkab nutma.
5. Poisil (tüdrukul) on hea meel oma sõbra (tüdruksõbra) üle, kelle joonistus osutus rühma parimaks.
Valmistage 2–3 last ette neid lugusid dramatiseerima. Uuringute läbiviimine. Uuring viiakse läbi 4-7-aastaste lastega. Esimene episood. Eelnevalt ettevalmistatud lapsed mängivad rühma ees stseeni ette, seejärel küsib katsetaja lastelt, kuidas selle stseeni tegelased end tunnevad. Teine seeria. Eksperimenteerija kirjeldab olukorda ja pakub seda kujutamiseks.
minu olukord - näidata ema kurba, kannatavat nägu, kapriisset nutvat poissi ja tüdruku kaastundlikku nägu.
II olukord - näidata õpetaja ranget nägu, naervaid ja seejärel piinlikke lapsi, poisi hirmunud nägu.
III olukord - kuidas poiss ei taha näidata, et tal on külm.
IV olukord - näidata solvunud tüdrukuid.
V olukord - näidata teise üle tõelist rõõmu. Kui lapsed ei ole piisavalt väljendusrikkad või kujutavad tegelaste tundeid ja emotsioone valesti, kirjeldab katsetaja olukorda uuesti ja räägib üksikasjalikult, mida iga tegelane kogeb.
Andmetöötlus. Nad analüüsivad, kuidas lapsed kehastavad stseenides tegelaste emotsionaalseid seisundeid. Nad teevad järelduse ekspressiiv-miimika suhtlusvahendite väljendusrikkuse ja rikkuse ning teiste inimeste empaatiavõime arengu kohta. Andmed vormistatakse tabelina (tabel 6).
Stimuleeriv materjal: kasutatakse Luscheri testi värviliste kaartide komplekti, mida tähistatakse numbritega: 0 - hall, 1 - sinine, 2 - roheline, 3 - punane, 4 - kollane, 5 - lilla, 6 - pruun, 7 - must.
Kasutatakse järgmist loendit:
1) mu ema,
2) mu isa,
3) vend või õde (kui need on lapsel),
4) minu tuju koolis,
5) minu tuju kodus,
7) õpetaja,
Käitumise järjekord näeb välja nagu mäng. Kõik 8 kaarti asetatakse lapse ette valgele taustale juhuslikult.
Juhend: "Palun öelge, milline värv sobib kõige paremini teie ema esindama?" jne vastavalt nimekirjale. Järgmisena järjestab laps värvid eelistusjärjekorras, alustades kõige ilusama, meeldivamaga ja lõpetades kõige koledamaga, ebameeldivamaga. Seega saab iga nimekirjas olev inimene oma auastme.
Mida kõrgem on emotsionaalne atraktiivsus, lähedus, sümpaatia ja vähem konflikte suhetes kellegagi, seda eelistatumalt peaks laps neid inimesi seostama. Vastupidi, negatiivsele, vaenulikule suhtumisele kellegi suhtes viitab talle määratud värv, mis sai värvipaigutuses kõige negatiivsema järgu.
LISA 2
Metoodika "Pildil kujutatud inimeste emotsionaalsete seisundite mõistmise uurimine"
Stimuleeriv materjal: portreepildid (fotod), mis kujutavad lapsi ja täiskasvanuid, kellel on nii peamiste emotsioonide (rõõm, hirm, viha, lein) kui ka nende varjundite väljendunud emotsionaalne seisund; süžeepildid, mis kujutavad laste ja täiskasvanute positiivseid ja negatiivseid tegevusi.
Käitumise järjekord. Kaks sarja peetakse individuaalselt algkooliealiste lastega.
Esimene episood. Juhend: lapsele näidatakse järjekindlalt portreepilte, millel on kujutatud lapsi ja täiskasvanuid ning esitatakse küsimusi: „Keda on pildil näidatud? Mida ta teeb? Kuidas ta end tunneb? Kuidas sa seda arvasid? Kirjeldage, mida pildil näete.
Teine seeria. Juhend: lapsele näidatakse järjekindlalt süžeepilte ja esitatakse küsimusi: „Millega lapsed (täiskasvanud) tegelevad? Kuidas nad seda teevad (sõbralikud, tülitsevad, ei pööra üksteisele tähelepanu jne)? Kuidas sa arvasid? Kes on hea ja kes on halb? Kuidas sa arvasid?"
Tulemuste töötlemine ja tõlgendamine.Õigete vastuste arv erinevates vanuserühmades loetakse iga seeria ja iga pildi kohta eraldi. Tehke kindlaks, kas lapsed mõistavad emotsionaalsed seisundid täiskasvanud ja eakaaslased, millistest märkidest nad juhinduvad, keda nad paremini mõistavad - täiskasvanut või eakaaslast. Määrake nende näitajate sõltuvus laste vanusest.
LISA 3
Metoodika "Emotsioonide tuvastamine fotodelt"
Stimuleeriv materjal: 9 fotost koosnev komplekt, millel on kujutatud inimest, kelle näost peegeldub üks või teine emotsioon, ja emotsioonide loetelu.
Käitumise järjekord. Juhised: „Mul on väga huvitav ülesanne. Teate, et kõik inimesed on mõnikord õnnelikud, mõnikord üllatunud või vihased. Nüüd näitan teile mõnda fotot, mis näitavad inimest teatud emotsionaalses seisundis (näiteks rõõm, lein, hirm, üllatus, põlgus, vastikus, häbi, huvi, viha). Siin on nimekiri nendest emotsioonidest. Proovige kindlaks teha, millist emotsiooni igal fotol peegeldub.
Katsetaja näitab vaheldumisi 9 fotot ja kirjutab lapse vastuse vormile foto numbri kõrvale.
Vorm vastuste registreerimiseks
|
Subjekti vastus |
Märge |
||
Tulemuste töötlemine ja tõlgendamine. Arvesse võetakse õigete vastuste arvu, mille järgi hinnatakse näoilme järgi inimese emotsiooni määramise võime kujunemist. 50% või vähem õigeid vastuseid viitavad emotsioonide eristamise väga madalale tasemele.