Jak określić emocje danej osoby na podstawie zdjęcia. Metodologia „Kolorowy test relacji” (tsto). Metodologia „Wyznaczanie emocji na podstawie fotografii”

Instrukcje. Mam dla ciebie wiele ciekawa gra. Wiesz, że wszyscy ludzie są czasem szczęśliwi, czasem zaskoczeni lub źli. Teraz pokażę wam kilka fotografii przedstawiających osobę z pewnym rodzajem emocji na twarzy (na przykład radość, smutek, strach, zdziwienie, pogarda, wstręt, wstyd, zainteresowanie, złość). Oto lista tych emocji. Spróbuj określić, jakie emocje odzwierciedla każde zdjęcie.

Eksperymentator pokazuje kolejno 9 fotografii i zapisuje odpowiedź dziecka w formularzu obok numeru zdjęcia.

Formularz rejestracji odpowiedzi

Numer zamówienia	Zdjęcie	Odpowiedź podmiotu	Notatka

622 Wniosek

Pod uwagę brana jest liczba poprawnych odpowiedzi, na podstawie której oceniana jest rozwinięta umiejętność rozpoznawania oznak emocji na podstawie wyrazu twarzy.

Określanie emocji poprzez pantomimę

Instrukcje. A teraz pokażę Wam zdjęcia, które także przedstawiają osobę z pewnymi przeżyciami. Spróbuj określić, jakie emocje ma dana osoba na każdym zdjęciu.

Badanemu pokazywanych jest po kolei 8 obrazków i zapisuje swoje odpowiedzi na formularzu.

Formularz rejestracji odpowiedzi

Numer zamówienia	Zdjęcie	Odpowiedź podmiotu	Notatki
M+. +.IP--MM

Brana jest pod uwagę liczba poprawnych odpowiedzi i oceniana jest na ich podstawie ukształtowana umiejętność określenia znaku emocji poprzez pantomimę.

Badanie percepcji wyrazistej strony rysunku

Technika została zaczerpnięta z artykułu: Repina T.A. Percepcja wyrazistej strony rysunku przez przedszkolaki i jej wpływ na postawę dzieci wobec bohatera książki // Zagadnienia psychologii. - 1960. - nr 5.

Przygotowanie badania. Wybierz 10-14 reprodukcji obrazów, w których treść emocjonalna jest przekazywana poprzez ukazanie mimiki i gestów, pozycji postaci, relacji między postaciami lub ich stosunku do otaczających obiektów.

Prowadzenie badań. Eksperyment przeprowadza się indywidualnie z dziećmi w wieku 3-6 lat. Dziecko jest kolejno pokazywane obrazkom i proszone o opowiedzenie o nich. Jeśli trudno mu to opisać, zadają pytania naprowadzające (przygotowując się wcześniej), aby dowiedzieć się, jak rozumie fabułę obrazu i stany emocjonalne bohaterów.

Przetwarzanie danych. Liczba poprawnych odpowiedzi jest liczona, gdy dzieci prawidłowo zrozumiały fabułę i stan emocjonalny bohaterów. Liczenie odbywa się dla każdego zdjęcia. Wyniki przedstawiono w tabeli według wieku: 3-4 lata, 4-5 lat, 5-6 lat, 6-7 lat.

Dowiedz się, jakie stany emocjonalne przedstawione na ilustracjach są prawidłowo odbierane przez dzieci i w jakim wieku. Jak postrzegają mimikę radości i złości, wyrazy smutku i smutku, jakie przeżycia emocjonalne kojarzą im się z jaskrawymi kolorami rysunku, jak rozumieją treści emocjonalne przekazywane poprzez postawę i gesty bohatera.

Badanie przejawów emocjonalnych dzieci podczas odgrywania scen z historii

Technika zaczerpnięta z książki: Rozwój emocjonalny przedszkolaka / wyd. A. D. Koshelevoy. - M., 1985. - s. 100-102.

Przygotowanie badania. Wybierz sytuacje z życia dzieci, które są im bliskie i zrozumiałe, np.:

Dodatek 623

1. Chora matka leży w łóżku, najstarsza córka ( grupa przygotowawcza) przyprowadza brata (grupa żłobkowa).

2. Podczas lunchu w grupie chłopiec niechcący rozlał zupę, wszystkie dzieci podrywają się i śmieją; chłopiec się boi, nauczyciel surowo tłumaczy, że trzeba uważać i że tu absolutnie nie ma się z czego śmiać.

3. Chłopiec zgubił rękawiczki, podczas spaceru bardzo zmarzły mu ręce, ale nie chce pokazać innym, że jest mu bardzo zimno.

4. Dziewczynka nie została przyjęta do gry, poszła do rogu pokoju, spuściła głowę nisko i milczała, bliska płaczu.

5. Chłopak (dziewczyna) cieszy się ze swojej przyjaciółki (dziewczyny), której rysunek okazał się najlepszy w grupie.

Przygotuj 2–3 dzieci do dramatyzowania tych historii. Prowadzenie badań. Badanie prowadzone jest z dziećmi w wieku 4-7 lat. Pierwszy odcinek. Przygotowane wcześniej dzieci odgrywają przed grupą skecz, po czym eksperymentator pyta dzieci, jak się czują bohaterowie tego skeczu. Druga seria. Eksperymentator opisuje sytuację i proponuje ją zobrazować.

Ja sytuacja - pokaż smutną, cierpiącą twarz matki, kapryśnego płaczącego chłopca i współczującą twarz dziewczynki.

II sytuacja - pokaż surową twarz nauczyciela, roześmiane, a potem zawstydzone dzieci, przerażoną twarz chłopca.

III sytuacja - jak chłopak nie chce pokazać, że jest mu zimno.

IV sytuacja - okazać urazę dziewczynie.

Vsytuacja - okazuj innym prawdziwą radość. Jeśli dzieci nie przedstawiają wyraziście lub niepoprawnie uczuć i emocji bohaterów, eksperymentator ponownie opisuje sytuacje i szczegółowo opisuje, czego doświadcza każdy z bohaterów.

Przetwarzanie danych. Analizują, w jaki sposób dzieci ucieleśniają stany emocjonalne bohaterów szkiców. Wyciągają wnioski na temat wyrazistości i bogactwa ekspresyjnych i mimicznych środków komunikacji oraz rozwoju umiejętności wczuwania się w drugiego człowieka. Dane przedstawiono w tabeli (tabela 6).

Instrukcje. Mam dla Ciebie bardzo ciekawą grę. Wiesz, że wszyscy ludzie są czasem szczęśliwi, czasem zaskoczeni lub źli. Teraz pokażę wam kilka fotografii przedstawiających osobę z pewnym rodzajem emocji na twarzy (na przykład radość, smutek, strach, zdziwienie, pogarda, wstręt, wstyd, zainteresowanie, złość). Oto lista tych emocji. Spróbuj określić, jakie emocje odzwierciedlają poszczególne zdjęcia.

Eksperymentator pokazuje kolejno 9 fotografii i zapisuje odpowiedź dziecka w formularzu obok numeru zdjęcia.

Formularz rejestracji odpowiedzi

Numer zamówienia	Zdjęcie	Odpowiedź podmiotu	Notatka

622 Wniosek

Pod uwagę brana jest liczba poprawnych odpowiedzi, na podstawie której oceniana jest rozwinięta umiejętność rozpoznawania oznak emocji na podstawie wyrazu twarzy.

Określanie emocji poprzez pantomimę

Instrukcje. A teraz pokażę Wam zdjęcia, które także przedstawiają osobę z pewnymi przeżyciami. Spróbuj określić, jakie emocje ma dana osoba na każdym zdjęciu.

Badanemu pokazywanych jest po kolei 8 obrazków i zapisuje swoje odpowiedzi na formularzu.

Formularz rejestracji odpowiedzi

Numer zamówienia	Zdjęcie	Odpowiedź podmiotu	Notatki
M+. +.IP--MM

Brana jest pod uwagę liczba poprawnych odpowiedzi i oceniana jest na ich podstawie ukształtowana umiejętność określenia znaku emocji poprzez pantomimę.

Badanie percepcji wyrazistej strony rysunku

Technika została zaczerpnięta z artykułu: Repina T.A. Percepcja wyrazistej strony rysunku przez przedszkolaki i jej wpływ na postawę dzieci wobec bohatera książki // Zagadnienia psychologii. - 1960. - nr 5.

Przygotowanie badania. Wybierz 10-14 reprodukcji obrazów, w których treść emocjonalna jest przekazywana poprzez ukazanie mimiki i gestów, pozycji postaci, relacji między postaciami lub ich stosunku do otaczających obiektów.

Prowadzenie badań. Eksperyment przeprowadza się indywidualnie z dziećmi w wieku 3-6 lat. Dziecko jest kolejno pokazywane obrazkom i proszone o opowiedzenie o nich. Jeśli trudno mu to opisać, zadają pytania naprowadzające (przygotowując się wcześniej), aby dowiedzieć się, jak rozumie fabułę obrazu i stany emocjonalne bohaterów.

Przetwarzanie danych. Liczba poprawnych odpowiedzi jest liczona, gdy dzieci prawidłowo zrozumiały fabułę i stan emocjonalny bohaterów. Liczenie odbywa się dla każdego zdjęcia. Wyniki przedstawiono w tabeli według wieku: 3-4 lata, 4-5 lat, 5-6 lat, 6-7 lat.

Dowiedz się, jakie stany emocjonalne przedstawione na ilustracjach są prawidłowo odbierane przez dzieci i w jakim wieku. Jak postrzegają mimikę radości i złości, wyrazy smutku i smutku, jakie przeżycia emocjonalne kojarzą im się z jaskrawymi kolorami rysunku, jak rozumieją treści emocjonalne przekazywane poprzez postawę i gesty bohatera.

Badanie przejawów emocjonalnych dzieci podczas odgrywania scen z historii

Technika zaczerpnięta z książki: Rozwój emocjonalny przedszkolaka / wyd. A. D. Koshelevoy. - M., 1985. - s. 100-102.

Przygotowanie badania. Wybierz sytuacje z życia dzieci, które są im bliskie i zrozumiałe, np.:

Dodatek 623

1. Chora matka leży w łóżku, najstarsza córka (grupa przygotowawcza) przyprowadza brata (grupa żłobkowa).

2. Podczas lunchu w grupie chłopiec niechcący rozlał zupę, wszystkie dzieci podrywają się i śmieją; chłopiec się boi, nauczyciel surowo tłumaczy, że trzeba uważać i że tu absolutnie nie ma się z czego śmiać.

3. Chłopiec zgubił rękawiczki, podczas spaceru bardzo zmarzły mu ręce, ale nie chce pokazać innym, że jest mu bardzo zimno.

4. Dziewczynka nie została przyjęta do gry, poszła do rogu pokoju, spuściła głowę nisko i milczała, bliska płaczu.

5. Chłopak (dziewczyna) cieszy się ze swojej przyjaciółki (dziewczyny), której rysunek okazał się najlepszy w grupie.

Przygotuj 2–3 dzieci do dramatyzowania tych historii. Prowadzenie badań. Badanie prowadzone jest z dziećmi w wieku 4-7 lat. Pierwszy odcinek. Przygotowane wcześniej dzieci odgrywają przed grupą skecz, po czym eksperymentator pyta dzieci, jak się czują bohaterowie tego skeczu. Druga seria. Eksperymentator opisuje sytuację i proponuje ją zobrazować.

Ja sytuacja - pokaż smutną, cierpiącą twarz matki, kapryśnego płaczącego chłopca i współczującą twarz dziewczynki.

II sytuacja - pokaż surową twarz nauczyciela, roześmiane, a potem zawstydzone dzieci, przerażoną twarz chłopca.

III sytuacja - jak chłopak nie chce pokazać, że jest mu zimno.

IV sytuacja - okazać urazę dziewczynie.

Vsytuacja - okazuj innym prawdziwą radość. Jeśli dzieci nie przedstawiają wyraziście lub niepoprawnie uczuć i emocji bohaterów, eksperymentator ponownie opisuje sytuacje i szczegółowo opisuje, czego doświadcza każdy z bohaterów.

Przetwarzanie danych. Analizują, w jaki sposób dzieci ucieleśniają stany emocjonalne bohaterów szkiców. Wyciągają wnioski na temat wyrazistości i bogactwa ekspresyjnych i mimicznych środków komunikacji oraz rozwoju umiejętności wczuwania się w drugiego człowieka. Dane przedstawiono w tabeli (tabela 6).

Dziś coraz więcej aspektów naszego życia podlega automatyzacji i przetwarzaniu matematycznemu, z których jednym jest główna część naszej pamięci - fotografie przedstawiające nas, naszych przyjaciół, niezapomniane chwile i wiele więcej. Nie tak dawno temu Microsoft zrobił już pierwszy i dość ciekawy krok w przetwarzaniu zdjęć - opracowano algorytm, który pozwolił określić wiek schwytanych osób (). Ale czas nie stoi w miejscu i dzisiaj porozmawiamy o nowym algorytmie zaproponowanym przez Microsoft - rozpoznawaniu emocji ze zdjęć.

Podświadomie wszyscy wiemy, jak określić, czy osoba na zdjęciu się śmieje, czy jest smutna, ale czy można zmierzyć te uczucia? Okazuje się, że jest to możliwe! I od razu zobaczmy, jaki jest ten pomiar.

Najpierw przejdź do strony projektu https://www.projectoxford.ai/demo/emotion#detection.

I od razu widzimy przykład działania algorytmu. Spróbujmy dowiedzieć się, co to jest, a następnie przeprowadzimy kilka eksperymentów.

Zatem po lewej stronie znajduje się analizowany obraz, na którym wybrane są twarze. Od razu staje się jasne, że algorytm jest w stanie zidentyfikować wszystkie twarze na zdjęciach i każdą z nich przeanalizować.

Po prawej stronie (po najechaniu kursorem na ramki na twarzach) znajduje się obszar zawierający garść niezrozumiałego tekstu (określony tekst jest wynikiem działania algorytmu w specjalnym formacie), rozbijmy go.

W pierwszym wierszu znajduje się napis „wynik detekcji” - „wyniki analizy”.

„Prostokąt twarzy”: (

„Lewy”: 488,

„Góra”: 263,

„Szerokość”: 148,

„Wzrost”: 148

„Wyniki”: (

„Gniew”: 9.075572e-13,

„Pogarda”: 7.048959e-9,

„Wstręt”: 1.02152783e-11,

„Strach”: 1.778957e-14,

„Szczęście”: 0,9999999,

„Neutralny”: 1.31694478e-7,

„Smutek”: 6.04054263e-12,

„Niespodzianka”: 3.92249462e-11

Co to wszystko oznacza?

We fragmencie „FaceRectangle” wskazane są współrzędne narożników kadru każdej z twarzy, aby było jasne, na jakie emocje osoby będziemy patrzeć.

Fragment „Wyniki” prezentuje same wyniki. Ponieważ Algorytm jest obecnie udostępniany w trybie próbnym; wyniki nie zostały przetworzone na postać „ludzką” i prezentowane są w „formie surowej”. Ale nie bój się - wszystko jest bardzo proste! Istnieje lista ośmiu emocji:

Gniew - Gniew

Pogarda - Pogarda

Niesmak - Niesmak

Strach- Strach

Szczęście - Szczęście

Neutralny - Neutralny

Smutek - Smutek

Niespodzianka - niespodzianka

A udział każdej emocji w ogólnym stanie emocjonalnym osoby na zdjęciu jest wskazany od 0 do 1 - im wyższa liczba, tym większa jest emocja.

W rozważanym przykładzie widzimy, że pierwsza osoba na zdjęciu ma najbardziej wyraźną emocję - szczęście. Nie przejmujcie się niezrozumiałymi wartościami typu „3.92249462e-11” – jest to matematyczna forma zapisu liczby, gdzie „e-11” wskazuje, o ile miejsc w lewo należy przesunąć przecinek, czyli: w przykładzie zostanie uzyskana liczba „0,0000000000392249462”, która jest niewiarygodnie mała.

Teraz możesz fantazjować o wykorzystaniu algorytmu rozpoznawania emocji na podstawie zdjęć. Na przykład widzę w serwisie społecznościowym album ze zdjęciami, który w zależności od wybranego przez użytkownika statusu (smutek, radość lub nuda) automatycznie przestawia zdjęcia tak, aby pasowały do ​​nastroju. Lub inny przykład: będziesz przeglądać zdjęcia w Internecie, aparat Twojego urządzenia zrobi Ci zdjęcie i zgodnie z określonym algorytmem określany jest Twój nastrój, a następnie oferowane są obrazy odpowiadające Twojemu stanowi emocjonalnemu oglądając, na przykład, jeśli jesteś smutny, obrazy będą kolorowe i pozytywne.

Jestem pewien, że algorytm znajdzie wiele zastosowań. Co więcej, Microsoft udostępnił API umożliwiające dostęp do algorytmu, co oznacza, że ​​każdy może z niego korzystać i udostępniać wyniki przetwarzania na różne sposoby.

No cóż, w końcu pobawiłem się trochę z automatycznym rozpoznawaniem emocji i chcę pokazać, co z tego wyszło.

Pierwsze zdjęcie jakie sprawdziłem to oczywiście słynny Terminator - Pan Deadpan. A algorytm mnie wspierał - neutralność 0,89.

Dlaczego nie spróbować czegoś zabawnego? Pierwszą myślą Muska jest to, kto jest najlepszy w robieniu min i dobrej zabawie. I jednomyślnie - twarz pełna „szczęścia”.

Ponieważ filmy są włączone, powinniśmy spróbować Hobbita. Tutaj sam nie jestem w stanie określić całej gamy emocji na twarzy i algorytm się ze mną zgadza. Jednak w tym momencie nie zauważyłem ciekawej rzeczy - jeśli najedziesz kursorem na ramkę na zdjęciu, pojawi się okno z wynikami, miły drobiazg, szczególnie gdy jest dużo twarzy.

I znowu Jim Carrey, cóż, wydaje mi się, że ma bardzo żywe emocje - i patrzymy na zdziwienie. Wygląda na to, że miałem rację.

Na zdjęciu młody mężczyzna, którego stan emocjonalny określiliśmy jako zły.

Skomplikujmy zadanie i dajmy algorytmowi przygotowane wcześniej zdjęcia emocji. Twarze oczywiście nie są do końca naturalne, żeby wyraźnie oddać stan, ale wszystko zostało określone z bardzo dużą dokładnością.

Cóż, oszukajmy trochę. Nie zdjęcie, a portret narysowany przez artystę z naszej strony () i myślę, że to też dobry wynik!

Oczywiście nie mogłem się oprzeć i próbowałem rozpoznać uczucia Czeburaszki i zostałem z niczym - algorytm odmówił przetworzenia postaci z kreskówek.

Podsumowując recenzję algorytmu rozpoznawania emocji ze zdjęć, wdrożonego przez firmę Microsoft, chciałbym zauważyć bardzo dobre wyniki jego twórczości oraz dużą liczbę trafnych wyróżnień. Po prostu świetny wynik jak na start demo! Będziemy czekać na nowe ciekawe rozwiązania.