Prezentácia sa nahráva. Prosím počkajte

Prezentácia sa nahráva. Prosím počkajte

Spracovanie postupnosti pohľadu pravdepodobnostnými modelmi

Podobné prezentácie


Prezentácia na tému: "Spracovanie postupnosti pohľadu pravdepodobnostnými modelmi"— Prepis prezentácie:

1 Spracovanie postupnosti pohľadu pravdepodobnostnými modelmi
Andrej Vítek

2 Postupnosť pohľadu (scanpath)
Postupnosť fixácií a sakád v čase

3 Pravdepodobnostné modely
Modelujú pohľad ako náhodnú premennú Trénovanie modelu pomocou algoritmov maximalizácie očakávaní (expectation–maximization) Viacero druhov Gaussove modely Markove modely

4 Pravdepodobnostné modely – dáta
Dátovo založený prístup, model sa nastaví sám podľa dát V niektorých modeloch treba nastaviť aj ďalšie parametre Vstupné dáta Fixácie a sakády – model môže zanedbať dĺžku trvania S časovým odberom (time-sampled)

5 Gaussovské modely Gaussian mixture model
Spojenie Gaussových rozdelení Pozície a parametre rozdelení sa naučia z dát Počet centier sa dá určiť automaticky (Bayesian Information Criterion)

6 Skrytý Markov model (HMM)
Obsahuje skryté a pozorovateľné stavy Parametre: Počet skrytých stavov Pravdepodobnosť začatia v skrytom stave (Priors) Matica prechodov (Transition matrix) Pravdepodobnosť nastatia pozorovateľného stavu (Emissions) Dôležité je určiť počet skrytých stavov, ostatné parametre sa naučia z dát (existujú techniky, ktoré počet stavov určia automaticky na základe komplexity modelu)

7 Skrytý Markov model (HMM)
Skryté stavy Nevieme v ktorom skrytom stave sa nachádzame Vieme pravdepodobnosť nastatia pozorovateľného stavu v danom skrytom stave (emissions) Príklad – chceme na základe dát o aktivite používateľa predpovedať počasie

8 Skrytý Markov model (HMM)
Reprezentácia skrytého stavu závisí od vstupu a úlohy Regióny záujmu (2D Gaussian) Iné – kognitívny stav, ... Simola, J., Salojärvi, J., & Kojo, I. (2008). Using hidden Markov model to uncover processing states from eye movements in information search tasks. Cognitive Systems Research, 9(4), 237–251.

9 Skrytý Markov model (HMM)
Coutrot, A., Hsiao, J. H., & Chan, A. B. (2017). Scanpath modeling and classification with hidden Markov models. Behavior Research Methods, 1–18.

10 Skrytý Markov model (HMM)
Kedy použiť Máme viacero úloh (alebo vlastností pozorovateľa), pri ktorých predpokladáme, že budú mať rozdielne vlastnosti pohľadu Ak sa štatistické vlastnosti časového radu časom menia (HMM tieto zmeny vysvetľuje pomocou zmeny skrytého stavu) Príklady použitia Klasifikácia vykonávanej úlohy pri pozeraní na obrázok Zmeny kognitívnych stavov pri čítaní textu (scanning, reading, decision)

11 Skrytý Markov model (HMM)
Výsledky pri predikovaní, či konverzačné video obsahuje pôvodnú zvukovú nahrávku Coutrot, A., Hsiao, J. H., & Chan, A. B. (2017). Scanpath modeling and classification with hidden Markov models. Behavior Research Methods, 1–18.

12 Použitie Implementácie v rôznych jazykoch (Python, R, Matlab)
Je potrebné si nastaviť na svoju úlohu Existuje už implementovaný nástroj v MatLabe, ktorý je zameraný na spracovanie postupností pohľadu a klasifikáciu – SMAC with HMM

13 Scanpath modeling and classification with HMM
MatLab Majú dostupný základný návod ako použiť Poskytuje automatické spracovanie dát postupností pohľadu pomocou HMM a klasifikáciu pomocou vyberateľného algoritmu Klasifikácia používa vlastnosti (features) HMM Nevýhody Problémy s dynamickým prostredím

14 Zdroje Návod a knižnica pre SMAC with HMM (MatLab)
ox.pdf Coutrot, A., Hsiao, J. H., & Chan, A. B. (2017). Scanpath modeling and classification with hidden Markov models. Behavior Research Methods, 1–18. Simola, J., Salojärvi, J., & Kojo, I. (2008). Using hidden Markov model to uncover processing states from eye movements in information search tasks. Cognitive Systems Research, 9(4), 237–


Stiahnuť ppt "Spracovanie postupnosti pohľadu pravdepodobnostnými modelmi"

Podobné prezentácie


Reklamy od Google