Carnegie Mellon \u00dcniversitesi\u2019nin Robotik Enstit\u00fcs\u00fc\u2019nden ara\u015ft\u0131rmac\u0131lar, birden \u00e7ok insan\u0131n duru\u015flar\u0131n\u0131 ve hareketlerini videolardan ger\u00e7ek zamanl\u0131 olarak tespit edebilen ve anlayabilen bir bilgisayar geli\u015ftirdi. Bilgisayar\u0131n ki\u015filerin parmak hareketlerini de alg\u0131l\u0131yor olmas\u0131 ise bir ilk.<\/p>\n
Bu yeni metodun geli\u015ftirilmesinde Panoptik St\u00fcdyo ad\u0131 verilen iki katl\u0131 ve i\u00e7inde toplamda 500 kamera bulunan kubbemsi yap\u0131 kullan\u0131ld\u0131. Bu tesiste y\u00fcr\u00fct\u00fclen deneylerden toplanan veriler, yaln\u0131zca bir diz\u00fcst\u00fc bilgisayar ve bir kamera ile bir grup insan\u0131n beden dillerini video kay\u0131tlar\u0131 \u00fczerinden okuyabilen bir sistemin geli\u015ftirilmesinde kullan\u0131ld\u0131.<\/p>\n
Robotik Enstit\u00fcs\u00fc\u2019nden Do\u00e7. Yaser Sheikh, iki boyutlu insan formunun takip edilmesi y\u00f6n\u00fcndeki bu geli\u015fmelerin insan-makine etkile\u015fimine yeni bir soluk getirece\u011fini s\u00f6yl\u00fcyor, \u00f6zellikle de insanlar\u0131n makinelerini d\u0131\u015f d\u00fcnyay\u0131 daha iyi anlamada kulland\u0131klar\u0131 durumlarda. \u00d6rne\u011fin el hareketlerinin bilgisayar taraf\u0131ndan tan\u0131nabilmesi, insanlar\u0131n makinelerle daha do\u011fal hatta \u201cinsani\u201d bir bi\u00e7imde anla\u015fmalar\u0131n\u0131 sa\u011flayacak, mesela bir objeye i\u015faret ederek g\u00f6stermek makineye anlatmak i\u00e7in yeterli olacak.<\/p>\n
Robotlar\u0131n s\u00f6zs\u00fcz ileti\u015fimin n\u00fcanslar\u0131n\u0131 daha iyi kavramalar\u0131 ise sosyal alanlarda da kullan\u0131labilmelerini sa\u011flayacak. Robotlar, beden dilini okuyarak insanlar\u0131n duygu durumlar\u0131na g\u00f6re uygun zamanlamalar belirleyebilecekler. S\u00fcr\u00fcc\u00fcs\u00fcz ara\u00e7lardan biri, beden dilini okuyarak kald\u0131r\u0131mdaki yayan\u0131n kar\u015f\u0131ya ge\u00e7meye \u00e7al\u0131\u015faca\u011f\u0131n\u0131, hen\u00fcz o yola ad\u0131m atmadan anlayabilir. Ayn\u0131 zamanda insan davran\u0131\u015flar\u0131n\u0131 kavrayabilen robotlar, disleksi, otizm ve depresyon gibi davran\u0131\u015flar\u0131n te\u015fhis ve tedavisine de yeni bir g\u00f6zle bakmam\u0131z\u0131 sa\u011flayabilir.<\/p>\n
\u201c\u0130leti\u015fim kurarken en az sesimiz kadar bedenimizi de kullan\u0131yoruz,\u201d diyor Sheikh, \u201cancak bilgisayar bunu neredeyse hi\u00e7 hesaba katm\u0131yor.\u201d<\/p>\n
Spor m\u00fcsabakalar\u0131n\u0131n analizinde de pozisyonlar\u0131 ger\u00e7ek zamanda alg\u0131layan robotlar, sporcular\u0131n yaln\u0131zca sahada nerede olduklar\u0131n\u0131 de\u011fil; kol, bacak ve kafa hareketlerini anbean takip ederek izlediklerimizi derinle\u015ftirebilir. Bu metotlar yaln\u0131zca canl\u0131 yay\u0131nlarda de\u011fil, halihaz\u0131rda internette bulunan videolarda da kullan\u0131labilir.<\/p>\n
Bu konuda daha fazla ara\u015ft\u0131rma yap\u0131lmas\u0131n\u0131 te\u015fvik etmek i\u00e7in ara\u015ft\u0131rma grubu hem birden \u00e7ok insan\u0131 takip edebilmek hem de el pozisyonlar\u0131n\u0131 tahmin etmek i\u00e7in yazd\u0131klar\u0131 kodu payla\u015ft\u0131lar. Sheikh, \u015fimdiden bu \u00e7al\u0131\u015fmaya dahil olan bir\u00e7ok ilgili, ara\u015ft\u0131rmac\u0131 grubun yan\u0131 s\u0131ra i\u00e7inde otomotiv \u015firketlerinin de bulundu\u011fu 20 ticari grubun da teknolojinin lisans\u0131n\u0131 almak \u00fczerine \u00e7al\u0131\u015ft\u0131klar\u0131n\u0131 belirtiyor.<\/p>\n
Sheikh ve meslekta\u015flar\u0131 \u00e7ok ki\u015fili el hareketi yorumlama metotlar\u0131n\u0131n raporlar\u0131n\u0131 bu y\u0131l 21-26 Temmuz aras\u0131nda Honolulu\u2019daki Computer Vision and Pattern Recognition konferans\u0131nda (CVPR) sundular.<\/p>\n
Birden \u00e7ok insan\u0131 ger\u00e7ek zamanl\u0131 olarak \u00f6zellikle de birbirleriyle etkile\u015febilecekleri bir ortamdalarken takip etmenin bir\u00e7ok zorlu\u011fu var. Tek tek bireysel hareketleri okuyan yaz\u0131l\u0131mlar\u0131n kullan\u0131lmas\u0131 grup b\u00fcy\u00fcd\u00fck\u00e7e zorla\u015f\u0131yor ve kullan\u0131\u015fs\u0131zla\u015f\u0131yor. Dolay\u0131s\u0131yla Sheikh ve ekibi tam tersi bir yol izleyerek, bilgisayar\u0131n \u00f6nce jest ve mimiklerin t\u00fcm\u00fcn\u00fc tespit etmesini, sonra bunlar\u0131 bireylere tek tek e\u015fle\u015ftirmesini sa\u011flad\u0131lar.<\/p>\n
Ellerin alg\u0131lanmas\u0131 ise \u00e7ok daha zor. \u0130nsanlar ellerini jestlerinde \u00e7ok yo\u011fun kulland\u0131klar\u0131 ve zaman zaman bir \u015fey tutuyor olduklar\u0131 i\u00e7in kameran\u0131n elin tamam\u0131n\u0131 g\u00f6r\u00fcyor olmas\u0131 neredeyse imk\u00e2ns\u0131z. Ayn\u0131 zamanda eller i\u00e7in y\u00fcz ve bedenin geri kalan k\u0131sm\u0131 i\u00e7in oldu\u011fu gibi geni\u015f, adland\u0131r\u0131lm\u0131\u015f ve etiketlenmi\u015f duru\u015f de\u011ferlendirme skalalar\u0131 mevcut de\u011fil.<\/p>\n
\u201cAncak elin tek taraf\u0131n\u0131n g\u00f6r\u00fcnd\u00fc\u011f\u00fc hemen her kare i\u00e7in geri kalan\u0131n\u0131n tamam\u0131n\u0131n g\u00f6r\u00fcnece\u011fi bir a\u00e7\u0131dan \u00e7ekim yaparak tamamlamak m\u00fcmk\u00fcn\u201d diyor doktora \u00f6\u011frencisi Hanbyul Joo. Panoptik St\u00fcdyo da tam olarak bu ama\u00e7la kullan\u0131ld\u0131. \u201cTek bir \u00e7ekim, bir insan elini 500 farkl\u0131 a\u00e7\u0131dan g\u00f6rd\u00fc\u011f\u00fc gibi elin pozisyonunu da hemen belirliyor\u201d diye a\u00e7\u0131kl\u0131yor Joo. \u201cEller, bir\u00e7ok kameram\u0131z\u0131n alg\u0131layamayaca\u011f\u0131 kadar k\u00fc\u00e7\u00fckler. Buna ra\u011fmen biz bu \u00e7al\u0131\u015fmada yaln\u0131zca 31 y\u00fcksek \u00e7\u00f6z\u00fcn\u00fcrl\u00fckl\u00fc kamera kullanarak bile \u00e7ok geni\u015f bir veritaban\u0131 ortaya \u00e7\u0131kard\u0131k.\u201d<\/p>\n
Joo ve bir ba\u015fka doktora \u00f6\u011frencisi olan Tomas Simon binlerce g\u00f6r\u00fcnt\u00fc elde edebilmek i\u00e7in kendi ellerini kulland\u0131lar.<\/p>\n
\u201cPanoptik St\u00fcdyo ara\u015ft\u0131rmam\u0131zda adeta doping etkisi yap\u0131yor\u201d diyor Sheikh. \u015eu an v\u00fccut, y\u00fcz ve el dedekt\u00f6rlerini birlikte \u00e7al\u0131\u015ft\u0131rarak geli\u015fmelerini sa\u011fl\u0131yor. Ayr\u0131ca \u00e7al\u0131\u015fma iki-boyutlu modellerden \u00fc\u00e7-boyulu modellere kayd\u0131k\u00e7a, st\u00fcdyonun an\u0131nda a\u00e7\u0131klamal\u0131 g\u00f6r\u00fcnt\u00fcler \u00fcretebiliyor olu\u015fu hayati \u00f6nem kazanacak. \u201c10 y\u0131ldan fazla bir s\u00fcre \u00f6nce National Science Foundation (Ulusal Bilim Derne\u011fi) taraf\u0131ndan Panoptik St\u00fcdyo kuruldu\u011funda etkisinin ne olaca\u011f\u0131 bilinmiyordu\u201d diyor Sheikh. \u201c\u015eimdi ise 10 y\u0131l \u00f6nceki bir NSF ba\u011f\u0131\u015f\u0131 sayesinde bir\u00e7ok teknik bariyeri a\u015fmam\u0131z m\u00fcmk\u00fcn oldu\u201d diye de ekliyor, \u201cKodu payla\u015f\u0131yoruz, \u00fcstelik Panoptik St\u00fcdyo taraf\u0131ndan kaydedilen b\u00fct\u00fcn verileri de halka a\u00e7\u0131yoruz.\u201d<\/p>\n","protected":false},"excerpt":{"rendered":"
Carnegie Mellon \u00dcniversitesi\u2019nin Robotik Enstit\u00fcs\u00fc\u2019nden ara\u015ft\u0131rmac\u0131lar, birden \u00e7ok insan\u0131n duru\u015flar\u0131n\u0131 ve hareketlerini videolardan ger\u00e7ek zamanl\u0131 olarak tespit edebilen ve anlayabilen bir bilgisayar geli\u015ftirdi. Bilgisayar\u0131n ki\u015filerin parmak hareketlerini de alg\u0131l\u0131yor olmas\u0131 ise bir ilk. Bu yeni metodun geli\u015ftirilmesinde Panoptik St\u00fcdyo ad\u0131 verilen iki katl\u0131 ve i\u00e7inde toplamda 500 kamera bulunan kubbemsi yap\u0131 kullan\u0131ld\u0131. Bu tesiste y\u00fcr\u00fct\u00fclen […]<\/p>\n","protected":false},"author":865,"featured_media":12815,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"footnotes":""},"categories":[19,31],"tags":[1100,255,1099,555],"class_list":["post-12814","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-bilim-gundemi","category-teknoloji","tag-beden-dili","tag-bilgisayar","tag-hareket","tag-insan"],"acf":[],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t