Біз “OpenThermalPose2: Ашық аннотацияланған жылулық адам позалары деректер қорын деректер, субъектілер және позалармен кеңейту” атты зерттеу мақала (авторлар: Аскат Күздеуов, Мирас Закараянов, Алим Тлеулиев және профессор Атакан Варол) IEEE Transactions on Biometrics, Behavior, and Identity Science (Q1) ғылыми журналында жариялауға қабылданғанын қуанышпен хабарлаймыз.

Адам позасын анықтау әрекеттерді тану, адам мен робот арасындағы өзара әрекет, қозғалысты түсіру, кеңейтілген шындық, спорттық талдау және денсаулық сақтау салаларында қолданылады. Бұл мақсатқа арналған көптеген деректер қорлары мен терең оқыту модельдері көрінетін спектрде әзірленген. Дегенмен, жарықтың нашар жағдайы және құпиялық мәселелері әлі де өзекті. Бұл қиындықтарды жылулық камералар арқылы шешуге болады, бірақ терең оқыту модельдерін үйрету үшін аннотацияланған жылулық деректер аз.

Осы шектеуді еңсеру үшін біз OpenThermalPose деректер қорын кеңейтіп, көбірек жылулық кескіндер, адам бейнелері және позалар қостық. Кеңейтілген деректер қоры – OpenThermalPose2 – 11 391 жылулық кескін мен 21 125 адам бейнесін қамтиды, олардың әрқайсысы шекаралық қораптармен және 17 анатомиялық тірек нүктелерімен аннотацияланған. Біз осы деректер қорының тиімділігін көрсету үшін YOLOv8-pose және YOLO11-pose модельдерін үйреттік. Сонымен қатар, бұл модельдерді оңтайландырып, оларды нақты жағдайда пайдалану үшін NVIDIA Jetson AGX Orin 64GB құрылғысына орналастырдық.

Деректер қоры мен алдын ала үйретілген модельдер осы саладағы әрі қарайғы зерттеулерді қолдау мақсатында ашық қолжетімді.

Толық мақаланы IEEE Xplore сайтынан оқи аласыз. Деректер қоры мен модельдер GitHub платформасында қолжетімді.