AIHUB(피트니스 자세 이미지)데이터를 활용하고자 YOLOv8모델과 Media Pipe 모델의 키포인트를 비교하였습니다.
| AI HUB<24> | COCO(YOLO)<17> | MediaPipe<32> |
| Nose(0) | 코(0) | 코(0) |
| Left Eye(1) | 왼쪽 눈(2) | 왼쪽 눈(5) |
| Right Eye(2) | 오른쪽 눈(1) | 오른쪽 눈(2) |
| Left Ear(3) | 왼쪽 귀(4) | 왼쪽 귀(8) |
| Right Ear(4) | 오른쪽 귀(3) | 오른쪽 귀(7) |
| Left Shoulder(5) | 왼쪽 어깨(6) | 왼쪽 어깨(12) |
| Right Shoulder(6) | 오른쪽 어깨(5) | 오른쪽 어깨(11) |
| Left Elbow(7) | 왼쪽 팔꿈치(8) | 왼쪽 팔꿈치(14) |
| Right Elbow(8) | 오른쪽 팔꿈치(7) | 오른쪽 팔꿈치(13) |
| Left Wrist(9) | 왼쪽 손목(10) | 왼쪽 손목(16) |
| Right Wrist(10) | 오른쪽 손목(9) | 오른쪽 손목(15) |
| Left Hip(11) | 왼쪽 골반(12) | 왼쪽 엉덩이(24) |
| Right Hip(12) | 오른쪽 골반(11) | 오른쪽 엉덩이(23) |
| Left Knee(13) | 왼쪽 무릎(14) | 왼쪽 무릎(26) |
| Right Knee(14) | 오른쪽 무릎(13) | 오른쪽 무릎(25) |
| Left Ankle(15) | 왼쪽 발목(28) | |
| Right Ankle(16) | 오른쪽 발목(27) | |
| Neck(17) | ||
| Left Palm(18) | ||
| Right Palm(19) | ||
| Back(20) | ||
| Waist(21) | ||
| Left Foot(22) | 왼쪽 발(16) | |
| Right Foot(23) | 오른쪽 발(15) | |
| 오른쪽 눈 안쪽(1) | ||
| 오른쪽 눈 밖(3) | ||
| 왼쪽 눈 안쪽(4) | ||
| 왼쪽 눈 밖(6) | ||
| 입 오른쪽(9) | ||
| 입 왼쪽(10) | ||
| 오른쪽 새끼손가락 관절(17) | ||
| 왼쪽 새끼손가락 관절(18) | ||
| 오른쪽 검지손가락 관절(19) | ||
| 왼쪽 검지손가락 관절(20) | ||
| 오른쪽 발뒤꿈치(29) | ||
| 왼쪽 발뒤꿈치(30) | ||
| 오른쪽 발가락(31) | ||
| 왼쪽 발가락(32) |
Keypoint detection 모델을 사용하기에 앞서, 키포인트를 비교함으로써, 적합한 키포인트 사용하여 성능을 높이고자 비교하였습니다.
AIHUB데이터는 키포인트가 24개로 이루어져있습니다.
YOLO(1-stage detector 방식)는 coco데이터셋으로 학습되었으며, 키포인트는 17개로 이루어져있습니다.
Media Pipe (2-stage detector 방식)는 키포인트가 32개로 이루어져있습니다.
'AI > 컴퓨터비전(Computer Vision)' 카테고리의 다른 글
| 3d Keypoint tools(3d json) 키 포인트 도구 (0) | 2023.10.22 |
|---|