[Pose Estimation] openpose Library

 

 

 

OpenPose 라이브러리의 정식 최종 버전이 발표되었다. 이 라이브러리는 사람의 행위를 인식하고 스켈레톤 모델을 정확히 구해낼 수 있는 라이브러리 이다. C++ 기반으로 쓰여져 있으며, Caffe 기반의 라이브러리이지만, 간단한 수정이나, 약간의 expend를 원할 경우 Tensorflow 를 사용하거나 Windows 환경에서 실행 해 볼 수 있다. 

 

정확히는 C++와 Caffe 기반의 Real-time multi-person keypoint detection and multi-threading 라이브러리 라고 할 수 있다. 

 

저자는 Gines Hidalgo, Zhe Cao, Tomas Simon, Shih-En Wei, Hanbyul Joo and Yaser Sheikh 이다. 간혹 HAR 관련 논문을 보다보면 Zhe Cao 이 분의 이름을 참 자주 봤었던 것 같다. 이 라이브러리에 한국인 이름도 보인다. 나는 언제쯤 이런 성과를 거두려나 아무튼,

 

 

라이브러리의 주된 기능은 다음과 같다.

 

- Multi-person 15 or 18-keypoint body pose estimation and rendering. Running time invariant to number of people on the image

- Multi-person 2 x 21-keypoint hand estimation and rendering. Note : In this initial version, running time linearly depends on the number of people on the image. Coming soon (in around 1-5 days)!

- Multi-person 70-keypoint face estimation and rendering. Note : In this initial version, running time linearly depends on the number of people on the image.

- Flexible and easy-to-configure multi-threading module.

- Image, video, and webcam reader.

- Able to save and load the results in various formats (JSON, XML, PNG, JPG, ...).

- Small display and GUI for simple result visualization.

- All the functionality is wrapped into a simple-to-use OpenPose Wrapper class.

 

 

 

 

실행 환경은 다음과 같다.

 

1. Ubuntu 14 and 16.

2. Windows 8 and 10.

3. 그리고 Windows 7, Mac, CentOS, Nvidia Jetson 에서도 사용 할 수는 있지만 공식적으로 지원하지는 않는다. 

 

 

 

 

 

관련 논문으로는 세 편 정도가 있는데 아래와 같다.

 

@inproceedings{cao2017realtime,
  author = {Zhe Cao and Tomas Simon and Shih-En Wei and Yaser Sheikh},
  booktitle = {CVPR},
  title = {Realtime Multi-Person 2D Pose Estimation using Part Affinity Fields},
  year = {2017}
  }

@inproceedings{simon2017hand,
  author = {Tomas Simon and Hanbyul Joo and Iain Matthews and Yaser Sheikh},
  booktitle = {CVPR},
  title = {Hand Keypoint Detection in Single Images using Multiview Bootstrapping},
  year = {2017}
  }

@inproceedings{wei2016cpm,
  author = {Shih-En Wei and Varun Ramakrishna and Takeo Kanade and Yaser Sheikh},
  booktitle = {CVPR},
  title = {Convolutional pose machines},
  year = {2016}
  }