352 / 2022-11-12 16:46:27

Real-time hand reconstruction based on a monocular camera

3D Hand Reconstruction, Virtual Reality, Augmented Reality

3D reconstruction of the hand is an important part of providing a natural way to interact and communicate in AR/VR. We propose a novel hand 3D reconstruction solution that does not require any additional hardware, like data glove, VR grip, depth camera, but only a monocular RGB camera to obtain accurate, real-time hand 3D reconstruction. Experimental results have demonstrated that our proposed method achieves 97.5% accuracy on average and 60-90 fps frame rate on average.