Te recomendaría OpenCV, ya que si no me equivoco implementa reconocimiento facial en videos, aquí esta la página oficial y la documentación en C++. También hay un libro que puedes comprar en
amazon.
Libface está basada en OpenCV pero OpenCV tiene mucha más documentación.
Saludos
