Con JoomGallery no se pueden ver vídeos, ya que sólo es una galería fotográfica, pero hay un componente muy bueno para poner una galería de vídeos, que es Seyret.
El otro día lo intenté instalar pero no me dejó (todavía no se por qué), pero he visto que muchos usuarios lo tienen y están muy contentos con el, de todas formas mirate este link:
http://extensions.joomla.org/search?q=Seyret
Un saludo!