Tienes que poner compatibilidad con los diferentes formatos mp4 ogg y webM asi:
Código HTML:
<video width="320" height="240" controls>
<source src="movie.mp4" type="video/mp4">
<source src="movie.ogg" type="video/ogg">
Your browser does not support the video tag.
</video>