En los navegadores de escritorio deberías verlo
Como es una aplicación para ejecutar offline , te sigiero que todos los archivos estén en la misma carpeta
Te dejo 2 demos, la primera
http://foros.emprear.com/html5/test-video/
usa la misma librería que en tu ejemplo video.js
LAs urls de los videos son del servidor del desarrollador
Este otro no usa javascript
http://foros.emprear.com/html5/video_local/
Si los podés ver en tu ÇPC, es que estás haciendo alguna otra cosa mal
SAludos