Hay un pequeño fallo en mi código, ya que se envían los headers y hay que limpiarlos primero por lo que debería de ser:
Código PHP:
header_remove();
header('Content-type: application/pdf');
header('Content-Disposition: inline; filename="' . $file . '"');
readfile($file);
exit;