Hola:
Supongo que los distintos html que tengas en tus include serán estáticos y sólo usas el php para "generar" el html completo, supongo también que toda tu página es estática porque sino no la cambiarias a un servidor que no soporta php.
Partiendo de esto, tengo una solución... de andar por casa. Supongo (y ya van unas pocas suposiciones) que en local sí puedes trabajar con php, entonces ¿por qué no ejecutas tus páginas en local y subes al servidor el html generado en cada una de ellas?
Saludos.