Si se trata de una página estática hecha a mano, lo que suelo utilizar es el mismo Notepad++ y la opción "Reemplazar > Buscar en archivos > Buscar tal cosa > Reemplazar por > En todos los archivos (señalando la carpeta donde tienes los archivos que quieres reemplazar).
Si es algo pequeño (una frase o un div en la misma línea) como decía, utilizo el Notepad++, pero si se trata de un trozo de texto grande y largo utilizo una versión antigua que tengo del Dreamweaver donde sí se pueden reemplazar en archivos bastante código fuente de una vez.
Eso sí, como consejo, haz una copia de seguridad antes, no sea que te equivoques, porque hasta cogerle el tranquillo cuesta un poco.