Bueno, la verdad es que no es complicado...
Basta con que hagas los siguiente pasos
1. Captura la dirección de la página actual (window.location)
2. extrae el número de la página solamente (objeto string)
3. conviertelo a número
4. crea una función que sume o reste según haga falta
5. crea una dirección web nueva, es decir, tu dirección + el número resultante del paso 4 + .htm
6. sustituye el location actual con la dirección obtenida antes.
listo
La forma más cómoda para poner a funcionar esa función, es que el botón de anterior pase el valor de -1 y el de siguiente pase el valor de 1, algo así como
<a href="javascript
:cambiar(-1)">anterior</a>
<a href="javascript
:cambiar(1)">siguiente</a>
Espero haberme explicado adecuadamente
Suerte
Felicidad