Borro "border" y me desplaza toda la página

[Iballa]

Hola, estoy haciendo el header y el navegador de una página.

Para ver donde estoy y no confundirme a veces le pongo un color a las cajas, para ver exactamente donde están, pero esta vez le puse un border: 1px solid black, (ej) simplemente para ver los límites de las cajas y no perderme.

Bueno, seguí haciendo la página hasta el navegador, recurdo de que ese border no tenía que estar ahí, se lo quito en el css y de repente me baja el header y todo su contenido y el navegador, toda la pagina hecha hacia abajo, dejándome un margen blanco por encima del header de unos 100 px aprox.

Si ahora le doy al header un margin negativo de ese tamaño, -100 px pues me lo devuelve al sitio, pero no es plan, no sé por qué paso esto.

O bien, si le vuelvo a poner los border, tal como estaban, me vuelve la página normal.

¿alguien tiene idea de esto tan extraño?

Gracias