El control del
scroll lo tienes que realizar con JavaScript. Hace unas semanas, otro usuario tuvo un problema muy similar al tuyo, con la diferencia de que él quería hacer lo inverso, es decir, llegado a un punto del desplazamiento, mostrar un
<div> y al subir, volver a ocultarlo.
Aquí puedes ver la solución que le di, solo te quedaría invertir la lógica y obtendrás lo que buscas.
Saludos