Supongo que ocultando los links funcionara, ejemplo:
Código HTML:
<a href="img/imagen_grande01.jpg" rel="lightbox"><img src="img/imagen_peque01.jpg" /></a>
<a href="img/imagen_grande02.jpg" rel="lightbox" style="display:none"><img src="img/imagen_peque02.jpg" /></a>
<a href="img/imagen_grande03.jpg" rel="lightbox" style="display:none"><img src="img/imagen_peque03.jpg" /></a>
<a href="img/imagen_grande04.jpg" rel="lightbox" style="display:none"><img src="img/imagen_peque04.jpg" /></a>