Que yo sepa, esas listas se hacen automáticamente con PHP o similar, mostrando links a los # más cercanos al actual...
Además, Mikel tiene un buen punto, pues es mejor hacer estos con <ul> hasta donde se, y posiblemente más facil de manejar y automatizar con CSS que una celda... Creo yo.