Hola
yoelis
Puedes crear un array:
var ventana = new Array()
cuando abras ventanas, haces algo así:
ventana[0]=window.open('pagina1.html');
ventana[1]=window.open('pagina2.html');
cuando quieras cerrar las ventanas, recorres el array con un bucle
for y cierras con ventana[i].close();
Espero que te sirva de orientación. Saludos,