JButton aparece al pasar el puntero del raton

[coco123]

Podes agregar repaint(); luego de agregar todos los controles:

if(evento.getSource()== altas)
{
//getContentPane().setBackground(Color.BLACK);
//ventanas alta = new ventanas();
//alta.altas();

altas();
titulo.setVisible(true);
campoNombre.setVisible(true);
campoApellidos.setVisible(true);
campoDNI.setVisible(true);
campoFecha.setVisible(true);
repaint();
}