Si ya estas usando widget, solo debes marcar el checkbox de "Mostrar jerarquía" en el widget de categorías. Sino modificar la llamada a wp_list_categories() para que incluya la jerarquía:
<?php
wp_list_categories("hierarchical=1"); ?>
Más detalles de
como usar wp_list_categories.