No estoy seguro que funcione de esta manera a causa del Sum, pero puedes provarlo:
SELECT Colores, SUM(Colores) as NumColor FROM tabla GROUP BY Colores ORDER BY NumColor DESC;
Si no sale dimelo y te digo una manera que seguro que funciona, pero habrás de hacer algunos cambios.
PD:
http://www.asptutor.com/sql/sql4.asp#4.1