Hola xias, si es por defecto es el mismo código que se genera al cambiar la barra de scroll normal.
Por ejemplo con esto te servirá para el que te salga en cualquier capa, pero solo en Iexplorer.
body {
scrollbar-3dlight-color : #663333;
scrollbar-darkshadow-color : #993300;
scrollbar-highlight-color : #ffffff;
scrollbar-shadow-color : #ffffff;
scrollbar-arrow-color : #ffffff;
scrollbar-face-color : #663333;
scrollbar-track-color : #663333;
}
Cambialo a tu gusto
Por cierto, como te dice tunait echale un vistazo a las Faqs de css que te explican como cambiar el color
