¿como sacarle lo negro que se forma en el vaso entrenador de mi hija?

Hola, mi hija toma en un vaso entrenador de esos que son antigoteo y en la parte de adentro tiene unos huecos que son muy dificiles de limpiar, he intentado con el cepillo para tetinas pero no llega hasta la parte que esta con esos hongos, alguien conoce algun liquido o alguna mezcla donde pueda poner la tapa para limpiarla? porque, obviamente, no quiero ponerle liquidos de limpieza porque aunque lo enjuague bien le pueden hacer mal a mi beba. Espero sus respuestas, saludos.