Hola Brissa del mar.
Mira haz lo siguiente.
En el icono del internet explorer haz click con el boton derecho.
Veras "propiedades de internet" haz click
Veras ahora un aparatado que se llama "historial de exploracion"
Dale al boton que pone elimirnar
Y tendras ante ti lo que estabas buscando
Marca lo que quieres borrar y click en el boton "Eliminar".
Tambien puede isntalar programas como el ccleaner que lo puedes descargar de aqui
Y asi puedes hacer una limpieza mas completa de todo el equipo.
Espero te sirva mi ayuda y me cuentas que tal te fue
Un saludo