Simplemente hay que abrir el Explorador, ir a la pestaña "Vista" en la sección superior, hacer clic en "Opciones" y luego en "Cambiar opciones de carpeta y búsqueda".
Luego de eso se abrirá una ventana llamada "Opciones de Carpeta". Dentro de ella, vamos a la sección Privacidad, ubicada en la sección inferior, y desmarcamos las casillas "Mostrar los archivos usados recientemente en el Acceso rápido" y "Mostrar las carpetas usadas con frecuencia en el Acceso rápido".
Aplicar y Aceptar.