Este problema o inconveniente nos trae de cabeza a muchos. Es tan simple como que se quitó este tipo de utilidad a partir de la versión 7 de photoshop, y por tanto hay que buscarse la vida para recuperarla.
Si quieres ver las miniaturas de tus imágenes psd en el explorador de windows (tanto xp como vista) es tan simple como bajarte el fichero que dejo adjunto (comprobado y sin virus ni troyanos por que es un exe) ejecutarlo y darle a instalar, y el solito te pondrá el par de archivos y carpetas que te hacen falta en el sistema para que se vean las miniaturas. Son unos segundos y está probado en vista y xp funcionando correctamente.
Aqui dejo el archivo necesario (390kbs):
enlace caído
NOTA: Probado en Windows Vista y Windows 7 beta y funcionando correctamente