Hola jordicuende farran
Para ver un archivo de imagen en el icono, de forma tal que no necesites abrir el archivo para ver la imagen debes configurar las opciones de visualización de archivos del explorador de Windows de la siguiente manera:
1. Abre una carpeta que contenga imágenes.
2. Haz clic en el botón Cambie la vista en la parte superior derecha del explorador de Windows, debajo de la barra de Windows Search.
3. Despliega el menú y selecciona la opción Iconos muy grandes, Iconos grandes¸o Iconos pequeños, de esta forma cuando abras una carpeta con archivos de imagen podrás ver la imagen en el icono del archivo.
Para más información visita este enlace.
Inténtalo y déjanos saber si la solución fue útil o si por el contrario tienes más inquietudes, quedamos atentos a tu respuesta.
Responde a las consultas que te realice la comunidad, tanto si con ella obtienes una solución, como si no .Si crees que un comentario aporta a la consulta, vótalo como útil en la opción ubicada a la izquierda de la publicación. Utiliza la opción Marcar como respuesta si con un comentario has llegado a una solución. Si has encontrado la respuesta a tu consulta fuera de este sitio, comparte la misma para ayudar a otros con el mismo problema.