La hoja de detalle es otra hoja, completamente independiente de la original (y también independiente del caché interno que utiliza Excel para calcular la tabla dinámica). El formato de esta hoja le hace Excel adivinando. Parece que en tu caso adivina mal.
Dado que mi bola de cristal está actualmente rota, sin mas información no puedo saber exactamente dónde está el fallo de adivinación. ¿Quizá el formato de la celda en la tabla dinámica? ¿Quizá una celda determinada de la tabla original tiene un mal formato? ¿Quizá el estilo por defecte en el archivo Excel?
En cualquier caso, la solución al problema es de cambiar el formato de la tabla de detalle; no tiene consecuencias. Con un buen paramétrage de los estilos se debe poder hacer con dos clics.