ぴっぴぴっぴさん、こんにちは。
マイクロソフト コミュニティをご利用いただき、ありがとうございます。
PNG のみエクスプローラー上でサムネイルが表示されず、ディスク クリーンアップなどを行っても変化がないのですね。
フォルダー オプションの設定を確認したというのは、次のページの「常にアイコンを表示し…」という項目からチェックが外れていることを確認したということでしょうか。
Windows 10で画像ファイルのサムネイル(縮小画像)が正常に表示されない場合の対処方法
その場合、フォルダー オプション内のほかの設定も確認してみるといいかもしれません。
海外フォーラムに同じく PNG ファイルのサムネイルが表示されなくなり、フォルダー オプションの特定の項目からチェックを外すと表示されるようになったという書込みがありました。
Can't preview .png files in explorer
※英語なので必要に応じて [Bing 翻訳]などをご利用ください
上記の NijaanshPurohit さん March 20, 2017 の書き込みを参考に、フォルダー オプションの「ファイルとフォルダー」という項目のチェックをいったんすべて外してみてはいかがでしょうか。
この内容で不明な点がありましたら、それもお気軽に書き込んでくださいね。