マイコンピュータか、マイドキュメントなどのエクスプローラを開き、[ツール] → [フォルダオプション]の順に選択します。表示タグをクリックし、「登録されているファイルの拡張子は表示しない」のチェックをOFFにして、[OK]をクリックします。
また[スタート] → [プログラム] → [アクセサリ] → [エクスプローラ]からも設定することができます。