Windows non ha il supporto del filesystem Linux nativo (ext3, ext4, zfs, tra gli altri). È così semplice.
Windows supporta nativamente solo i file system NTFS e FAT (diverse versioni) (per dischi rigidi/sistemi magnetici) e CDFS e UDF per supporti ottici, secondo questo articolo.
Per accedere ad altri file system, saranno necessari driver/software aggiuntivi. Ad esempio, il driver Ext2 Installable File System per Windows è un progetto open source che supporta il sistema Ext2.
MODIFICA :errore di battitura corretto - elencato "UFS" invece di "UDF" - complimenti a @ChrisS per aver colto l'errore.