ext4は後方互換だったと思うので、読めそうなものですが。。
下記のような記事もありました。
http://www.linuxjournal.com/article/9449

他のものでは以下があるようです。
http://www.fs-driver.org/
http://www.diskinternals.com/linux-reader/

いずれもext4自体をサポートしているわけではないようなので、機能的にはext2に限定されそうですが。
ext4はまだ実験的な色合いが強いので、windowsから完全にアクセスできるようになるまでには、もう
少し時間がかかるかも知れません。