mod_deflate有効時に、特定のディレクトリで圧縮させたくない場合

apache 2.2。もしhttpd.conf、virtualhost全体でSetoutputFilter DEFLATEとか設定されていた場合に、特定の場所だけしたくない場合はどうしたらいいんだろう。RemoveOutputFileterは拡張子ごとだしなぁ。
Accept-Encodingヘッダを消せばいい?

<Directory /hoge/ >
  RequestHeader unset Accept-Encoding
</Directory>