Apache2の設定でAliasを使って
ローカルディスク上のパスとURLのマッピングをしています。

Alias /cake/ /path/to/cakephp/

で、cakephp2が.htaccessでmod_rewriteを使ってパスをかきえています。

RewiteRule (.*) app/webroot/$1 [L]

これだと、Apacheが /path/to/cakephp/app/webroot/を見に行ってNotFoundになってしまいます。
cakephpの.htaccessファイルは複数あるので手を加えたくありません。
httpd.conf等の修正で解決する方法がありましたら教えてください。