標題の件でApache 2.2の設定のままだとハマりました。結論を書くと、以下のページに答えがありました。
すなわち、Apache 2.4では以下のように設定を書く必要があります。
SSLProxyEngine on SSLProxyVerify none SSLProxyCheckPeerCN off SSLProxyCheckPeerName off SSLProxyCheckPeerExpire off
さらに、a2enmodでproxy_httpを有効にします（Debianの場合）。
# a2enmod proxy_http
Apacheを再起動すると、正しくリバースプロキシが動作しました。
