@bloomexperiment: ありがとうございます！はい、少なくとも可視部分はこれで解決しました。/about ページにはメールアドレスが表示されなくなりました。
ただし、ブラウザで「ソースを表示」してブラウザに提供された HTML を見ると、<div class="hidden" id="data-preloaded" data-preloaded=...> タグの中に現在の contact email アドレスが含まれていることがわかります。具体的には \"contact_email\":\"currentadminemail@example.com\", のような形式です。
少し奇妙ですね。また、スパムボットがページをスクレイピングしても、同じ方法でメールアドレスを取得できてしまうでしょう。
メールアドレスを別のものに書き換えてみましたが、現在のメールアドレスがそのまま返されるため、キャッシュの問題ではないようです。