@mholt さん、こんにちは 
、
/latest と /categories の間を行き来してみましたが、かなり高速です。
アプリの特定のルートで遅延が発生しているのをご覧になっていますか？
また、MiniProfiler は有効になっていますか？
有効化手順は以下をご覧ください：Long loading times for user summary page with slow database - #6 by Falco
有効化後、遅延が発生した際に、その原因を正確に特定できるようになります。