エントリー数は182、１ページに30表示させています。
テーマをelementalに変えても、同じです。xserverなんですが、日によってバラつきがあります。
画像はs3から読んでいます。

数百レベルでMySQLの限界ということはないと思いますね…。
テーマではなく、エクスプレス一覧ブロックのテンプレートをデフォルトに変えるとどうでしょうか？

すいません、ブロックのテンプレートをデフォルトに変えると、画像がなくなるので早いですね、というか今日はかなりストレスなく見れるので、コンクリの問題ではなく共有サーバーの問題かもしれません。
そもそもサムネールを画像を30個読んでるせいかもと思ったのですが、日によってかなり速度が違いとまどっています。

コンクリがxserverで画像がs3だと、xserverとs3の間の通信にボトルネックがありそうですね…。
s3に置かないとどうなるか確認してみると良いかもしれません。

なるほど、そういう事もありますね。試して見ます。