Então Coxão, muito do problema de carga do fórum se devia aos Avatares enormes dos usuários, tinha usuário com avatar de 5MB, isso produzia uma carga enorme no site. Agora com o policiamento dos avatares isso deve se reduzir.
Apesar disso eu nunca tive esse tipo de problema que você está vivenciando, se persistir podemos verificar se é um problema aqui ou no seu servidor, mas para isso precisaríamos da cooperação de mais usuários.