Renan, vamos fazer as regras básicas antes de partirmos pra avançadas:
Causa de desempenho:
1) Atualizações são interrompidas;
2) Imcompatibilidades com Anti-Spam ou Anti-vírus;
3) O arquivo .pst está corrompido;
4) Problemas de comunicação nesse ponto;
5) Personalizações na interface;
Executa o reparo da base de dados do outlook, faz o seguinte:
Local onde microsoft office está instalado/SCANPST
O meu está assim:
C:\Program Files\Microsoft Office\Office14\SCANPST
Executa a ferramenta de Reparo do banco (SCANPST)
Espero ter ajudado!
Responda se deu certo!