Проверьте, включен ли ipv6
sysctl -a|grep disable_ipv6
Если он не включен или отключен ipv6 в spamassassin, как было предложено выше.