Schau in die Aktivitätsanzeige, welcher Prozess so viel Rechenzeit frisst. Es muss nicht an TM oder Spotlight liegen.

Bei mir war's der FileStatsAgent, der den neuen Mac mini zum Erliegen gebracht hat: https://discussions.apple.com/message/23556195