Del af den overskydende tilbagevenden ikke forklares ved fælles faktorer. Specifikke tilbagevenden er uafhængig af (den med) de fælles faktorer og specifikke vender tilbage til andre aktiver. Det er også kaldet idiosynkratiske tilbagevenden.