我单人直接退也要惩罚？