保险退保时保费不一定会全部返还。如果投保人在保险合同生效后提出退保，保险合同是具有法律效益的，这种情况就属于投保人单方面违约，保险公司会根据保单现金价值进行退保，并终止保险合同。