合同履约保证金是指在合同签订时，由一方（通常是买方）按照约定支付给另一方（通常是卖方）作为履行合同义务的担保。保证金的支付旨在确保合同的顺利履行，并使违约方有所顾忌，从而减少违约风险。

然而，在某些情况下，当合同的履行已经结束或终止时，买方支付的保证金应当退还给其本人。合同履约保证金的退还依据着中国法律和相关法规进行，保证了买卖双方在交易过程中的权益。

根据中国合同法的规定，当履约期满或者提前解除合同后，如果没有债权人对履行替代债务提出异议，买方有权要求对方无息退还履约保证金。

然而，退还保证金可能也会受到一些限制。如果买方在合同履行过程中存在违约行为，卖方可以据此扣除相应金额的保证金作为赔偿。此外，如果双方就保证金的退还事项在合同中单独约定，那么按照约定执行。

对于按照约定进行退还的保证金，买卖双方应当遵守合同的规定，在规定的期限内进行履行。一旦其中一方违反了约定，导致保证金无法及时退还，另一方可以通过仲裁或诉讼等方式来维护自身权益。

此外，在特殊情况下，如天灾人祸等不可抗力因素导致合同无法履行，双方也需要依法按照情况处理保证金的退还问题。

总而言之，合同履约保证金的退还是保障买卖双方权益的重要环节。在合同签订前，双方应当明确约定相关条款，并在合同生效后按照约定进行保证金的支付和退还，以保证合同的顺利履行。