合同履约保证金是在签订合同时，一方支付给对方的金额。它的存在是为了保证合同的履行。当合同期满或者合同终止时，保证金应该被归还给支付方。

然而，在实际操作中，有些情况下，支付方并不能够轻易地拿回自己支付的保证金。

首先，如果合同中明确规定了保证金的退还条件和时间，那么支付方可以按照合同约定来要求返还保证金。通常情况下，只有在受益人履行了合同约定的义务之后，才能要求退还保证金。

其次，如果合同中没有明确规定保证金的退还条件，那么根据《合同法》的相关规定，支付方可以提起诉讼或者申请仲裁，要求退还保证金。在这种情况下，法院或者仲裁机构会根据具体情况判断是否有必要返还保证金。

然而，即使按照合同约定或者法律规定，支付方有权要求退还保证金，也并不意味着保证金能够无条件地返还。在实践中，保证金的返还可能会受到一些限制。

首先，合同履约保证金的金额通常比较大，一方要求返还保证金可能会导致债务人无力偿还其他债务，从而引发争议。这时候，可能需要支付方提供相应证明或者担保才能够实现保证金的返还。

其次，如果合同涉及到违约或者损失赔偿的情况，保证金可能会被用于弥补另一方的损失。在这种情况下，支付方就无法要求退还保证金。

总之，合同履约保证金是为了保障合同的履行而支付的一笔费用。支付方有权按照合同约定或者法律规定要求返还保证金。然而，在实际操作中，保证金的返还可能会受到各种限制。