委托合同终止是否退钱得看委托合同的具体约定。通常来说是不退的，除非是因为受托人的原因而终止或者委托合同中有明确的约定。
委托合同，又称委任合同，根据《合同法》第三百九十六条之规定，是指委托人和受托人约定，由受托人处理委托人事务的合同。
委托人合同是指委托合同在受托人处理委托事务尚未完成之前就已终止或解除。
委托合同终止后，对于委托人来说，如委托费用过高，可以主张受托人未能履行全部义务而酌情根据其前期义务履行情况酌情要求受托人予以返还；对于受托人而言，如委托合同之终止系因委托人之原因，则其可以主张不予退还。
因此，在签署委托合同时，委托人和受托人双方要明确约定违约责任条款及合同终止的情形，明确合同终止后双方的权利义务，以避免争议纠纷的发生。
《中华人民共和国合同法》第三百九十六条
委托合同是委托人和受托人约定，由受托人处理委托人事务的合同。
《中华人民共和国合同法》第四百零七条
受托人处理委托事务时，因不可归责于自己的事由受到损失的，可以向委托人要求赔偿损失。
