一般是不用退还的，除非有证据证明钱是他借给你的。如果是他借钱，那是要还的。如果是双方在交往过程中他赠与给您的，那么就不用还。

法律依据：

《中华人民共和国民法典》

第六百五十七条赠与合同是赠与人将自己的财产无偿给予受赠人，受赠人表示接受赠与的合同。

第六百五十八条赠与人在赠与财产的权利转移之前可以撤销赠与。

经过公证的赠与合同或者依法不得撤销的具有救灾、扶贫、助残等公益、道德义务性质的赠与合同，不适用前款规定。

第六百五十九条赠与的财产依法需要办理登记或者其他手续的，应当办理有关手续。