如果是夫妻离婚时男方要求女方退还彩礼但是没有证据的,只能先收集证据,如双方虽办理了结婚但是没有共同生活的证据,或者彩礼是婚前给付并导致给付人生活困难的证据等。

法律规定,当事人对于自己提出的主张,应当提供相应的证据,一般只要查明属于法定情形,法院就会支持彩礼的退还。
法律依据
《最高人民法院关于适用〈中华人民共和国民法典〉婚姻家庭编的解释(一)》 第五条 当事人请求返还按照习俗给付的彩礼的,如果查明属于以下情形,人民法院应当予以支持: (一)双方未办理结婚登记手续;

(二)双方办理结婚登记手续但确未共同生活;(三)婚前给付并导致给付人生活困难。适用前款第二项、第三项的规定,应当以双方离婚为条件。