女方起诉离婚的,如果双方虽然结婚了但是没有共同生活;或者给付彩礼导致男方生活困难的,在离婚时才需要退还彩礼,不存在这两种情况的,即使起诉离婚也不需要退还彩礼。
离婚时是否退彩礼与谁提出的离婚没有关系。
法律依据
《最高人民法院关于适用<中华人民共和国民法典>婚姻家庭编的解释(一)》 第五条当事人请求返还按照习俗给付的彩礼的,如果查明属于以下情形,人民法院应当予以支持:(一)双方未办理结婚登记手续;
(二)双方办理结婚登记手续但确未共同生活;(三)婚前给付并导致给付人生活困难。适用前款第二项、第三项的规定,应当以双方离婚为条件。