男女离婚时候是否要退回彩礼，还需要看实际的情况是否构成了彩礼返还的条件，如果构成了彩礼返还的条件，可以依法要求退回。可以要求返还彩礼的情形包括3种：
1.给付彩礼后悔婚，双方未办理结婚登记的；
2.双方即使已经办理结婚登记手续，但确未共同生活过就离婚的；
3.婚前给付彩礼导致给付人生活困难，离婚时也可以此为由要求返还彩礼。
【法律依据】
《民法典》第一千零六十二条，夫妻在婚姻关系存续期间所得的下列财产，为夫妻的共同财产，归夫妻共同所有：
（一）工资、奖金、劳务报酬；
（二）生产、经营、投资的收益；
（三）知识产权的收益；
（四）继承或者受赠的财产，但是本法第一千零六十三条第三项规定的除外；
（五）其他应当归共同所有的财产。夫妻对共同财产，有平等的处理权。
