离婚时男女双方都不要孩子应该:
1、离婚诉讼期间,双方均拒绝抚养子女的,可先行裁定暂由一方抚养;
2、双方应当就子女问题进行协商,哪一方抚养,由另一方支付抚养费;
3、如果双方不能达成协议,则应由人民法院判决由有能力条件的一方抚养。法院会根据实际情况,酌情判决孩子由谁抚养。
【本文关联的相关法律依据】
《中华人民共和国民法典》
第三十六条 父母与子女间的关系,不因父母离婚而消除。离婚后,子女无论由父或母直接抚养,仍是父母双方的子女。离婚后,父母对于子女仍有抚养和教育的权利和义务。离婚后,哺乳期内的子女,以随哺乳的母亲抚养为原则。哺乳期后的子女,如双方因抚养问题发生争执不能达成协议时,由人民法院根据子女的权益和双方的具体情况判决。