首先，需要明确的是，无论是男方还是女方出轨，都不应该影响到孩子的抚养权。因此，在考虑抚养权的分配问题时，需要以孩子的最大利益为出发点，而不是以出轨方的性别为依据。
根据法律规定，对于未成年子女的抚养权，一般由父母协商一致，并经过法院的确认。如果父母无法达成一致，法院会根据孩子的利益进行裁定。
在考虑抚养权归属时，需要综合考虑以下因素：
1. 孩子的年龄和健康状况：不同年龄段的孩子需要不同的抚养方式，孩子的健康状况也需要考虑。
2. 父母的经济状况和能力：父母的经济状况和能力是保障孩子成长的重要因素，需要充分考虑。
3. 孩子的意愿：在一定年龄段，法院会考虑孩子的意愿，但不会将其作为唯一的决定因素。
综上所述，出轨方无论是男方还是女方，对于孩子的抚养权都不应该有影响。在处理这种情况时，应以孩子的利益为出发点，根据各种因素全面考虑，确定最终的抚养权归属。
