首先需要明确的是，夫妻出现矛盾或者其中一方出轨并不等同于可以随意要回抚养权。在家庭法中，解决夫妻离婚和亲子关系等问题需要遵循法律程序和原则。特别是在涉及到子女的抚养问题时，更需要精准的考量。
所以，老公出轨并不能单独成为要回抚养权的法律依据，还需要根据实际情况进行综合评估。例如：
1.孩子的年龄和身体状况。年幼的孩子需要在亲近的父母身边成长，因此需要考虑孩子的抚养主要归属权。
2.孩子的生活和成长环境。孩子的成长需要一个稳定、健康的生活环境，包括居住、教育、社交等多方面因素。离婚后是否有能力给孩子营造一个和谐稳定的家庭环境，以及是否有稳定的收入和住房等问题都需要考虑到。
3. 父母的抚养能力。在考虑归属孩子的抚养主要权时，还需要注意父母个人的抚养能力，包括精神、肉体、经济等方面。
总的来说，离婚分手对孩子的影响非常大。如何保障孩子的利益，是需要评估多方面因素之后决定的，不能将单一因素作为主要考虑因素。当然，如果出轨确实造成了对孩子的不良影响，可以在法律程序中提供相应的证据材料，以此影响法院对于抚养权归属的判断和决策。
