孩子的由谁抚养如果双方不能协商的，那就需要由法院来判决。
法院会综合考虑全案情况，但是否出轨并不在考虑范围之内，因为出轨并不代表没有能力抚养好孩子
判决孩子的抚养权归谁，主要考虑以下因素：
1、两周岁以下的子女，一般随母方生活。若母亲患有久治不愈的传染性疾病或其他严重疾病的;有抚养条件不尽抚养义务的，或其他原因无法与母亲生活的，子女可随父方生活。
2、对两周岁以上未成年的子女，抚养权由父母协商解决，协商不成的，法院将按照有利于子女成长的原则进行判决，一般来说，有下面条件的可以优先考虑子女随其生活：其中一方已做绝育手术或丧失生育能力的;一方无子女，而另一方有其他子女的;子女单独随祖父母或外祖父母生活多年的，老人要求并有能力照顾孩子的等。
3、八周岁以上的未成年子女已经有了基本的判断能力，随父还是随母生活应该征求子女本人的意见。
4、在有利于保护子女利益的前提下，父母双方也可以协议轮流抚养子女。
法律依据：
《中华人民共和国民法典》第一千零八十四条 父母与子女间的关系，不因父母离婚而消除。离婚后，子女无论由父或者母直接抚养，仍是父母双方的子女。
离婚后，父母对于子女仍有抚养、教育、保护的权利和义务。
离婚后，不满两周岁的子女，以由母亲直接抚养为原则。已满两周岁的子女，父母双方对抚养问题协议不成的，由人民法院根据双方的具体情况，按照最有利于未成年子女的原则判决。子女已满八周岁的，应当尊重其真实意愿。
华律网温馨提示：
《民法典》自2021年1月1日起正式施行，《婚姻法》《继承法》《民法通则》《收养法》《担保法》《合同法》《物权法》《侵权责任法》《民法总则》同时废止。如果您涉及《民法典》规定的其他问题可#咨询华律网律师#