我丈夫欺骗了他，把孩子带给了那个女孩，他让我回来离婚，我来到他家，他没有回来。

法律上没有出轨这个词语，只有非法同居，重婚等等。那么，出轨属于过错方，有外遇离婚只不过是离婚的一种原因，离婚的原因并不会影响离婚的方式。按照我国法律的规定，离婚的方式有协议离婚和诉讼离婚两种。
所以，有外遇怎么离婚？外遇离婚怎么办理？答案自然是协议离婚或者诉讼离婚。

双方在离婚时自行协议孩子抚养权归属，达不成协议，可以起诉解决。
最高人民法院印发《关于人民法院审理离婚案件处理子女抚养问题的若干具体意见》的通知
1、两周岁以下的子女，一般随母方生活。母方有下列情形之一的，可随父方生活：
（1）患有久治不愈的传染性疾病或其他严重疾病，子女不宜与其共同生活的；
（2）有抚养条件不尽抚养义务，而父方要求子女随其生活的；
（3）因其他原因，子女确无法随母方生活的。
2、父母双方协议两周以下子女随父方生活，并对子女健康成长无不利影响的，可予准许。
3、父方与母方抚养子女的条件基本相同，双方均要求子女与其共同生活，但子女单独随祖父母或外祖父母共同生活多年，且祖父母或外祖父母要求并且有能力帮助子女照顾孙子女或外孙子女的，可作为子女随父或母生活的优先条件予以考虑。
4、父母双方对十周岁以上的未成年子女随父或随母生活发生争执的，应考虑该子女的意见。
5、在有利于保护子女利益的前提下，父母双方协议轮流抚养子女的，可予准许。

法律规定：一方被依法判处长期徒刑，或其违法、犯罪行为严重伤害夫妻感情的，一方坚决要求离婚，经调解无效，可依法判决准予离婚。没有规定坐牢或者保外就医人员不能办理离婚手续。
　　离婚需要双方一起到一方户籍所在地民政部门申请办理，
　　《婚姻登记条例》：
　　第十条 内地居民自愿离婚的，男女双方应当共同到一方当事人常住户口所在地的婚姻登记机关办理离婚登记。
中国公民同外国人在中国内地自愿离婚的，内地居民同香港居民、澳门居民、台湾居民、华侨在中国内地自愿离婚的，男女双方应当共同到内地居民常住户口所在地的婚姻登记机关办理离婚登记。