离婚协议书上我带孩子两年，他给扶养费，现在他不让我带了，我可以告他违约吗

1、如果协议有约定的按照约定处理即可；
2、协议中由有关定金的规定的，按照规定；
3、如果约定的是订金，而协议的相关内容是关于定金的，则要按照定金的约定处理；
4、造成损失的，还要承担相应的赔偿 如果你喜欢打官司，那你就直接上法院告他，上诉理由：合同侵权违约。 　房屋租赁合同中违约条款是按照《合同法》的规定执行的。
　　一,第一百零七条　当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
　　二,"应当承担继续履行、采取补救措施或者赔偿损失等违约责任"
　　1,"应当承担继续履行",《合同法》第一百一十条　当事人一方不履行非金钱债务或者履行非金钱债务不符合约定的，对方可以要求履行，但有下列情形之一的除外：
　　
(一)法律上或者事实上不能履行；
　　
(二)债务的标的不适于强制履行或者履行费用过高；
　　
(三)债权人在合理期限内未要求履行。

有的，我国《婚姻法》第31条规定：“男女双方自愿离婚的，准予离婚。双方必须到婚姻登记机关申请离婚。婚姻登记机关查明双方确实是自愿并对子女和财产问题已有适当处理时，发给离婚证。
”双方是协议离婚，对子女问题的具体处理一般是应在离婚协议书上写明关于子女愿意随哪方生活。
　　“感情确已破裂”是实体性规定，是准予离婚的法定条件。“调解无效”则是程序性规定，不能视为判决离婚的法定条件。
审理离婚案件应当进行调解，调解无效的案件，许多是感情确已破裂的，从这个意义上来说，“调解无效”是“感情确已破裂”的一种反映。
而有一些离婚
案件，虽然是“调解无效”，但并非是“夫妻感情确已破裂”。
在调解工作中，往往存在着力与不力，深入与不深入等差别，直接影响着调解效果。多年的民事审判实践明，“调解无效”和“感情确已破裂”的含义不完全相同，“调解无效”并不都等于“感情确已破裂”。
因此，不应当把“调解无效”作为认定“感情确已破裂”的根据。在审判实践中，既不要把“感情确已破裂”与“调解无效”完全等同起来。也不要把“调解无效”简单地作“感情确已破裂”的标志。
更不要把“调解无效”作为判决离婚的法定条件。判决离婚的法定条件只是“感情确已破裂”。

婚外情并不影响孩子的抚养问题。协议离婚，双方都同意离婚，对于财产分割和子女抚养也是双方协商，达成一致意见，所以协议离婚的话，孩子的抚养你们两个人协商解决，如果你老公同意由你抚养，那么你们到婚姻登记处办理协议离婚，离婚协议上会注明孩子归你抚养，持离婚协议你可以将孩子的户口迁到你的户口上。