双方已经离婚，离婚协议上写的房产归女方所有，但是男方现在不走而且趁女方不在家，带别的女性回家，现在能怎么解决

可以起诉要求归你，执行

法律分析：1、离婚协议载明房产归女方所有的，男方应当协助男方办理过户手续。如男方在离婚后拒不协助女方过户的，女方可以到法院起诉，请求法院确认对房屋的所有权并依法办理过户手续。
2、离婚协议分配的房产尚有贷款未还清的，不影响房屋产权的变更。但银行在房屋产权变更后，仍有权向原贷款人要求偿还到期本息。例如：属于夫妻二人共同贷款的，夫妻二人离婚后，都承担向银行还款的义务。法律依据：《中华人民共和国民法典》
第一千零七十六条 夫妻双方自愿离婚的，应当签订书面离婚协议，并亲自到婚姻登记机关申请离婚登记。
离婚协议应当载明双方自愿离婚的意思表示和对子女抚养、财产以及债务处理等事项协商一致的意见。
第一千零七十九条 夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。
人民法院审理离婚案件，应当进行调解；如果感情确已破裂，调解无效的，应当准予离婚。
有下列情形之一，调解无效的，应当准予离婚：
（一）重婚或者与他人同居；
（二）实施家庭暴力或者虐待、遗弃家庭成员；
（三）有赌博、吸毒等恶习屡教不改；
（四）因感情不和分居满二年；
（五）其他导致夫妻感情破裂的情形。
一方被宣告失踪，另一方提起离婚诉讼的，应当准予离婚。
经人民法院判决不准离婚后，双方又分居满一年，一方再次提起离婚诉讼的，应当准予离婚。

协商不成诉讼解决

需根据证据情况确定