1、离婚有两种方式,一是协议离婚,二是诉讼离婚。协议离婚需要双方协商,但由于对方智障,可能是法律上的限制民事行为能力人,是否可协议离婚,还需看对方行为能力情况,即便协商,也需要其本人及他的其他亲属或居委会同意才行;此外,以你讲的情况,初次起诉离婚,法院应该是不会支持的,可能需要持续一段时间才行。
2、孩子抚养权归男方后,可以再要回来,但需要走程序;当你想要回孩子抚养权时,孩子已经比较大了,孩子自己的意愿对抚养权变更有很大的影响,那时孩子还愿不愿意和你一起生活就很难说了。
3、起诉离婚需要准备诉状、结婚证、身份证、感情破裂的证据等。
建议你通过居委会或妇联解决自己的问题;如果要起诉,建议你到本地司法局申请法律援助。